在本屆 LINE Developer Day 2019 開發者大會中,談完了 LINE 的願景以及 LINE Brain 人工智慧計畫後,LINE Verda 部門主管 Yoshihiro Saegusa 接著介紹 LINE 的數據平台以及基礎架構。
你可曾想過,每天在全世界各地有這麼多人使用 LINE、傳送這麼多訊息,這資料量究竟有多麼龐大嗎?根據 LINE 的統計,LINE 每天要處理一兆則紀錄,一天會增加 390TB 的資料量(這還是已壓縮過的),每日需執行 7 萬個不同的資料處理程序,可以想見要管理這些龐大的數據資料是一大挑戰。
LINE 的目標是建立一個統一管理的自助式數據平台,以滿足內部不同職位的人的需求,舉例來說,若 LINE 的產品經理需要取得資料進行分析可以從數據平台中尋找,或是當 LINE 的工程師希望找到產品 Bug 的原因,也可以在數據平台中分析。
要建立這樣的數據平台,第一個挑戰就是關於資料的存取性(Accessibility),就如先前採訪中提到的,LINE 致力於避免數據孤島問題,由於過去 LINE 推出的各種不同服務各自收集到了不同的資料,不過因為資料分散於不同位置,要跨服務進行分析不容易,因此希望透過統一的數據平台來解決數據孤島的情況。
但要怎麼在同一個數據平台提供各種分析環境給多租戶(Multi-tenancy)又是另一個議題了,該怎麼設計多租戶架構,讓不同服務存取資料時不會受到其他服務影響,這就是 LINE 面臨的第二個挑戰。
第三個挑戰則是數據品質(Data Quality),如何有效的提供給 LINE 的兩千多名工程師和開發者,或是 LINE 內部需要資料分析的人有效的數據是 LINE 得要挑戰的問題。
對此,LINE 成立了 Verda 私有雲團隊,透過 60 位基礎架構工程師開發了一個具備快速生命週期的基礎架構(Fast lifecycle Infrastructure),這套架構由遍佈全球的四萬台伺服器組成。
四萬台伺服器是什麼概念呢?這些伺服器疊起來高度大概是 2,200 公尺,也就是大概 3.5 個東京晴空塔高,透過這些伺服器的運作,一天最高可以處理 50 億則訊息,尖峰時段可以支撐 1Tbps 的流量。
由於 Verda 私有雲的管理者就是 LINE 自己的團隊,因此 LINE 可以作為開發人員的後援,不論開發人員需要幾天或是幾週的開發週期,LINE 的快速生命週期基礎架構可以快速調整並解決開發者遇到的運提,讓開發更為順暢。
想看小編精選的3C科技情報&實用評測文,快來加入《T客邦》LINE@查看原始文章- 2019聖誕節慶祝活動|不可不知的聖誕節由來+全台精彩耶誕節看點不容錯過!
- 吃元宵囉!2019冬至將至 這些「冬至湯圓習俗」你知道多少?
- 《日本vs韓國》首爾 / 京都 / 東京,六大絕美夢幻『賞楓景點』大公開!今年好好把握別再錯過!
- 火鍋從北吃到南!精選全台灣人氣鍋物料理店,入手超值餐券讓你秋冬也能暖到心坎裡~
- 感恩節的意義和由來知多少?2019感恩節必吃食物活動大公開!
- 新手露營指南!首選CP值最高、全台最美營地,第一次就上手!
- 2019 全台最夯【跨年行程推薦】:觀景101餐館、路德威手工啤酒餐廳、萬豪INGE'S、高空露天酒吧等10家人氣餐廳,讓你跨年前盡情晚餐、跨年後徹夜狂歡!
- 限量破盤商品天天有!YAHOO奇摩雙11攻略讓你買到手軟
- 2019年感恩節折扣季開跑!全台黑色購物節「最高下殺5折」買到笑嗨嗨
- 網友瘋傳的超準心測:你在圖中最先看到了什麼?一秒看穿你一生中最「難以忘卻」的人!
- 一起來心測!直覺選擇數字1~10,看看你的個性優點是甚麼吧!據說玩過的都話:「挺準的」
- 少女們的童年回憶 五部小時候的懷舊經典卡通,80後一定都知道!
- 大腦構造本來就不一樣!男女生對「喜歡」的認知也大不同~另一半決定追你前都在想什麼?
- 12星座三原型-『固定星座』(金牛、獅子、天蠍、水瓶)才有的共同特質!妳的他原來是固定星座嗎?(中)
- 只要這樣做就沒有不來的桃花!女生這4個瞬間在男生眼裡超有吸引力
- 學會「分手的禮貌」~面對失敗的戀情,就必須分得徹底,成熟女生必讀的分手指南!還自己一個Happy Ending~
- 網友瘋傳的超準心測:從你先吃魚的哪個部位?一秒測出你內心最害怕的「弱點」是什麼!
- 【2019桃園楊梅仙草花節】仙草花海浪漫來襲.交通攻略
- 超有人氣的萌娃們!臭奶呆聲音加上逗趣可愛模樣~讓人好想「抱緊處理」