騰訊云專家集結(jié)亮相 KubeCon2021,門票100張免費送
自 2018 年以來,歷年的 KubeCon + CloudNativeCon+ Open Source Summit China 匯聚了全球最活躍的開源云原生社區(qū)、最先進(jìn)的技術(shù)代表與行業(yè)的最佳落地實踐,推動云原生計算領(lǐng)域的知識更新和技術(shù)進(jìn)步。
由于疫情的原因,2021年的峰會將采用線上虛擬大會的形式舉辦,大會專題論壇涵蓋云基礎(chǔ)設(shè)施、人工智能與數(shù)據(jù)、CI/CD、存儲、定制和擴展 Kubernetes、服務(wù)網(wǎng)格、無服務(wù)器、Linux 系統(tǒng)等 21 個云原生與開源技術(shù)細(xì)分領(lǐng)域,將為開發(fā)者們帶來近百場云原生技術(shù)干貨分享。
騰訊云一直致力于云原生領(lǐng)域的技術(shù)探索,幫助企業(yè)和開發(fā)者快速落地云原生,積極投身云原生生態(tài)共建,助力解決企業(yè)云原生改造最后一公里問題,還推出燎原社云原生技術(shù)實戰(zhàn)營等服務(wù)。在 KubeCon2021,騰訊資深云原生技術(shù)專家們將給大家?guī)矸浅>实募夹g(shù)分享,內(nèi)容涵蓋K8s、邊緣計算、服務(wù)網(wǎng)格等云原生技術(shù)細(xì)分領(lǐng)域。
讓我們來看看騰訊的專家團(tuán)隊們給大家?guī)淼淖h題有哪些?
議程安排
唐聰 & 王超凡
騰訊高級軟件工程師
演講主題:如何有效管理數(shù)以萬計的 etcd 集群?
演講時間:2021年12月9日 11:20-11:55
議題簡介:在管理 k8s 群集的過程中,您可能會遇到許多 etcd 管理和穩(wěn)定性問題。例如,如何通過可視化平臺管理大量 etcd 集群?如何自動發(fā)現(xiàn) etcd 集群的潛在危害,及時報警,甚至實現(xiàn)自愈?如何順利地將 k8s etcd 遷移到無停機時間的高性能 etcd 群集?騰訊是一家大型互聯(lián)網(wǎng)公司和云服務(wù)提供商。騰訊 Kubernetes 引擎擁有豐富的大規(guī)模 k8s 集群管理經(jīng)驗,在騰訊云上管理數(shù)萬個 k8s 集群。騰訊 Kubernetes 引擎已經(jīng)實現(xiàn)了開源的可視化 etcd 管理平臺 kstone,提供 etcd 集群注冊和管理、檢查、優(yōu)化建議、備份、遷移、數(shù)據(jù)可視化等?;?kstone 項目,騰訊 Kubernetes 引擎有效地管理了數(shù)萬個 etcd 集群,這大大降低了運營和維護(hù)成本。
陳東東 & 陳凌鵬
騰訊高級工程師
演講主題:Caelus-基于kubernetes的全場景在離線混部
演講時間:2021年12月9日 12:10-12:45
議題簡介:很多大數(shù)據(jù)任務(wù)具有實時性要求不高、運行時間較短、資源規(guī)格小等特點,而在線應(yīng)用的資源使用通常具有潮汐的特點,因此可以通過混部的方式,讓大數(shù)據(jù)任務(wù)復(fù)用在線應(yīng)用的空閑資源,擴充可用資源,降低成本。本主題介紹了騰訊大數(shù)據(jù)團(tuán)隊研發(fā)的全場景在離線混部系統(tǒng)Caelus。Caelus支持容器化和非容器化等多種在線場景,同時兼容YARN生態(tài)和云原生大數(shù)據(jù)。系統(tǒng)內(nèi)集成了指標(biāo)收集、資源畫像、資源隔離、干擾檢測、離線驅(qū)逐等模塊,在保證服務(wù)質(zhì)量(在線和離線)的前提下,最大化提升資源利用率,尤其通過引入eBPF技術(shù),對干擾檢測做進(jìn)一步的增強。目前Caelus已經(jīng)在公司內(nèi)部落地廣告、存儲等業(yè)務(wù),同時也支持了騰訊云外部業(yè)務(wù)。陳家豪
騰訊高級軟件工程師
演講主題:利用 KServe(KFServing)加速聯(lián)邦學(xué)習(xí)的模型部署
演講時間:2021年12月9日 13:15-13:50
議題簡介:聯(lián)邦學(xué)習(xí) (FL) 是近年來發(fā)展最快的機器學(xué)習(xí) (ML) 技術(shù),它解決了數(shù)據(jù)孤島問題,同時加強了隱私和安全性。與傳統(tǒng)的機器學(xué)習(xí)相比,聯(lián)邦學(xué)習(xí)通常部署在不同的站點/邊緣,這意味著聯(lián)邦學(xué)習(xí)推理服務(wù)需要一個高效且靈活的平臺,以適應(yīng)不同的框架和硬件。Kubeflow 的 KFServing 組件為本地推理提供了簡單、高效、可插拔和全生命周期的解決方案,完全符合聯(lián)邦學(xué)習(xí)的需要。KubeFATE 是 Linux 基金會的一個開源項目,在 Kubernetes 上提供 FL 的云原生管理,并與 Kubeflow 兼容。講座介紹了使用 KFServing 為 KubeFATE 的聯(lián)邦學(xué)習(xí)模型提供服務(wù)的實踐,包括:1.簡要介紹 Kubeflow、KFServing 和推斷服務(wù)工作流程 2.聯(lián)邦學(xué)習(xí)基礎(chǔ),不同的聯(lián)邦學(xué)習(xí)算法類型和用例 3.演示如何從水平訓(xùn)練的聯(lián)邦學(xué)習(xí)模型創(chuàng)建服務(wù)。張曦耀 & 劉旭
騰訊云產(chǎn)品經(jīng)理&高級軟件工程師
演講主題:Envoy 網(wǎng)格加速從 iptables 到完全 BPF
演講時間:2021年12月9日 13:15-13:50
議題簡介:eBPF sockmap 已經(jīng)成為一種為服務(wù)網(wǎng)格加速 Envoy 和容器之間本地進(jìn)程通信的理想方法。然而,這一方法依賴于 iptables 來實現(xiàn)透明的流量劫持。這已經(jīng)成為了系統(tǒng)性能的主要瓶頸。本次討論將從針對當(dāng)前解決方案、來自社區(qū)的 Cilium 以及我們?nèi)ツ暝?KubeCon China 中引入的輕量級方法開始進(jìn)行詳細(xì)調(diào)查。我們將解釋 iptables 重定向如何影響入站和出站流量上的 sockmap 匹配結(jié)果。然后我們將展示我們的第一個類解決方案,此類方案根本不使用 iptables。此類解決方案:1. 通過掛鉤綁定調(diào)用,使用 eBPF 定向入站流量到 envoy。2. 使用 eBPF 執(zhí)行透明出站流量重定向。3. 為 Daemonset 部署和維護(hù)提供集成的控制面,并通過注釋和配置地圖進(jìn)行完全控制。楊思杰
騰訊高級工程師
演講主題:BFE:企業(yè)級七層負(fù)載均衡開源軟件
演講時間:2021年12月10日 11:20-11:55
議題簡介:這里將對CNCF沙盒項目BFE做一個介紹。BFE是使用Go語言編寫的現(xiàn)代七層負(fù)載均衡軟件。在百度內(nèi)部,BFE每天轉(zhuǎn)發(fā)超過1萬億請求。在百度以外,BFE也被招商銀行、cctv.com、www.so.com等組織使用。首先將對負(fù)載均衡技術(shù)的發(fā)展趨勢做一個討論。然后將介紹BFE如何設(shè)計以如何滿足企業(yè)級應(yīng)用場景的需求。由于使用了Go語言,BFE可以提供高可靠性,并且易于增加新功能。BFE的轉(zhuǎn)發(fā)表可以支持大規(guī)模的轉(zhuǎn)發(fā)規(guī)則,同時可以支持復(fù)雜的條件表達(dá)式。BFE可用于在多個Kubernetes集群間調(diào)度流量。BFE內(nèi)置很多內(nèi)部的指標(biāo)用于反映實時的狀態(tài)。梁豪 & 王冬
騰訊邊緣計算開發(fā)工程師&邊緣計算專家
演講主題:SuperEdge 將 Kubernetes 推廣到邊緣的技術(shù)解密
演講時間:2021年12月10日 12:10-12:45
議題簡介:SuperEdge 將 Kubernetes 的中心管理能力無縫下沉到邊緣計算領(lǐng)域和分布式云管理領(lǐng)域,那么 SuperEdge 是如何實現(xiàn)的呢?原生的 Kubernetes 能力擴展到邊緣的過程中又遇到了什么樣的問題,SuperEdge又是如何解決的呢?邊緣 Kubernetes 又將面對哪些挑戰(zhàn)和機遇?本次分享將您揭開神秘的面紗,帶您了解 SuperEdge 設(shè)計背后的來龍去脈。向您介紹為什么需要云邊隧道,邊緣自治是如何實現(xiàn)的,ServiceGroup 是如何管理海量邊緣站點的,以及邊緣節(jié)點宕機后是又是如何被感知到的,還有SuperEdge最佳實踐等技術(shù)干貨……歡迎傾聽背后的秘密。李穎欣
騰訊高級工程師
演講主題:C++ 工作流:基于任務(wù)的并行計算和一部網(wǎng)絡(luò)引擎
演講時間:2021年12月10日 12:10-12:45
議題簡介:Workflow于 2020 年開源,是搜狗的C++服務(wù)器引擎,計算調(diào)度與異步通信無縫結(jié)合結(jié)合,支撐搜狗幾乎所有后端C++在線服務(wù),包括所有搜索服務(wù),云輸入法,在線廣告等,每日處理超百億請求。不僅包括通信、計算、文件IO、定時器、計數(shù)器等異步資源,而且創(chuàng)新性引入的任務(wù)流概念,使得開發(fā)者得以把異步任務(wù)組裝起來實現(xiàn)復(fù)雜的業(yè)務(wù)邏輯。內(nèi)部自帶多種通用協(xié)議,跨平臺、支持多種操作系統(tǒng),自帶服務(wù)治理與負(fù)載均衡。是一個并行計算與異步通信融為一體的編程范式。https://www.github.com/sogou/workflow
謝遠(yuǎn)東
騰訊云高級工程師
演講主題:Fluid:Kubernetes 原生分布式數(shù)據(jù)集協(xié)調(diào)器和加速器
演講時間:2021年12月10日 13:15-13:50
議題簡介:在公共云上使用 Kubernetes 運行大數(shù)據(jù)和人工智能應(yīng)用成為新趨勢。然而,在 S3、谷歌云存儲、Hadoop 分布式文件系統(tǒng) (HDFS) 等云分解環(huán)境中訪問數(shù)據(jù),極大地挑戰(zhàn)了訓(xùn)練性能,限制了計算的可伸縮性。車漾和謝遠(yuǎn)東將介紹 Fluid,以及它如何提高 Kubernetes 中大數(shù)據(jù)和人工智能應(yīng)用程序的性能。Fluid 是一個開源、社區(qū)驅(qū)動、高度協(xié)作的項目,由大學(xué)里的工程師和研究人員提供。它由云原生計算基金會 (CNCF) 作為沙盒項目主辦。在本次分享中,車漾首先會介紹項目動機、以及什么是 fluid;之后,遠(yuǎn)東將會介紹 fluid 體系結(jié)構(gòu)、最新功能、用戶采用情況、項目路線圖、以及新貢獻(xiàn)者如何參與,并展示一個關(guān)于通過 Fluid 加速 AI 計算的演示。