共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

21世紀,是數(shù)字經(jīng)濟的時代。數(shù)據(jù)已成為企業(yè)和社會最寶貴的資產(chǎn)。在這片前景廣闊的領域里,數(shù)據(jù)發(fā)展的歷史長河埋藏了怎樣的機遇?在未來,數(shù)據(jù)技術將往哪些方向演進?數(shù)據(jù)開發(fā)者又該如何在新時代中,找到自己的職業(yè)發(fā)展的最佳錨點?

2021年4月24日,由騰訊云 TVP 主辦的首屆 Techo TVP 開發(fā)者峰會「數(shù)據(jù)的冰與火之歌——從在線數(shù)據(jù)庫技術,到海量數(shù)據(jù)分析技術」在深圳深鐵皇冠假日酒店成功舉辦。峰會囊括數(shù)據(jù)庫、大數(shù)據(jù)兩大專題,匯聚十二位深耕數(shù)據(jù)技術領域的頂尖大咖,帶來了全天候、全方位、沉浸式的技術分享與交流,為超過500位現(xiàn)場參會的開發(fā)者獻上了一場“最有料、有趣、且有用”的開發(fā)者大會。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

上午·數(shù)據(jù)庫專題

上午,圍繞數(shù)據(jù)庫專題,騰訊云數(shù)據(jù)庫總經(jīng)理 林曉斌帶來了開場致辭,云和恩墨CEO、騰訊云TVP 蓋國強、騰訊云數(shù)據(jù)庫專家工程師 李海翔、微眾銀行數(shù)據(jù)庫平臺室室經(jīng)理、騰訊云TVP 胡盼盼、騰訊云數(shù)據(jù)庫技術總監(jiān) 張青林進行了技術分享。

“分布式數(shù)據(jù)庫已經(jīng)成為行業(yè)必需品,在近幾年也發(fā)展出一些新方向。“在峰會伊始,騰訊云數(shù)據(jù)庫總經(jīng)理 林曉斌對參會的廣大開發(fā)者表達了誠摯的歡迎,同時分享了他對于數(shù)據(jù)庫領域新動向的洞察:”在云原生大潮下,云原生數(shù)據(jù)庫為開發(fā)者們帶來了極大便利。此外,數(shù)據(jù)庫的融合型能力HTAP也是一大趨勢和挑戰(zhàn)。“對此,他表示騰訊云TDSQL在全國第七次人口普查的大考中交出了令人滿意的答卷,本次峰會的分享將會為開發(fā)者們勾勒數(shù)據(jù)技術發(fā)展的全景畫卷。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

騰訊云數(shù)據(jù)庫總經(jīng)理 林曉斌

萬象更新-數(shù)據(jù)庫技術的發(fā)展與未來

云和恩墨CEO、騰訊云TVP 蓋國強是國內(nèi)第一個Oracle ACE及ACE總監(jiān),曾出版多本數(shù)據(jù)庫技術專著,在《萬象更新-數(shù)據(jù)庫技術的發(fā)展與未來》主題分享中,他分別從工業(yè)界與學術界的視角梳理了數(shù)據(jù)庫技術發(fā)展的歷史脈絡,提出目前我們正走向”商業(yè)和開源、SQL和NewSQL交融“的新數(shù)據(jù)庫時代,在新時代,云成為了數(shù)據(jù)庫最重要的一個陣地,下一步的格局將是云的體驗云下化,最終云上和云下趨于一致。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

云和恩墨CEO、騰訊云TVP 蓋國強

而面向未來,企業(yè)需要怎樣的數(shù)據(jù)庫?蓋國強指出,數(shù)據(jù)庫的更迭,不是重走一次長征路,不是功能和體驗的降級,而應該是循環(huán)上升的數(shù)據(jù)庫變更升級歷程,應該是更好的開發(fā)運維體驗、故障自愈、自動化和智能化,同時兼顧投資保護、人才培育。

在分享的最后,蓋國強對國產(chǎn)數(shù)據(jù)庫浪潮之下,正處于迷茫狀態(tài)當中的數(shù)據(jù)開發(fā)者們提出了清晰的方向指引及真誠的建議:從DBA到數(shù)據(jù)庫設計、內(nèi)核研發(fā),對開發(fā)者來說,職業(yè)道路是寬廣而明亮的。面對國產(chǎn)化的行業(yè)變革,數(shù)據(jù)庫從業(yè)人員只有躬身入局,盡早轉(zhuǎn)型,做到“一主一備雙引擎,商用開源兩相宜”,才能夠抓住機遇,領先一步。

分布式數(shù)據(jù)庫的演進

騰訊近十年的分布式數(shù)據(jù)庫技術發(fā)展與騰訊TDSQL研發(fā)團隊所做的理論、創(chuàng)新方面的基礎工作息息相關,作為該團隊的核心力量,騰訊云數(shù)據(jù)庫專家工程師 李海翔帶來了《分布式數(shù)據(jù)庫的演進》主題分享,全面地回顧了分布式數(shù)據(jù)庫技術的發(fā)展歷程,并層層剖析分布式數(shù)據(jù)庫架構(gòu),分布式一致性、計算與存儲技術,以及基于HTAP的TDSQL強一致性技術實踐。

“分布式數(shù)據(jù)庫系統(tǒng)的演進是由內(nèi)在的、本質(zhì)性的需求在推動,高可靠、高可用、高性能、易用性等基礎因素在推動著分布式技術不斷地向前發(fā)展。”李海翔從學術界、工業(yè)界的角度對比分析了分布式系統(tǒng)經(jīng)典架構(gòu)、主流技術的差異。他認為,分布式數(shù)據(jù)庫系統(tǒng)里技術層面最核心的一定是事務,而事務處理會產(chǎn)生數(shù)據(jù)異常。此外,分布式數(shù)據(jù)庫系統(tǒng)還面臨著缺乏一致性所帶來的挑戰(zhàn)。同時,新的硬件在計算、存儲上也面臨挑戰(zhàn)?;谶@些需求,騰訊的TDSQL系統(tǒng)包含了分析、事務處理、強一致等特性。隨后,他詳細地展示了騰訊的TDSQL開源系統(tǒng)3TS如何解決數(shù)據(jù)異常問題,TDSQL研究的基礎技術,也是基于學術界的認識和業(yè)界的現(xiàn)有產(chǎn)品對于強一致的支持程度得出的結(jié)果。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

騰訊云數(shù)據(jù)庫專家工程師 李海翔

分布式數(shù)據(jù)庫在微眾銀行核心系統(tǒng)的實踐

技術的發(fā)展與進步,最終還要回歸到實際的落地與應用,在分布式數(shù)據(jù)庫技術領域,TDSQL在微眾銀行核心系統(tǒng)的大規(guī)模實踐便是一個經(jīng)典的案例。微眾銀行數(shù)據(jù)庫平臺室室經(jīng)理,騰訊云TVP 胡盼盼帶來了《分布式數(shù)據(jù)庫在微眾銀行核心系統(tǒng)的實踐》的行業(yè)實戰(zhàn)分享。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

微眾銀行數(shù)據(jù)庫平臺室室經(jīng)理、騰訊云TVP 胡盼盼

準確把握了金融行業(yè)數(shù)據(jù)庫”國產(chǎn)化、去中心化、開源化“的三大趨勢,微眾銀行在成立之初就確定要做單元化的分布式架構(gòu)。在單元化架構(gòu)之上,微眾銀行擁有2地7中心的機房IDC架構(gòu);目前所有的核心系統(tǒng)基本使用TDSQL承載。這樣的數(shù)據(jù)庫架構(gòu)部署在高可靠、高可用等方面優(yōu)點凸顯。如今微眾銀行的TDSQL規(guī)模承載了數(shù)百個銀行的核心系統(tǒng),目前已達到單日峰值6億+金融交易量,10萬+最高TPS峰值。

未來,微眾銀行數(shù)據(jù)庫的演進方向會朝硬件國產(chǎn)化、云原生與容器化、智能化預警(AIops)發(fā)展。

騰訊云TDSQL-C架構(gòu)探索和實踐

TDSQL是峰會中被多次提及的熱門話題,TDSQL-C作為騰訊自主研發(fā)的存儲和計算分離的數(shù)據(jù)庫產(chǎn)品,實現(xiàn)了哪些突破性的創(chuàng)新?騰訊云數(shù)據(jù)庫技術總監(jiān) 張青林帶來了《騰訊云TDSQL-C架構(gòu)探索和實踐》的詳盡解析。

針對傳統(tǒng)CDB所面臨的存儲容量、拓展性、可用性、可靠性這四大方面的挑戰(zhàn),騰訊云TDSQL-C應運而生。它具有海量存儲、智能擴容、線性擴充性能,兼容MySQL和PG等優(yōu)異特性。這些設計源于解決用戶實際問題的需要,同時實現(xiàn)了幾大突破:突破Serverless場景、IO Bound性能優(yōu)化、無感知備份。目前,TDSQL-C仍在不斷革新,張青林分享了后續(xù)的兩大重點發(fā)展方向:實現(xiàn)云時代的極簡數(shù)據(jù)庫運維,以及云時代的Low Database業(yè)務開發(fā)。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

騰訊云數(shù)據(jù)庫技術總監(jiān) 張青林

下午·大數(shù)據(jù)與數(shù)據(jù)分析專題

下午,圍繞大數(shù)據(jù)與數(shù)據(jù)分析專題,騰訊云大數(shù)據(jù)產(chǎn)品總經(jīng)理聶晶進行了開場致辭,隨后,易觀CTO、騰訊云TVP 郭煒,騰訊云彈性MapReduce技術負責人 陳龍,騰訊大數(shù)據(jù)專家工程師 杜立,偶數(shù)科技CEO、騰訊云TVP 常雷,騰訊大數(shù)據(jù)專家工程師 于華麗帶來了技術分享。在峰會的最后,由支流科技CEO、騰訊云TVP 溫銘擔任主持人,五位大咖嘉賓圓桌論道,就《從行業(yè)到職業(yè),看數(shù)據(jù)的現(xiàn)在與未來》這一話題展開了精彩的交流。

在開場致辭中,騰訊云大數(shù)據(jù)產(chǎn)品總經(jīng)理聶晶分享了他對數(shù)據(jù)分析領域的趨勢洞見:數(shù)據(jù)分析領域正在快速演進迭代,批流一體數(shù)倉的實時化、數(shù)據(jù)湖等新技術、新架構(gòu)持續(xù)涌現(xiàn);大批優(yōu)秀的工程師、開源組織和商業(yè)化公司持續(xù)入場,未來充滿無限可能。在聶晶看來,云已經(jīng)成為企業(yè)IT發(fā)展的必經(jīng)路徑,云廠商也在為數(shù)據(jù)分析領域提供更多動能。最后,他對Techo TVP開發(fā)者峰會提出了寄語與期待:”Techo TVP 提供了一個很好的技術交流平臺,讓我們推進技術的普惠化與平民化,將數(shù)據(jù)分析技術有效地落地到企業(yè)發(fā)展的方方面面。”

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

騰訊云大數(shù)據(jù)產(chǎn)品總經(jīng)理 聶晶

ClickHouse最新技術的實踐與應用

易觀CTO、騰訊云TVP郭煒帶來了《ClickHouse 最新技術的實踐與應用》的主題演講,為大家分享了大數(shù)據(jù)分析引擎的黑馬 ClickHouse 的“前世今生”、實踐應用、最新feature以及未來暢想。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

易觀CTO、騰訊云TVP 郭煒

ClickHouse 是“戰(zhàn)斗民族”俄羅斯搜索巨頭Yandex公司開源的一個極具"戰(zhàn)斗力"的實時數(shù)據(jù)分析數(shù)據(jù)庫。在全球范圍內(nèi),ClickHouse 單表查詢比其他引擎要快數(shù)倍以上,在過去的4年以來未曾有對手。ClickHouse 為什么會這么快?郭煒指出,這得益于其極致的向量化計算引擎、極致的列式存儲引擎,以及極致的系統(tǒng)研發(fā)思維和社區(qū)精神。

對于廣大開發(fā)者所關注的應用實戰(zhàn)話題,郭煒結(jié)合騰訊音樂、新浪、喜馬拉雅、B站等豐富的案例,對ClickHouse的典型特性優(yōu)勢、具體使用場景進行了詳盡而生動的講解。

在未來,ClickHouse會在具體深入場景和結(jié)合解決客戶使用數(shù)據(jù)的最后一公里上深耕,同時,中國社區(qū)也在思考 ClickHouse 的商業(yè)化道路。

云原生環(huán)境下大數(shù)據(jù)基礎技術演進

近年來,云原生變得炙手可熱,在《云原生環(huán)境下大數(shù)據(jù)基礎技術演進》的主題分享中,騰訊云彈性MapReduce技術負責人陳龍對云原生的概念給出了清晰的定義,“云原生是在源碼轉(zhuǎn)化為產(chǎn)品的過程中,充分利用云計算軟件交付模型,來構(gòu)建和運行應用程序。” 它能實現(xiàn)整個軟件生產(chǎn)的工業(yè)化,進而實現(xiàn)降本增效。

那么,如何實現(xiàn)大數(shù)據(jù)云原生?陳龍認為主要從以下四點出發(fā):工業(yè)化交付、儲存與計算成本量化、負載自適應、以及面向數(shù)據(jù)。在落地的技術上,陳龍做了進一步的說明:結(jié)合云基礎設施和Hadoop生態(tài)技術棧,騰訊云的數(shù)據(jù)湖解決方案將Hadoop集群的拓撲進行了改進,分為Master、Router、Core和Task。為保障云上大數(shù)據(jù)處理的性能,騰訊云大數(shù)據(jù)提供從基礎設施硬件層到組件內(nèi)核以及架構(gòu)的完善的產(chǎn)品能力支持,即便選擇用傳統(tǒng)模式構(gòu)建大數(shù)據(jù)應用,云主機也提供了多種硬件選擇。

最后,陳龍也預測了下一代大數(shù)據(jù)基礎處理引擎的形態(tài)。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

騰訊云彈性MapReduce技術負責人 陳龍

對于廣大數(shù)據(jù)開發(fā)者所高度關注的,“在新時代應如何規(guī)劃自身的職業(yè)發(fā)展”的問題,作為在數(shù)據(jù)領域深耕多年的前行者,各位圓桌嘉賓對后來人真誠地提出了以下建議。

郭煒則運用了一個形象的比喻來進行說明:如今數(shù)據(jù)和業(yè)務、和場景的結(jié)合越來越緊密,未來的組件將百花齊放,和場景深度結(jié)合。因此,做數(shù)據(jù)的小伙伴要變成“龍”式的數(shù)據(jù)工程師,必須結(jié)合數(shù)據(jù)分析師、數(shù)據(jù)工程師、產(chǎn)品經(jīng)理乃至運營,既要有專業(yè)知識,也要不斷學習,拓展自己的知識邊界,再加上主營的某種技術,才能成為真正的面向未來的數(shù)據(jù)工程師。

實時流式計算實踐與優(yōu)化

隨著互聯(lián)網(wǎng)場景的不斷深入,在大數(shù)據(jù)領域除了海量數(shù)據(jù)查詢外,對數(shù)據(jù)的實時性也提出了更多更高的要求,越來越多企業(yè)將 Flink SQL 作為實時計算的工具。那么在使用 Flink SQL 會遇到什么痛點和挑戰(zhàn)?如何進行優(yōu)化和擴展?騰訊云實時計算服務又有哪些最新的實踐?騰訊大數(shù)據(jù)專家工程師 杜立帶來了他的分享《實時流式計算實踐與優(yōu)化》。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

騰訊大數(shù)據(jù)專家工程師 杜立

騰訊云實時計算服務的研發(fā)方向分為四部分:一是提供一站式的開發(fā)平臺,降低用戶的接入和學習成本。二是保證用戶實時部署前的數(shù)據(jù)正確性,開發(fā)后可直接進行線上測試。三是一站式部署,實時的計算任務可直接部署至騰訊云的TKE容器。四是提供一系列的運維工具,幫助用戶快速解決線上問題。

針對Flink SQL當前的痛點,杜立重點分享了騰訊在Flink SQL上所做的擴展與優(yōu)化:首先是擴展語法方面,在Windowing Table-valued Function和Stream-Dimension Table Join上進行擴展,對Window內(nèi)數(shù)據(jù)集進行交、并、差等操作的新語法。其次是新增窗口類型,增強了增量窗口和Tumble窗口類型,減少下游的數(shù)據(jù)接收壓力。第三是優(yōu)化了回撤流性能,針對SQL兩層Group by場景、Sink場景、Outer Join場景,分別做了不同方案的優(yōu)化。經(jīng)過優(yōu)化后向下游接收的數(shù)據(jù)量能實現(xiàn)30倍的減少,100萬的數(shù)據(jù)有接近20%的提升。

新一代云原生數(shù)據(jù)倉庫的應用

云原生數(shù)據(jù)倉庫,是大數(shù)據(jù)領域最前沿的趨勢之一。隨著云計算的普及,傳統(tǒng)的數(shù)據(jù)倉庫架構(gòu)在資源彈性,成本等方面已經(jīng)很難適應云原生的要求。云原生數(shù)據(jù)倉庫架構(gòu)又有哪些優(yōu)勢?如何充分結(jié)合云原生數(shù)據(jù)倉庫的特點來實現(xiàn)云上大數(shù)據(jù)應用?在《新一代云原生數(shù)據(jù)倉庫的應用》分享中,偶數(shù)科技CEO、騰訊云TVP 常雷對云數(shù)倉的定義、架構(gòu)、應用場景做了全面的介紹。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

偶數(shù)科技CEO、騰訊云TVP 常雷

每隔15-20年,數(shù)據(jù)平臺會經(jīng)歷一輪較大的技術變革,新一代的云原生數(shù)據(jù)倉庫在2015年后誕生,如今我們處于智能數(shù)據(jù)云平臺階段。提及云原生的概念,常雷認為,云原生系統(tǒng)的本質(zhì)是“云環(huán)境中可以達到彈性可擴展、容錯性好、松散耦合、易于管理”。而云原生數(shù)據(jù)庫是在公有云、私有云和混合云等新型動態(tài)環(huán)境中,基于存儲與計算分離架構(gòu)的,存儲和計算可以獨立彈性擴展、松散耦合的數(shù)據(jù)庫系統(tǒng)。同時,云原生數(shù)據(jù)庫還需具有高性能、高可擴展、一致性保證、符合標準、容錯、易于管理和多云支持等特性。他還以Snowflake和OushuDB的云原生數(shù)據(jù)倉庫架構(gòu)為例,對以上特點進行了透徹的解析。

此外,常雷提出在新一代云原生架構(gòu)下,數(shù)據(jù)湖正逐漸簡化,出現(xiàn)了“湖倉一體”的概念,一套系統(tǒng)就能實現(xiàn)數(shù)據(jù)加工、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)治理、數(shù)據(jù)科學、機器學習、建模等功能,新一代數(shù)據(jù)云平臺的架構(gòu)解決了傳統(tǒng)的多個集群、多個系統(tǒng)之間做ETL等復雜的問題。

云原生數(shù)據(jù)湖:新一代數(shù)據(jù)架構(gòu)

“云原生數(shù)據(jù)湖架構(gòu)是由傳統(tǒng)大數(shù)據(jù)架構(gòu)上云的缺陷——存算耦合且規(guī)模固定而催生的。”,在《云原生數(shù)據(jù)湖:新一代數(shù)據(jù)架構(gòu)》主題分享中,騰訊大數(shù)據(jù)專家工程師 于華麗指出,面對傳統(tǒng)架構(gòu)成本高、靈活性低、性能差、可靠性不高的痛點,應對的核心是公有云共享經(jīng)濟的兩大機遇——彈性計算和對象存儲。云原生數(shù)據(jù)湖架構(gòu)就是充分結(jié)合云上彈性計算、對象存儲優(yōu)勢和大數(shù)據(jù)前沿數(shù)據(jù)湖技術,構(gòu)建高性價比、高性能的大數(shù)據(jù)平臺。

但目前云原生數(shù)據(jù)湖的構(gòu)建成本高、難度大,要解決數(shù)據(jù)湖架構(gòu)彈性計算、對象存儲、性能補償中的諸多問題,從0打造云原生數(shù)據(jù)湖,需要專業(yè)的公有云背景和數(shù)據(jù)湖技術能力,而騰訊云推出兩款開箱即用的數(shù)據(jù)湖產(chǎn)品,能夠幫助客戶快速構(gòu)建和分析數(shù)據(jù)湖。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

騰訊大數(shù)據(jù)專家工程師 于華麗

騰訊云原生數(shù)據(jù)湖產(chǎn)品具有以下多種優(yōu)勢:

成本低:極致彈性計算、對象存儲5-10倍,成本低;

性能高:對象存儲解決小文件問題、緩存加速、稀疏索引、shuffle性能、commit性能高;

免運維:Serverless形態(tài)降低了運維負擔;

統(tǒng)一和開放:統(tǒng)一數(shù)據(jù)湖存儲、統(tǒng)一元數(shù)據(jù)減少一致性維護工作;聯(lián)邦分析、數(shù)據(jù)湖解決方案滿足數(shù)倉建模、數(shù)據(jù)分析甚至機器學習。

從行業(yè)到職業(yè),看數(shù)據(jù)的現(xiàn)在與未來

在精彩的演講分享后,支流科技CEO、騰訊云TVP 溫銘擔任主持人,提出有關Apache基金會大數(shù)據(jù)項目的“冷與熱”、大數(shù)據(jù)技術的未來演進趨勢、如何平衡云廠商和開源社區(qū)、開源商業(yè)公司之間的關系、國內(nèi)“Snowflake”的誕生條件等頗具前沿性的話題,與常雷、郭煒、陳龍、李海翔四位分享嘉賓齊聚一堂,展開了主題為《從行業(yè)到職業(yè),看數(shù)據(jù)的現(xiàn)在與未來》的深度圓桌對話。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

支流科技CEO、騰訊云TVP 溫銘

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

圓桌論壇

對于廣大數(shù)據(jù)開發(fā)者所高度關注的,“在新時代應如何規(guī)劃自身的職業(yè)發(fā)展”的問題,作為在數(shù)據(jù)領域深耕多年的前行者,各位圓桌嘉賓對后來人真誠地提出了以下建議。

李海翔指出,熱愛是最好的驅(qū)動力,“專注”是最重要的品質(zhì),堅持在喜愛的行業(yè)或方向中深耕,時間久了自然而然會有所獲,有所成。我們說“因為相信,所以看見”。而同時到了今天,更重要的是“因為看見,所以相信”,我們通過十數(shù)年的堅持,在分布式數(shù)據(jù)庫技術創(chuàng)新上有所發(fā)展,今天我們已經(jīng)看到了它的價值和未來,所以我們可以相信,它將有更大的創(chuàng)新和未來,這是驅(qū)使我們將一直堅持和投入的基礎。

陳龍認為,在大數(shù)據(jù)領域,數(shù)據(jù)開發(fā)者可以根據(jù)三個方向來規(guī)劃自身的職業(yè)發(fā)展:第一是內(nèi)核方向,如分布式存儲、分布式計算等偏底層技術方向。第二是數(shù)據(jù)架構(gòu)師,既了解云產(chǎn)品,也了解公司業(yè)務,根據(jù)業(yè)務去規(guī)劃或使用云產(chǎn)品來解決問題。第三是數(shù)據(jù)科學家,真正利用機器學習、算法,以底層支撐的能力去挖掘數(shù)據(jù)之間的關系,進而實現(xiàn)通過數(shù)據(jù)給企業(yè)帶來價值。

郭煒則運用了一個形象的比喻來進行說明:如今數(shù)據(jù)和業(yè)務、和場景的結(jié)合越來越緊密,未來的組件將百花齊放,和場景深度結(jié)合。因此,做數(shù)據(jù)的小伙伴要變成“龍”式的數(shù)據(jù)工程師,必須結(jié)合數(shù)據(jù)分析師、數(shù)據(jù)工程師、產(chǎn)品經(jīng)理乃至運營,既要有專業(yè)知識,也要不斷學習,拓展自己的知識邊界,再加上主營的某種技術,才能成為真正的面向未來的數(shù)據(jù)工程師。

而在常雷看來,中國現(xiàn)在比較缺的是底層的內(nèi)核開發(fā)人才,而內(nèi)核是需要沉淀的,在這一領域持續(xù)深耕、熟悉技術原理、有經(jīng)驗的開發(fā)者未來將得到很好的回報。

最后,溫銘總結(jié)道,開發(fā)者既要“仰望星空”,也要“腳踏實地”,一方面可以多參加像 Techo TVP 開發(fā)者峰會這樣的活動,了解業(yè)界在使用什么技術,比起埋頭做業(yè)務,技術上的交流和探討會帶來更多有價值的東西。另一方面,做基礎的技術研究會非常有價值,我們可以在上面精細深耕,創(chuàng)造一些不僅能給自己公司、業(yè)務帶來價值的事,也能給其他公司、給整個數(shù)據(jù)領域帶來進步的產(chǎn)品。

結(jié)語

本次 Techo TVP 開發(fā)者峰會還為開發(fā)者們準備了豐厚的禮品和精致可口的茶歇,在認真聆聽大咖的技術干貨之余,大家也熱情高漲地參與了拍照打卡、游戲互動。同時,峰會也在線上多渠道進行了同步直播,在直播間、技術社群中,開發(fā)者們也進行著熱烈的交流和討論,峰會收獲了來自參會嘉賓、開發(fā)者們的廣泛好評。

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

共譜數(shù)據(jù)的冰與火之歌:Techo TVP 開發(fā)者峰會圓滿落幕!

參會嘉賓與開發(fā)者合影

正如騰訊云數(shù)據(jù)庫專家工程師李海翔所言,騰訊有豐富的數(shù)據(jù)庫產(chǎn)品,其中部分基于開源項目開發(fā),同時騰訊也在回饋社區(qū)、擁抱開源。不僅是產(chǎn)品,騰訊還在推動基礎研究的技術開源與思想的開源,希望在未來形成良性互動的,更好的互生模式。

作為騰訊云 TVP專門為開發(fā)者舉辦的大型技術交流盛會,未來,Techo TVP 開發(fā)者峰會將繼續(xù)攜手領域大咖,通過最用心的分享、最前沿的洞察、最實際的觀點,為開發(fā)者們獻上一場場“最有料、有趣、且有用”的開發(fā)者峰會。騰訊云 TVP 將始終秉承著“用科技影響世界”的使命,推動技術普惠化、平民化,踐行科技向善的初心和本心。

TVP,即騰訊云最具價值專家(Tencent Cloud Valuable Professional),是騰訊云授予云計算領域技術專家的一個獎項。TVP 計劃致力打造與行業(yè)技術專家的交流平臺,構(gòu)建云計算技術生態(tài),實現(xiàn)“用科技影響世界”的美好愿景。

(免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內(nèi)容或斷開相關鏈接。 )