端到端數(shù)據(jù)戰(zhàn)略，亞馬遜云科技為數(shù)據(jù)服務(wù)帶來了什么？

大約十年前，維克托·舍恩伯格在《大數(shù)據(jù)時代》一書中直言：世界的本質(zhì)是數(shù)據(jù)，大數(shù)據(jù)將開啟一次重大的時代轉(zhuǎn)型。

十年之后，維克托·舍恩伯格的預(yù)言逐漸成真。全球數(shù)字經(jīng)濟近年來的蓬勃發(fā)展，推動了各行各業(yè)的加速轉(zhuǎn)型。如今，數(shù)據(jù)已然成為最重要的生產(chǎn)要素，無論是產(chǎn)業(yè)數(shù)字化，還是企業(yè)數(shù)字化轉(zhuǎn)型，均已離不開數(shù)據(jù)。

但如何把數(shù)據(jù)“用起來”始終是眾多行業(yè)用戶所面臨的一大挑戰(zhàn)。一方面，隨著企業(yè)數(shù)字化轉(zhuǎn)型進入深水期，在逐漸完成上云之后，“用數(shù)”自然而然就成為數(shù)字化轉(zhuǎn)型的階段性重點；另一方面，能否“用好數(shù)”又直接跟接來的“賦智”緊密相關(guān)，直接關(guān)系著企業(yè)未來數(shù)字化轉(zhuǎn)型的成敗。

因此，針對“用數(shù)”打造相應(yīng)的策略、方案和產(chǎn)品就成為云服務(wù)商在當前的重中之重。在2022 re:Invent全球大會上，亞馬遜云科技就正式推出了其端到端數(shù)據(jù)戰(zhàn)略，為廣大上云企業(yè)的用戶帶來了清晰的策略與方法論。

正如亞馬遜云科技數(shù)據(jù)與機器學(xué)習(xí)副總裁 Swami Sivasubramanian博士所言：“端到端數(shù)據(jù)戰(zhàn)略包括三個核心要素：一是面向未來的數(shù)據(jù)基礎(chǔ)設(shè)施；二是跨組織的數(shù)據(jù)鏈接；三是數(shù)據(jù)普惠化。最終目標是幫助企業(yè)將數(shù)據(jù)轉(zhuǎn)化為對業(yè)務(wù)有意義的見解和行動，驅(qū)動企業(yè)借助數(shù)據(jù)進行下一波創(chuàng)新?！?/p>

端到端數(shù)據(jù)戰(zhàn)略解決了什么

數(shù)據(jù)爆炸性增長的年代，把數(shù)據(jù)“用起來”并非易事。

事實上，從最早的大數(shù)據(jù)平臺，到后來的數(shù)據(jù)中臺，再到現(xiàn)在的湖倉一體、數(shù)據(jù)編織（Data Fabric），與數(shù)據(jù)相關(guān)的各色概念層出不窮，用戶們也是應(yīng)接不暇、手足無措，但離真正把數(shù)據(jù)“用起來”尚有著不小差距。

究其原因，數(shù)據(jù)量、數(shù)據(jù)消費群體和數(shù)據(jù)驅(qū)動場景均已經(jīng)發(fā)生了顯著變化。這使得從數(shù)據(jù)收集、數(shù)據(jù)治理到數(shù)據(jù)分析、數(shù)據(jù)管理，再到數(shù)據(jù)價值的實現(xiàn)，涉及到了鏈路極其長且復(fù)雜，很少有用戶能夠完全駕馭。

所以，亞馬遜云科技在積累多年與數(shù)據(jù)相關(guān)的產(chǎn)品、技術(shù)之后，開始打造端到端的數(shù)據(jù)戰(zhàn)略，從數(shù)據(jù)全鏈路的視角幫助用戶們把數(shù)據(jù)“用起來”。

具體來看，亞馬遜云科技認為首先需要面向未來的數(shù)據(jù)基礎(chǔ)設(shè)施。Swami Sivasubramanian博士介紹，面向未來的數(shù)據(jù)基礎(chǔ)設(shè)施應(yīng)具備四個要素：需要有正確的數(shù)據(jù)庫工具來應(yīng)對所有類型的工作負載；可以在大規(guī)模的情況下進行高性能的運行；不需要我們做非常多的重復(fù)工作；以及需要高可靠性和高伸縮性。

顯然，相比于其他廠商，云服務(wù)商在構(gòu)建面向未來的數(shù)據(jù)基礎(chǔ)設(shè)施無疑是領(lǐng)先的。得益于云端各種大規(guī)模場景的不斷驗證，云服務(wù)商們最有條件為數(shù)據(jù)分析與應(yīng)用構(gòu)建起先進的數(shù)據(jù)基礎(chǔ)設(shè)施。

其次，，亞馬遜云科技認為需要實現(xiàn)安全高效的跨組織數(shù)據(jù)鏈接。Swami Sivasubramanian博士介紹：企業(yè)可以使用一個合作系統(tǒng)來連接孤立的團隊，為重要資源創(chuàng)造快捷安全的訪問途徑，使用正確數(shù)據(jù)治理系統(tǒng)，借助高質(zhì)量的工具和數(shù)據(jù)來推動未來的增長。

正所謂數(shù)據(jù)只有充分的流動、共享才能發(fā)揮價值。但數(shù)據(jù)的流動、共享既需要合規(guī)，還需要有安全保障，對于數(shù)據(jù)長鏈路而言，這是巨大挑戰(zhàn)。所以，亞馬遜云科技構(gòu)建安全高效的跨組織數(shù)據(jù)鏈接，推動數(shù)據(jù)有效流動、共享是當前很多用戶所渴望的。

最后，亞馬遜云科技認為需要工具和教育實現(xiàn)數(shù)據(jù)普惠化。事實上，數(shù)據(jù)消費群體持續(xù)擴大是大勢所趨，但數(shù)據(jù)消費者的技能也是把數(shù)據(jù)“用起來”的關(guān)鍵。亞馬遜云科技預(yù)計到2029年，人工智能勞動力將增加100萬個工作崗位，但培育合適的技能和人選來填補這些空缺將是一項重大挑戰(zhàn)。

為此，亞馬遜云科技正在幫助社區(qū)學(xué)院和 MSIs 加大教育力度，推出新的亞馬遜云科技機器學(xué)習(xí)大學(xué)教育培訓(xùn)計劃，提供動手培訓(xùn)課程，為培育新一代勞動力做好準備。

可以看出，在今年2022 re:Invent全球大會上，亞馬遜云科技除了發(fā)布大量針對數(shù)據(jù)的產(chǎn)品與功能之外，也開始用端到端的視角推出數(shù)據(jù)戰(zhàn)略，給予用戶們更加清晰的數(shù)據(jù)“用起來”的思路。

讓數(shù)據(jù)服務(wù)走向簡單化

眾所周知，數(shù)據(jù)服務(wù)與價值實現(xiàn)的鏈路很長，且具有相當?shù)膹?fù)雜性。因此，端到端的數(shù)據(jù)戰(zhàn)略是大勢所趨。但端到端的數(shù)據(jù)戰(zhàn)略并不是簡單的將眾多數(shù)據(jù)服務(wù)、工具和產(chǎn)品進行拼湊與集成，而是需要深度整合、優(yōu)化，實現(xiàn)使用體驗與效率質(zhì)的飛躍。

在亞馬遜云科技看來，數(shù)據(jù)服務(wù)需要恰當?shù)墓ぞ?、有效的?shù)據(jù)集成、規(guī)范數(shù)據(jù)治理以及深入的業(yè)務(wù)洞察力。因此，亞馬遜云科技的思路是：

一方面是持續(xù)打造有競爭力的數(shù)據(jù)工具與服務(wù)，不斷完善產(chǎn)品的功能；另一方面，則從使用者的角度出發(fā)，讓數(shù)據(jù)服務(wù)走向深度集成化、簡單化，讓端到端的數(shù)據(jù)服務(wù)真正有效果。

“從本次re:Invent發(fā)布的特性看未來技術(shù)演進的方向，非常明顯的一點就是數(shù)智融合，也就是如何打造一個端到端的數(shù)據(jù)服務(wù)戰(zhàn)略?！眮嗰R遜云科技大中華區(qū)產(chǎn)品部總經(jīng)理陳曉建如是說。

例如，亞馬遜云科技在今年2022 re:Invent全球大會上提出了 Amazon OpenSearch Serverless 版本、Amazon Aurora與 Amazon Redshift 的 Zero-ETL（提取、轉(zhuǎn)換和加載）集成、Amazon Redshift 與 Apache Spark 集成、精細的數(shù)據(jù)管理產(chǎn)品 Amazon DataZone、Amzon Quicksight Q 預(yù)測服務(wù)等一系列與數(shù)據(jù)相關(guān)的服務(wù)。

以Zero-ETL為例，亞馬遜云科技推出的Zero-ETL（提取、轉(zhuǎn)換和加載）集成服務(wù)極具價值與意義。眾所周知，過去的數(shù)據(jù)治理與應(yīng)用體系嚴重依賴ETL。Gartner調(diào)研數(shù)據(jù)顯示：分析師80%的時間用于發(fā)現(xiàn)和準備數(shù)據(jù)，知識型員工將50%的時間浪費在尋找數(shù)據(jù)、發(fā)現(xiàn)和糾正錯誤以及確認不信任的數(shù)據(jù)來源上，數(shù)據(jù)科學(xué)家花60%的時間清理和組織數(shù)據(jù)。

當數(shù)據(jù)規(guī)模遠勝以往之后，依賴ETL的方式就容易數(shù)據(jù)的供給側(cè)與使用側(cè)極大的效率問題，因此Zero-ETL成為大勢所趨，通過Zero-ETL簡化雜ETL鏈路，實現(xiàn)敏捷數(shù)據(jù)洞察和高效一致的數(shù)據(jù)協(xié)作。

例如，Amazon Aurora 將首次支持與 Amazon Redshift 的 Zero-ETL（提取、轉(zhuǎn)換和加載）集成，將事務(wù)數(shù)據(jù)與分析功能結(jié)合在一起，消除了在 Aurora 和 Redshift 之間構(gòu)建和管理自定義數(shù)據(jù)管道的所有工作。用戶不必構(gòu)建和維護復(fù)雜的數(shù)據(jù)管道來執(zhí)行提取、轉(zhuǎn)換和加載（ETL）操作。

又如，數(shù)據(jù)爆炸性增長為數(shù)據(jù)治理帶來了前所未有的復(fù)雜度。數(shù)據(jù)治理涉及到不同的團隊、應(yīng)用和權(quán)限管理，使得細顆粒度的數(shù)據(jù)管理成為當前的強需求。因此，亞馬遜云科技打造出 Amazon DataZone，用于分類、發(fā)現(xiàn)、共享和管理數(shù)據(jù)的數(shù)據(jù)管理服務(wù)，可以集成 Redshift、Athena 和 QuickSight，以及對第三方數(shù)據(jù)源提供 API 接口，可實現(xiàn)細粒度數(shù)據(jù)管理，其中包含由機器學(xué)習(xí)填充的數(shù)據(jù)目錄，易于使用業(yè)務(wù)術(shù)語進行搜索。

在亞馬遜云科技看來，DataZone可以使數(shù)據(jù)工程師、數(shù)據(jù)科學(xué)家、產(chǎn)品經(jīng)理、分析師和其他業(yè)務(wù)用戶能夠輕松地發(fā)現(xiàn)、使用和協(xié)作數(shù)據(jù)。

亞馬遜云科技在今年2022 re:Invent全球大會上推出與數(shù)據(jù)相關(guān)的系列服務(wù)都極具價值且意義重大。對于逐步完成上云階段的眾多用戶而言，這些服務(wù)與工具的推出可謂是恰逢其時，能夠很好地幫助用戶把數(shù)據(jù)“用起來”，對于數(shù)字化轉(zhuǎn)型有著極大的幫助。

從亞馬遜云科技看數(shù)智未來

一直以來，業(yè)界都在積極提倡上云、用數(shù)和賦智，寄希望打造三者的價值閉環(huán)，從而真正讓企業(yè)數(shù)字化轉(zhuǎn)型步入良性發(fā)展的軌道。可以看來，亞馬遜云科技近年來針對數(shù)據(jù)服務(wù)、機器學(xué)習(xí)平臺等產(chǎn)品與服務(wù)的系列構(gòu)建，已經(jīng)率先在業(yè)界實踐出“云、數(shù)、智”的閉環(huán)之路。

首先，亞馬遜云科技正在把重要的工具與服務(wù)做深、做精，從而讓產(chǎn)品與服務(wù)的累積效應(yīng)得以顯現(xiàn)。例如，亞馬遜云科技機器學(xué)習(xí)平臺Amazon SageMaker五年來增加了260項新功能，不斷降低機器學(xué)習(xí)的技術(shù)門檻，簡化機器學(xué)習(xí)的前期工作，加速為客戶“賦智”。

在本次re:Invent全球大會上，亞馬遜云科技還將機器學(xué)習(xí)的治理功能引入到Amazon SageMaker，通過角色管理器（Role Manager）、 模型卡片（Model Cards），以及模型儀表板（Model Dashboard）等涵蓋端到端機器學(xué)習(xí)流程的管理與治理。

其次，亞馬遜云科技正在持續(xù)打通數(shù)智之間的鏈路，優(yōu)化產(chǎn)品與服務(wù)，形成產(chǎn)品與服務(wù)之間的疊加效應(yīng)。這從亞馬遜云科技推出Amazon Redshift 與 Apache Spark 集成等功能就能反應(yīng)出。

事實上，隨著亞馬遜云科技不斷優(yōu)化不同服務(wù)之間的集成，將有利于進一步降低數(shù)智的門檻，有望為廣大用戶帶來更加出色的服務(wù)體驗。

最后，亞馬遜云科技看中在各大行業(yè)之中的閉環(huán)實踐。在今年re:Invent全球大會上，亞馬遜云科技帶來了供應(yīng)鏈、廣告營銷、生物醫(yī)療、零售等一系列的數(shù)智新方案，為用戶踐行上云、用數(shù)和賦智提供了充分保障。

總體來看，“數(shù)據(jù)”是今年re:Invent全球大會上的絕對主角。隨著企業(yè)逐步完成上云階段，在云端的“用數(shù)”和“賦智”是所有企業(yè)數(shù)字化轉(zhuǎn)型接下來的重中之重，這個過程將充滿了挑戰(zhàn)。無疑，亞馬遜云科技帶來了它的方法論、戰(zhàn)略以及產(chǎn)品服務(wù)。面向未來，隨著亞馬遜云科技端到端數(shù)據(jù)戰(zhàn)略不斷在行業(yè)中踐行，亞馬遜云科技有望幫助更多用戶在浩瀚的數(shù)據(jù)海洋中乘風(fēng)破浪、馭數(shù)而行。

生成海報

免責(zé)聲明：此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評論性文章，所有文字和圖片版權(quán)歸作者所有，且僅代表作者個人觀點，與極客網(wǎng)無關(guān)。文章僅供讀者參考，并請自行核實相關(guān)內(nèi)容。投訴郵箱：editor@fromgeek.com。

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關(guān)資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負任何法律責(zé)任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。