俗話說“工欲善其事，必先利其器”，要想多快好省地加速生成式AI創(chuàng)新，企業(yè)應(yīng)該學(xué)會(huì)如何善用新一代Amazon SageMaker。
無縫銜接的統(tǒng)一平臺(tái)
伴隨著人工智能技術(shù)的飛速發(fā)展，在數(shù)字化轉(zhuǎn)型的大潮中，廣大企業(yè)對(duì)于高效、集成的數(shù)據(jù)處理分析以及AI解決方案的需求也日益水漲船高。
為了滿足企業(yè)客戶的迫切需求，在2024 re:Invent全球大會(huì)上，亞馬遜云科技推出了新一代Amazon SageMaker，旨在為企業(yè)提供從數(shù)據(jù)準(zhǔn)備、模型訓(xùn)練到部署的全鏈路解決方案，其中核心的Amazon SageMaker Unified Studio近日已宣布正式可用（GA）。
亞馬遜云科技大中華區(qū)數(shù)據(jù)分析與生成式AI產(chǎn)品總監(jiān)崔瑋指出，新一代Amazon SageMaker是亞馬遜云科技在AI與數(shù)據(jù)分析領(lǐng)域的一次重大創(chuàng)新，它整合了數(shù)據(jù)湖、數(shù)倉、機(jī)器學(xué)習(xí)模型訓(xùn)練與部署等多個(gè)關(guān)鍵環(huán)節(jié)，構(gòu)建了一個(gè)無縫銜接的統(tǒng)一平臺(tái)。這一平臺(tái)的推出，標(biāo)志著亞馬遜云科技在幫助企業(yè)加速AI創(chuàng)新、提升數(shù)據(jù)分析效率方面邁出了堅(jiān)實(shí)的一步。
“隨著生成式AI話題的日益盛行，企業(yè)客戶逐漸意識(shí)到私有數(shù)據(jù)是其核心競(jìng)爭(zhēng)力的關(guān)鍵體現(xiàn)。然而，隨著業(yè)務(wù)的復(fù)雜化和技術(shù)的不斷迭代，企業(yè)面臨著工具集繁多、數(shù)據(jù)分散、權(quán)限管理復(fù)雜等挑戰(zhàn)。新一代Amazon SageMaker正是為了解決這些問題而生，它提供了一個(gè)統(tǒng)一的數(shù)據(jù)和AI開發(fā)環(huán)境，讓用戶能夠輕松訪問和處理企業(yè)數(shù)據(jù)，加速產(chǎn)品迭代和創(chuàng)新。”崔瑋表示。
統(tǒng)一開發(fā)環(huán)境的核心
據(jù)崔瑋介紹，作為新一代Amazon SageMaker的核心組件，Amazon SageMaker Unified Studio是一個(gè)集數(shù)據(jù)準(zhǔn)備、SQL分析、模型開發(fā)、模型訓(xùn)練、生成式AI應(yīng)用開發(fā)等功能于一體的統(tǒng)一開發(fā)環(huán)境。用戶可以在這個(gè)平臺(tái)上發(fā)現(xiàn)和訪問企業(yè)的數(shù)據(jù)，并使用最適合的工具處理幾乎所有的應(yīng)用場(chǎng)景。
Amazon SageMaker Unified Studio集成了多種數(shù)據(jù)處理和分析工具，包括Amazon Redshift、Amazon EMR、Amazon Glue等，用戶無需在不同工具之間頻繁切換，即可完成從數(shù)據(jù)準(zhǔn)備到模型部署的全流程工作。除此以外，該平臺(tái)還支持自然語言交互，用戶可以通過問答形式完成數(shù)據(jù)探索和代碼生成，大大降低了使用門檻。
通過Amazon SageMaker Unified Studio，開發(fā)者可以選擇項(xiàng)目組并訪問自己的數(shù)據(jù)集，能夠使用Athena等數(shù)據(jù)處理引擎進(jìn)行數(shù)據(jù)查詢和處理，并利用Amazon Q生成代碼，實(shí)現(xiàn)數(shù)據(jù)分析和可視化，極大地提升應(yīng)用開發(fā)效率。
崔瑋指出，新一代Amazon SageMaker并非是對(duì)傳統(tǒng)工具的全面取代，而是在傳統(tǒng)工具的基礎(chǔ)上提供了一個(gè)更加統(tǒng)一和高效的開發(fā)環(huán)境。用戶仍然可以根據(jù)自己的需求選擇使用不同的工具進(jìn)行數(shù)據(jù)處理和分析。與此同時(shí)，通過集成傳統(tǒng)工具的功能和優(yōu)勢(shì)，新一代Amazon SageMaker還能夠?yàn)橛脩籼峁└尤婧蛷?qiáng)大的解決方案。通過集成多種數(shù)據(jù)處理和分析工具以及提供自然語言交互能力，新一代Amazon SageMaker顯著提升了用戶的開發(fā)效率。用戶無需在不同工具之間頻繁切換即可完成全流程工作，極大地降低了使用門檻和時(shí)間成本。
數(shù)據(jù)治理與安全合規(guī)
在數(shù)據(jù)治理方面，Amazon SageMaker Unified Studio內(nèi)置了Amazon SageMaker Catalog。這是一個(gè)端到端的數(shù)據(jù)AI治理平臺(tái)，通過Amazon SageMaker Catalog，企業(yè)可以發(fā)布和管理數(shù)據(jù)資產(chǎn)，實(shí)現(xiàn)不同角色和項(xiàng)目之間的權(quán)限分工。
與此同時(shí)，Amazon SageMaker Catalog還提供了血緣數(shù)據(jù)和質(zhì)量管理能力，能夠幫助企業(yè)追溯數(shù)據(jù)來源和質(zhì)量問題。
“Amazon SageMaker Catalog作為端到端的數(shù)據(jù)AI治理平臺(tái)，為企業(yè)提供了全面的數(shù)據(jù)資產(chǎn)管理和權(quán)限控制能力。通過Catalog，企業(yè)可以輕松實(shí)現(xiàn)數(shù)據(jù)的發(fā)布、訂閱和管理，并保障數(shù)據(jù)的安全和合規(guī)性?！贝蕃|表示，“數(shù)據(jù)治理是企業(yè)數(shù)字化轉(zhuǎn)型中不可或缺的一環(huán)。Amazon SageMaker Catalog通過統(tǒng)一的平臺(tái)管理數(shù)據(jù)資產(chǎn)和權(quán)限，不僅提升了數(shù)據(jù)訪問的便捷性，還保障了企業(yè)的數(shù)據(jù)安全和合規(guī)性?！?/p>
打破數(shù)據(jù)孤島實(shí)現(xiàn)跨數(shù)據(jù)源訪問
針對(duì)企業(yè)數(shù)據(jù)分散存儲(chǔ)在不同工具和環(huán)境中的問題，Amazon SageMaker Unified Studio通過Amazon SageMaker Lakehouse實(shí)現(xiàn)了跨數(shù)倉和數(shù)據(jù)湖的統(tǒng)一訪問。Lakehouse采用Iceberg API作為開放的數(shù)據(jù)訪問格式，支持用戶通過統(tǒng)一界面訪問存儲(chǔ)在不同位置的數(shù)據(jù)。
除此以外，Amazon SageMaker Unified Studio還支持Zero-ETL功能，用戶可以直接訪問第三方數(shù)據(jù)源而無需進(jìn)行復(fù)雜的數(shù)據(jù)轉(zhuǎn)換和移動(dòng)。這一功能不僅降低了數(shù)據(jù)處理的成本和時(shí)間消耗，而且還提高了數(shù)據(jù)的可用性和安全性。
崔瑋指出，Amazon SageMaker Lakehouse通過Iceberg API實(shí)現(xiàn)了跨數(shù)倉和數(shù)據(jù)湖的統(tǒng)一訪問。這不僅提高了數(shù)據(jù)的可用性和安全性，而且還降低了數(shù)據(jù)處理的成本和時(shí)間消耗。此外，Amazon SageMaker Unified Studio對(duì)Zero-ETL功能的支持，也進(jìn)一步提升了用戶訪問第三方數(shù)據(jù)源的便利性。
來自汽車客戶的現(xiàn)身說法
作為新一代Amazon SageMaker的成功應(yīng)用案例之一，豐田汽車通過部署新一代Amazon SageMaker，成功解決了不同業(yè)務(wù)團(tuán)隊(duì)之間的數(shù)據(jù)分享、管理和搜索問題。
據(jù)崔瑋介紹，通過亞馬遜云科技提供的Amazon SageMaker Unified Studio，豐田汽車構(gòu)建了一個(gè)高效的數(shù)據(jù)管理和分析平臺(tái)，實(shí)現(xiàn)了數(shù)據(jù)的集中管理和訪問控制，不同業(yè)務(wù)團(tuán)隊(duì)可以在平臺(tái)上共享數(shù)據(jù)資源并進(jìn)行協(xié)同工作，極大地提升了工作效率。與此同時(shí)，豐田汽車還通過生成式AI能力的應(yīng)用，實(shí)現(xiàn)了提前預(yù)警和排查質(zhì)量問題，從而能夠更加快速地優(yōu)化產(chǎn)品質(zhì)量和對(duì)市場(chǎng)變化作出響應(yīng)。
崔瑋表示，新一代Amazon SageMaker具備統(tǒng)一的數(shù)據(jù)和AI開發(fā)環(huán)境，以及全面的數(shù)據(jù)治理和安全保障能力，旨在幫助企業(yè)加速數(shù)字化轉(zhuǎn)型和創(chuàng)新步伐，同時(shí)也是亞馬遜云科技在AI與數(shù)據(jù)分析領(lǐng)域的一次重大創(chuàng)新。隨著生成式AI技術(shù)的不斷發(fā)展以及企業(yè)數(shù)字化轉(zhuǎn)型的不斷深入，亞馬遜云科技相信新一代Amazon SageMaker將在未來發(fā)揮更加重要的作用，為企業(yè)創(chuàng)造更多的價(jià)值。與此同時(shí)，亞馬遜云科技也將繼續(xù)關(guān)注市場(chǎng)需求和技術(shù)發(fā)展趨勢(shì)，不斷迭代和優(yōu)化產(chǎn)品功能和服務(wù)水平。
熱門跟貼