AVt天堂网 手机版,亚洲va久久久噜噜噜久久4399,天天综合亚洲色在线精品,亚洲一级Av无码毛片久久精品

當前位置:首頁 > 科技  > 芯片

亞馬遜云科技推出五項Amazon SageMaker新功能

來源: 責編: 時間:2023-12-06 17:13:27 253觀看
導讀助力規模化開發應用模型Amazon SageMaker HyperPod通過為大規模分布式訓練提供專用的基礎架構,將基礎模型的訓練時間縮短了高達40%;Amazon SageMaker Inference通過優化加速器的使用,平均降低50%的基礎模型部署成本,并平

助力規?;_發應用模型Nil28資訊網——每日最新資訊28at.com

  • Amazon SageMaker HyperPod通過為大規模分布式訓練提供專用基礎架構,將基礎模型的訓練時間縮短了高達40%;Nil28資訊網——每日最新資訊28at.com

  • Amazon SageMaker Inference通過優化加速器的使用,平均降低50%基礎模型部署成本,并平均縮短了20%的延遲時間;Nil28資訊網——每日最新資訊28at.com

  • Amazon SageMaker Clarify能夠讓客戶更輕松地根據支持負責任AI參數,迅速評估和選擇基礎模型;Nil28資訊網——每日最新資訊28at.com

  • Amazon SageMaker Canvas功能幫助客戶通過自然語言指令加速數據準備,并僅需幾次點擊即可使用基礎模型進行模型定制;Nil28資訊網——每日最新資訊28at.com

  • 寶馬集團BMW、繽客Booking.com、Hugging Face、Perplexity、Salesforce、Stability AI先鋒領航集團(Vanguard等已開始使用新的Amazon SageMaker功能Nil28資訊網——每日最新資訊28at.com

亞馬遜云科技在2023 re:Invent全球大會上,宣布推出五項Amazon SageMaker新功能,幫助客戶加速構建、訓練和部署大語言模型和其他基礎模型。隨著模型不斷改變各行各業的客戶體驗,Amazon SageMaker讓企業更輕松快速地構建、訓練和部署支持各種生成式AI使用場景的機器學習模型。為了成功使用模型,客戶需要先進的功能來高效管理模型的開發、使用和性能。這就是Falcon 40B和180B、IDEFICS、Jurassic-2、Stable Diffusion以及StarCoder等大多數業內領先的模型都在Amazon SageMaker上訓練的原因。Nil28資訊網——每日最新資訊28at.com

今天的宣布包括了一項新功能,進一步增強了Amazon SageMaker的模型擴展能力并加速了模型的訓練。此外,Amazon SageMaker推出的另一項新功能,能夠通過降低模型部署成本和延遲時間,優化了管理托管的機器學習基礎設施。亞馬遜云科技還推出了新的SageMaker Clarify功能,可以讓客戶在負責任地使用AI的基礎上,根據質量參數更輕松地選擇正確模型。為了幫助客戶在企業范圍內應用這些模型,亞馬遜云科技還在Amazon SageMaker Canvas中引入了新的無代碼功能,讓客戶更快、更容易地使用自然語言指令準備數據。同時,Amazon SageMaker Canvas繼續推動模型構建和定制的普及,讓客戶更輕松地使用模型提取洞察、進行預測和使用企業專有數據生成內容。這些創新均基于Amazon SageMaker豐富的功能,幫助客戶實現規模化機器學習創新。開始使用Amazon SageMaker,請訪問aws.amazon.com/sagemaker。Nil28資訊網——每日最新資訊28at.com

足夠的可伸縮算力的就位、海量數據的爆炸,以及機器學習技術的快速進步,正在促使包含數十億參數模型的興起,使它們能夠執行各種任務,如撰寫博客文章、生成圖像、解決數學問題、進行對話和根據文檔回答問題。如今,成千上萬的客戶,例如3M、阿斯利康(AstraZeneca)、法拉利(Ferrari)、LG AI Research、瑞安航空(RyanAir)、湯森路透(Thomson Reuters)和先鋒領航集團(Vanguard)等,每月在Amazon SageMaker進行超過1.5萬億次的推理請求。此外,像AI21 Labs、Stability AI和Technology Innovation Institute等客戶也正借助Amazon SageMaker訓練擁有數十億參數的模型。隨著客戶從構建主要針對特定任務的模型轉向構建支持生成式AI的大型通用模型,他們必須處理大量數據集并進行更復雜的基礎設施設置,同時在這個過程中還要不斷優化成本和性能??蛻暨€希望能夠構建和定制自己的模型,以創造獨特的客戶體驗,體現企業的聲音、風格和服務。自2017年推出以來,Amazon SageMaker已經新增了380多個功能和特性,為客戶提供了規?;瘶嫿ā⒂柧毢筒渴鹂赏度肷a的大規模模型所需的一切。Nil28資訊網——每日最新資訊28at.com

"機器學習是近年來影響深遠的技術變革之一,所有企業組織都對模型產生了濃厚的興趣。這也給那些希望快速構建、訓練和部署模型的客戶帶來了新的挑戰。"亞馬遜云科技人工智能和機器學習副總裁Bratin Saha表示,"從加速訓練、優化托管成本、降低延遲到簡化基礎模型的評估,再到擴展無代碼模型的構建能力,我們的使命是讓各種規模的企業平等地使用高質量、高成本效益的機器學習模型。今天,我們再次增強Amazon SageMaker,通過全托管、專門構建的新功能幫助客戶充分獲得他們在機器學習方面的投資回報。"Nil28資訊網——每日最新資訊28at.com

新功能讓客戶更輕松快速地訓練和操作模型,驅動生成式AI的應用Nil28資訊網——每日最新資訊28at.com

隨著生成式AI的持續發展,許多新興應用都將依賴于模型。然而,大多數企業在調整基礎設施以滿足新模型需求時存在困難,很難高效地實現規?;柧毢筒僮?。今天,Amazon SageMaker增加了兩項全新功能,旨在幫助減輕規模化訓練和部署模型的負擔。Nil28資訊網——每日最新資訊28at.com

  • Amazon SageMaker HyperPod加速基礎模型規模化訓練:許多企業希望以較低的成本使用基于GPU和Trainium的計算實例來訓練自己的模型。然而,數據激增、模型規模擴大以及較長的訓練時間使模型訓練復雜程度呈指數級增長,這要求客戶必須進一步調整他們的流程來應對這些新需求。通??蛻粜枰獙⒛P陀柧毞峙涞綌蛋偕踔翑登€加速器上。之后,在幾周或者幾個月的時間內并行運行數萬億次數據計算,這是一項耗時且需要專門機器學習知識的任務。與訓練特定任務的模型相比,加速器的數量和訓練時間會大大增加。因此,很容易出現如單個加速器故障這樣的小錯誤。這些錯誤可能會中斷整個訓練過程,并需要人工干預來識別、隔離、調試、修復和恢復,這將進一步延遲任務進度。在基礎模型的訓練過程中,客戶經常需要暫停訓練,評估當前模型性能并優化訓練代碼。為了不間斷地訓練模型,開發人員必須不斷保存訓練進度(通常稱為檢查點),以便在訓練中斷后不會丟失進度,并從停止的地方繼續訓練。這些挑戰明顯增加了訓練模型所需的時間和成本,延遲了新的生成式AI創新的部署。Nil28資訊網——每日最新資訊28at.com

Amazon SageMaker HyperPod消除了為訓練模型而構建、優化機器學習基礎設施的繁重工作,將訓練時間縮短了高達40%。Amazon SageMaker HyperPod預置了Amazon SageMaker的分布式訓練庫,使客戶能夠自動將訓練工作負載分布到數千個加速器上,以便并行處理工作負載,提高模型性能。此外,Amazon SageMaker HyperPod通過定期保存檢查點以確保用戶能夠不間斷地訓練模型。當訓練過程中發生硬件故障時,Amazon SageMaker HyperPod會自動檢測故障、修復或替換有故障的實例,并從最后保存的檢查點恢復訓練,無需客戶手動管理這一過程,協助客戶在分布式環境中進行數周或數月的訓練而無需中斷。Nil28資訊網——每日最新資訊28at.com

  • Amazon SageMakerInference有助于降低模型部署成本并縮短延遲時間:企業在部署模型的過程中一直在尋找優化性能的方法。為了降低部署成本和減少響應延遲,客戶使用Amazon SageMaker在新的機器學習基礎設施加速器上部署模型,如Amazon Inferentia和GPU。然而,有些模型沒有充分利用這些實例提供的加速器,導致硬件資源使用效率低。有些企業還將多個模型部署到同一個實例上,以便更好地利用所有可用的加速器,但這需要復雜的基礎設施編排,既耗時又難以管理。當多個模型共享同一個實例時,每個模型都有自己的擴展需求和使用模式,因此很難預測客戶何時需要添加或刪除實例。例如,一個模型用于支持在特定時間內使用量可能激增的應用程序,而另一個模型可能具有更穩定的使用模式。除了優化成本,客戶還希望通過降低延遲來提供理想的用戶體驗。由于模型的輸出范圍從一句話到一整篇文章不等,因此完成推理請求所需的時間差異很大。如果請求在實例之間隨機路由,就會導致延遲出現不可預測的峰值。Amazon SageMaker現在支持新的推理功能,幫助客戶降低部署成本和延遲時間。通過這些新功能,客戶可以將多個模型部署到同一個實例上,更好地利用底層加速器,平均部署成本可降低50%??蛻暨€可以分別控制每個模型的擴展策略,使之更適應模型的使用模式,同時優化基礎設施成本。Amazon SageMaker能夠積極監測正在處理推理請求的實例,并根據可用的實例智能發送請求,平均降低20%的推理延遲。Nil28資訊網——每日最新資訊28at.com

新功能能夠幫助客戶評估任意模型,并根據使用場景選擇更適合的模型Nil28資訊網——每日最新資訊28at.com

現在,客戶在為生成式AI應用程序挑選模型時有很多選擇,他們希望能快速比較這些模型,并根據相關質量和負責任的AI參數(如準確性、公平性和魯棒性)找到更適合的選擇。然而,當比較執行相同功能(例如文本生成或摘要)或屬于同一系列(例如Falcon 40B與Falcon 180B)的模型時,每個模型在各種負責任的AI參數上表現都不相同。即使是在兩個不同數據集上微調相同的模型,性能也存在差異,這將很難確定哪個版本效果更佳。如要開始比較模型,企業必須先花費數天時間識別相關標準,設置評估工具并對每個模型進行評估。盡管客戶可以訪問公開可用的模型標準,但他們通常無法根據代表特定使用場景的提示詞來評估模型的性能。此外,這些標準通常難以理解,也不適用于評估品牌聲音、相關性和風格。另外,企業還需經過耗時的手動分析結果的過程,并對每個新使用場景或微調模型重復此過程。Nil28資訊網——每日最新資訊28at.com

Amazon SageMaker Clarify現在可以幫助客戶根據所選參數評估、比較和選擇適合特定使用場景的最佳模型,以支持企業負責任地使用AI。借助Amazon SageMaker Clarify的新功能,客戶可以輕松提交自己的模型進行評估,或通過Amazon SageMaker JumpStart選擇模型。在Amazon SageMaker Studio中,客戶可以選擇要針對給定任務進行比較的模型,例如問答或內容摘要。然后,客戶選擇評估參數并上傳自己的提示詞數據集,或者從內置的公開數據集中進行選擇。對于需要復雜人工判斷的敏感標準或精細內容,客戶可以選擇使用自己的員工或由SageMaker Ground Truth提供的托管工作人員,使用反饋機制在幾分鐘內審查回復。一旦客戶完成設置過程,Amazon SageMaker Clarify將會運行評估并生成報告,以便客戶可以根據性能標準快速評估、比較和選擇最佳模型。Nil28資訊網——每日最新資訊28at.com

新的AmazonSageMaker Canvas增強功能使客戶更輕松、更快速地將生成AI集成到工作流程中Nil28資訊網——每日最新資訊28at.com

Amazon SageMaker Canvas幫助客戶構建機器學習模型并生成預測,而無需編寫代碼。此次發布擴展了Amazon SageMaker Canvas現有的即用功能,幫助客戶在無代碼環境中使用模型來支持各種使用場景。Nil28資訊網——每日最新資訊28at.com

  • 使用自然語言指令準備數據:如今,Amazon SageMaker Canvas中的可視化界面使那些沒有機器學習專業知識的人可以輕松準備數據,但有些客戶還希望以一種更快、更直觀的方式瀏覽數據集??蛻衄F在可以通過示例查詢快速入門,并在整個過程中隨時提問以簡化數據準備工作??蛻暨€可以使用自然語言指令進行復雜的轉換,解決常見的數據問題,例如填充列中的缺失值。通過這個新的無代碼界面,客戶可以大大簡化在Amazon SageMaker Canvas上處理數據的方式,將準備數據所需的時間從數小時縮短至數分鐘。Nil28資訊網——每日最新資訊28at.com

  • 利用模型進行大規模業務分析:客戶使用Amazon SageMaker Canvas構建機器學習模型,并為各種任務生成預測,包括需求預測、客戶流失預測和金融投資組合分析等。今年早些時候,客戶即可通過Amazon SageMaker Canvas訪問Amazon Bedrock上的多個模型,包括來自AI21 Labs、Anthropic和亞馬遜的模型,以及來自MosaicML、TII和通過Amazon SageMaker Jumpstart獲取的模型。使用與今天相同的無代碼界面,客戶可以上傳數據集并選擇模型,Amazon SageMaker Canvas會自動幫助客戶構建自定義模型,立即生成預測。Amazon SageMaker Canvas還可以顯示性能指標,讓客戶可以輕松協作,使用模型生成預測并了解基礎模型在特定任務上的表現。Nil28資訊網——每日最新資訊28at.com

Hugging Face是一家領先的機器學習公司和開放平臺,它為AI構建提供了開放的基礎模型以及創建模型所需的工具。"Hugging Face一直在使用Amazon SageMaker HyperPod創建重要的最新開放基礎模型,如StarCoder、IDEFICS和Zephyr,這些模型已被下載了數百萬次。"Hugging Face產品負責人Jeff Boudier表示,"Amazon SageMaker HyperPod專為高可用和性能構建的功能使我們的開放科學團隊能夠專注于創新,并改進基礎模型的構建方式,而非管理基礎設施。Amazon SageMaker HyperPod能夠檢測到機器學習硬件故障,并快速替換有故障的硬件,且不會中斷正在進行的模型訓練。由于我們的團隊需要快速創新,該自動化作業恢復功能幫助我們在基礎模型訓練過程中減少中斷情況,讓我們在一年內便節省了數百小時的訓練時間。"Nil28資訊網——每日最新資訊28at.com

領先的人工智能客戶關系管理(CRM)平臺Salesforce,憑借數據、AI和CRM,提高了生產力,創造了可信的客戶體驗。 "我們對基礎模型采用了開放的方式,而Amazon SageMaker是一個至關重要的組成部分,幫助我們擴展架構并加速市場推廣。"Salesforce工程副總裁Bhavesh Doshi表示,"利用新的Amazon SageMaker推理功能,我們能夠將所有模型放入單一的Amazon SageMaker端點,該端點可以自動處理所有資源分配和計算資源共享,在提高性能的同時降低了基礎模型的部署成本。"Nil28資訊網——每日最新資訊28at.com

湯森路透(Thomson Reuters)是一家領先的信息領域提供商,也是全球值得信賴的新聞機構之一。 "我們的工程師面臨的一個挑戰是在高峰季節有效管理客戶呼叫資源,以確保雇傭合適數量的客服人員來處理激增的咨詢。"Thomson Reuters人工智能、商業智能和數據平臺副總裁Maria Apazoglou表示,"對包含呼叫量、等待時間、日期等關鍵指標的呼叫中心數據進行歷史分析是一項耗時的任務。我們的團隊正在利用Amazon SageMaker Canvas中新的數據準備和定制功能,對公司數據進行模型訓練,從而識別影響高峰時段呼叫量的模式和趨勢,這讓我們使用自有數據構建機器學習模型變得非常簡便。我們期待通過Amazon SageMaker Canvas增加對基礎模型的使用,而無需編寫任何代碼。"Nil28資訊網——每日最新資訊28at.com


關于亞馬遜云科技Nil28資訊網——每日最新資訊28at.com

自2006年以來,亞馬遜云科技(Amazon Web Services)一直以技術創新、服務豐富、應用廣泛而享譽業界。亞馬遜云科技一直不斷擴展其服務組合以支持幾乎云上任意工作負載,目前提供超過240項全功能的服務,涵蓋計算、存儲、數據庫、網絡、數據分析、機器學習與人工智能、物聯網、移動、安全、混合云、虛擬現實與增強現實、媒體,以及應用開發、部署與管理等方面;基礎設施遍及32個地理區域的102個可用區,并已公布計劃在加拿大、德國、馬來西亞、新西蘭和泰國新建5個區域、15個可用區。全球數百萬客戶,包括發展迅速的初創公司、大型企業和領先的政府機構,都信賴亞馬遜云科技,通過亞馬遜云科技的服務支撐其基礎設施,提高敏捷性,降低成本。要了解更多關于亞馬遜云科技的信息,請訪問:www.amazonaws.cn。Nil28資訊網——每日最新資訊28at.com


稿源:美通社Nil28資訊網——每日最新資訊28at.com


本文鏈接:http://www.tebozhan.com/showinfo-27-38628-0.html亞馬遜云科技推出五項Amazon SageMaker新功能

聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 浪潮信息劉軍:智算力系統創新 加速生成式AI產業發展

下一篇: 英偉達與軟銀等日企合作,穩固日本市場

標簽:
  • 熱門焦點
  • 官方承諾:K60至尊版將會首批升級MIUI 15

    全新的MIUI 15今天也有了消息,在官宣了K60至尊版將會搭載天璣9200+處理器和獨顯芯片X7的同時,Redmi給出了官方承諾,K60至尊重大更新首批升級,會首批推送MIUI 15。也就是說雖然
  • 6月安卓手機好評榜:魅族20 Pro蟬聯冠軍

    性能榜和性價比榜之后,我們來看最后的安卓手機好評榜,數據來源安兔兔評測,收集時間2023年6月1日至6月30日,僅限國內市場。第一名:魅族20 Pro好評率:95%5月份的時候魅族20 Pro就是
  • 使用LLM插件從命令行訪問Llama 2

    最近的一個大新聞是Meta AI推出了新的開源授權的大型語言模型Llama 2。這是一項非常重要的進展:Llama 2可免費用于研究和商業用途。(幾小時前,swyy發現它已從LLaMA 2更名為Lla
  • 一個注解實現接口冪等,這樣才優雅!

    場景碼猿慢病云管理系統中其實高并發的場景不是很多,沒有必要每個接口都去考慮并發高的場景,比如添加住院患者的這個接口,具體的業務代碼就不貼了,業務偽代碼如下:圖片上述代碼有
  • 中國家電海外掘金正當時|出海專題

    作者|吳南南編輯|胡展嘉運營|陳佳慧出品|零態LT(ID:LingTai_LT)2023年,出海市場戰況空前,中國創業者在海外紛紛摩拳擦掌,以期能夠把中國的商業模式、創業理念、戰略打法輸出海外,他們依
  • 疑似小米14外觀設計圖曝光:后置相機模組變化不大

    下半年的大幕已經開啟,而誰將成為下半年手機圈的主角就成為了大家關注的焦點,其中被傳有望拿下新一代驍龍8 Gen3旗艦芯片的小米14系列更是備受大家矚
  • AI芯片初創公司Tenstorrent獲三星和現代1億美元投資

    Tenstorrent是一家由芯片行業資深人士Jim Keller領導的加拿大初創公司,專注于開發人工智能芯片,該公司周三表示,已經從現代汽車集團和三星投資基金等
  • 自研Exynos回歸!三星Galaxy S24系列將提供Exynos和驍龍雙版本

    年初,全新的三星Galaxy S23系列發布,包含Galaxy S23、Galaxy S23+和Galaxy S23 Ultra三個版本,全系搭載超頻版驍龍8 Gen 2,雖同樣采用臺積電4nm工藝制
  • OPPO K11樣張首曝:千元機影像“卷”得真不錯!

    一直以來,OPPO K系列機型都保持著較為均衡的產品體驗,歷來都是2K價位的明星機型,去年推出的OPPO K10和OPPO K10 Pro兩款機型憑借各自的出色配置,堪稱有
Top