国产成人超清在线视频,国产高清永久免费,国产最新超碰97上传无码,超碰国产人人草人人爽

【2023云棲】黃博遠(yuǎn):阿里云人工智能平臺(tái)PAI年度發(fā)布

智能
  • 廠商稿件
  • 2023-11-15 10:16

本文根據(jù)2023云棲大會(huì)演講實(shí)錄整理而成,演講信息如下:

演講人:黃博遠(yuǎn) | 阿里云計(jì)算平臺(tái)事業(yè)部資深產(chǎn)品專家、阿里云人工智能平臺(tái)PAI產(chǎn)品負(fù)責(zé)人

演講主題:阿里云人工智能平臺(tái)PAI年度發(fā)布

01.AIGC是我們這個(gè)時(shí)代的新機(jī)遇

今年云棲大會(huì),阿里云機(jī)器學(xué)習(xí)平臺(tái)PAI正式發(fā)布升級(jí)為人工智能平臺(tái)PAI。在過去的12個(gè)月,AI生態(tài)發(fā)生了巨大的變化,AIGC已經(jīng)成為繼互聯(lián)網(wǎng)時(shí)代的下一個(gè)產(chǎn)業(yè)時(shí)代風(fēng)口,帶來了很多新的機(jī)遇和挑戰(zhàn)。

在整個(gè)市場(chǎng)當(dāng)中,AIGC領(lǐng)域可以分為三類:預(yù)訓(xùn)練大模型、開源生態(tài)和下游應(yīng)用。

02.AI研發(fā)新范式和新挑戰(zhàn)

在新局勢(shì)下,整個(gè)AI研發(fā)進(jìn)入到新范式

從預(yù)訓(xùn)練模型開始,快速定制、快速落地

AI開發(fā)門檻大大降低,AI推廣加速,行業(yè)應(yīng)用增長(zhǎng)

研發(fā)新范式升級(jí)跟以往從搞數(shù)據(jù)到0-1搭模型是非常不一樣的,主要會(huì)有三類客戶:

上游:通用模型生產(chǎn)者與平臺(tái)方(如阿里);

中游:利用垂直行業(yè)知識(shí)對(duì)模型進(jìn)行優(yōu)化(生態(tài)伙伴);

下游:最終AI應(yīng)用的使用者(最廣大的用戶群體)。

AI生態(tài)鏈的整合和角色分化是行業(yè)發(fā)展的方向,符合社會(huì)整體效率提高的要求,必將推動(dòng)AI普惠化的進(jìn)程。

03.阿里云人工智能平臺(tái)PAI全面升級(jí)

人工智能平臺(tái)PAI在4.0版本里,下層是強(qiáng)大的基礎(chǔ)設(shè)施,中間層“PAI靈駿智算集群”,是專門面向超大規(guī)模分布式,重點(diǎn)解決預(yù)訓(xùn)練、Finetune、推理等工作。最上層“Model as a Service”概念,能夠讓不懂算法,但需要應(yīng)用AI的人進(jìn)行全鏈路的AI創(chuàng)新。

PAI助力企業(yè)AI創(chuàng)新

人工智能平臺(tái)PAI將圍繞以下三個(gè)效率助力企業(yè)和開發(fā)者進(jìn)行AI的創(chuàng)新,分別是開發(fā)效率、計(jì)算效率和業(yè)務(wù)效率。

提升開發(fā)效率:人,最寶貴的資源

AI工程化的工程師人才稀缺且昂貴,工程師從數(shù)據(jù)進(jìn)來到整個(gè)開發(fā)環(huán)節(jié)再到模型生產(chǎn)上線,大約需要12種工具把整個(gè)AI流程走完。

阿里云PAI 全生命周期優(yōu)化的AI平臺(tái)

阿里云人工智能平臺(tái)PAI作為全生命周期優(yōu)化的AI平臺(tái),包含iTAG智能標(biāo)注、DSW交互式建模、DLC AI訓(xùn)練服務(wù)、EAS在線預(yù)測(cè)服務(wù)、AI工作空間、AI資產(chǎn)、OpenAPI等服務(wù),打造一體化全鏈路的AI工程平臺(tái),全面提升行業(yè)、產(chǎn)業(yè)落地效率

PAI-DSW 交互式建模

       PAI平臺(tái)的Notebook服務(wù)全面升級(jí),DSW可以一站式AI開發(fā),開箱即用,異構(gòu)資源無縫對(duì)接,兼顧個(gè)人開發(fā)者及企業(yè)級(jí)協(xié)作需求,讓整個(gè)開發(fā)過程變得更加高效。

同時(shí)我們也看到數(shù)據(jù)對(duì)于AI的重要性,PAI把整個(gè)阿里云上的存儲(chǔ)都做了無縫對(duì)接(OSS、NAS、CPFS),可以很容易的在云上獲得做大模型開發(fā)的工作的環(huán)境。

PAI-DLC 分布式訓(xùn)練

在分布式訓(xùn)練里,大模型變得至關(guān)重要,怎么同時(shí)用512卡、上千卡做訓(xùn)練,可能很難做分布式這些細(xì)節(jié)的管理,如果涉及底層復(fù)雜軟硬件能力可能更不清楚。今天通過DLC分布式訓(xùn)練可以實(shí)現(xiàn)單機(jī)多卡、多機(jī)多卡分布式訓(xùn)練,云原生靈活環(huán)境配置,企業(yè)級(jí)資源管理,快速把相應(yīng)的模型訓(xùn)練出來。

PAI 模型服務(wù)與AI推理

未來,我們認(rèn)為在模型服務(wù)領(lǐng)域,模型的推理一定會(huì)成為整個(gè)產(chǎn)業(yè)的熱潮。因?yàn)樵谖覀兤脚_(tái)上已經(jīng)看到有幾十家做大模型的企業(yè)訓(xùn)練出來50B~100B以上的大模型,這些模型日后一定會(huì)產(chǎn)業(yè)落地。

PAI EAS模型在線服務(wù)+Blade推理加速,幫助客戶一站式解決AI部署和推理的全部環(huán)節(jié)。

提升計(jì)算效率:機(jī)器,如何高效的利用

對(duì)于大模型無法逃避的一個(gè)問題就是解決機(jī)器效率,如何讓機(jī)器被整個(gè)產(chǎn)品和平臺(tái)瘋狂使用,對(duì)所有人來說都是巨大的挑戰(zhàn)。

PAI靈駿智算服務(wù) - 讓大模型訓(xùn)練推理簡(jiǎn)單、高效

今年我們發(fā)布了PAI靈駿計(jì)算服務(wù)Serverless產(chǎn)品。使得AI的訓(xùn)練推理更快、更易用、更穩(wěn)定,全面提升AI計(jì)算效率。

可以想象一下,當(dāng)有1024張卡甚至有數(shù)千張卡做訓(xùn)練的時(shí)候,很難保證系統(tǒng)不出錯(cuò)誤,所以我們推出了AI Master自動(dòng)容錯(cuò)彈性訓(xùn)練。讓系統(tǒng)幫你去解決各種各樣的問題。對(duì)于整個(gè)大模型訓(xùn)練過程有巨大的效率提升的作用。

推出EasyCkpt秒級(jí)異步訓(xùn)練的快照,可以清楚知道每一個(gè)數(shù)據(jù)在整個(gè)顯存、內(nèi)存、緩存中存了多少,硬件或系統(tǒng)出現(xiàn)問題或者時(shí)我們不再需要做全局的checkpoint,可以通過EasyCkpt實(shí)現(xiàn)秒級(jí)訓(xùn)練精度無損的checkpoint,高效幫企業(yè)自動(dòng)把這個(gè)問題恢復(fù)可執(zhí)行狀態(tài)。

TorchAcc和PAI-Blade則是在大規(guī)模分布式訓(xùn)練和推理上做的軟硬結(jié)合優(yōu)化。

1.極致性能:高性能計(jì)算、網(wǎng)絡(luò)、存儲(chǔ)支撐的高性能AI集群

專為密集型深度學(xué)習(xí)業(yè)務(wù)及LLM/AIGC大模型訓(xùn)練場(chǎng)景打造的高性能集群架構(gòu)

2.極致穩(wěn)定:軟硬結(jié)合、協(xié)同保障超大規(guī)模集群超高穩(wěn)定性

集大規(guī)模集群管理、彈性AI調(diào)度、進(jìn)度無損的模型保存與恢復(fù)、自動(dòng)分布式性能測(cè)試于一體的穩(wěn)定保障體系

3.基于PAI-DLC構(gòu)建的LLM大模型強(qiáng)化學(xué)習(xí)訓(xùn)練框架RLHF

支持人工反饋的強(qiáng)化學(xué)習(xí) RLHF訓(xùn)練框架,快速開發(fā)定制LLM

提升業(yè)務(wù)效率:自帶最佳實(shí)踐,業(yè)務(wù)落地提速

阿里云是一個(gè)自帶最佳實(shí)踐的云,如何基于PAI平臺(tái)讓不懂AI的人快速上手,讓沒有接觸過大模型、沒有做過AIGC應(yīng)用的人快速跟上節(jié)奏呢?是我們一直致力于解決的問題。

PAI平臺(tái)提供了非常豐富的場(chǎng)景化最佳實(shí)踐方案,把最佳實(shí)踐產(chǎn)品化方式面向客戶,企業(yè)開發(fā)者們可以通過接入PAI平臺(tái)一步步體驗(yàn)?zāi)P蜆?gòu)建的整個(gè)過程。

MaaS全鏈路提效

PAI平臺(tái)一站式覆蓋了AI工程化的全流程,無縫對(duì)接ModelScope/Huggingface等開源社區(qū),讓算法開發(fā)者、應(yīng)用開發(fā)者和業(yè)務(wù)架構(gòu)師可以專注、高效的完成創(chuàng)新。

大模型場(chǎng)景化最佳實(shí)踐

人工智能平臺(tái)PAI提供全面覆蓋大模型生產(chǎn)流程的端到端最佳實(shí)踐。

智碼實(shí)驗(yàn)室-Notebook Galley

Notebook Galley上針對(duì)熱門場(chǎng)景、前沿模型,打造屬于開發(fā)者的內(nèi)容平臺(tái),讓開發(fā)者快速學(xué)習(xí)上手。

Notebook Galley上面現(xiàn)在已經(jīng)有100多個(gè)熱門AI的案例,例如:通義系列、Llama2、Stable Diffusion等案例在這上面全都可以一站式云上拉起服務(wù),端到端體驗(yàn)。

為AI提供極致性能、全鏈路工程覆蓋、端到端最佳實(shí)踐的云上服務(wù)

PAI團(tuán)隊(duì)持續(xù)迭代更新,面向AI、大模型、AGI領(lǐng)域做了三個(gè)核心工作:

1、軟硬一體協(xié)同優(yōu)化云上基礎(chǔ)設(shè)施,把高性能網(wǎng)絡(luò)、高性能存儲(chǔ)和高性能計(jì)算的能力和編譯優(yōu)化能力、容錯(cuò)訓(xùn)練能力、快速異步checkpoint的能力相結(jié)合,提供極致且穩(wěn)定的環(huán)境,供大家可以高效訓(xùn)練大模型。

2、提供了端到端涵蓋整個(gè)AI工程鏈路的PaaS平臺(tái)。

3、提供豐富的場(chǎng)景化最佳實(shí)踐。

人工智能平臺(tái)PAI在今后會(huì)再這三個(gè)領(lǐng)域持續(xù)大力構(gòu)建云上Serverless產(chǎn)品,給開發(fā)者提供更加廉價(jià)、更加好用的產(chǎn)品力。也希望大家可以借助AIGC這波浪潮,助力業(yè)務(wù)更好發(fā)展!

來源:廠商稿件

作者:投稿

編輯:leilei

圖片來源:

本文鏈接: http://givenhand.cn/article/20231115/1601.html

  • 人工智能
免責(zé)聲明:本網(wǎng)站出于傳播商業(yè)信息之目的進(jìn)行轉(zhuǎn)載發(fā)布,不代表 AIUST.Com 立場(chǎng)。本文所涉文、圖、音視頻等資料之一切權(quán)利和法律責(zé)任歸提供方所有和承擔(dān)。本網(wǎng)站對(duì)文中的圖文等所有信息的真實(shí)性不作任何保證或承諾,請(qǐng)讀者僅作參考,并自行核實(shí)相關(guān)內(nèi)容。本網(wǎng)站的任何內(nèi)容僅供參考,不能做為投資、采購或行為決策依據(jù),據(jù)此操作者風(fēng)險(xiǎn)自擔(dān)。

相關(guān)文章

資訊

原創(chuàng)

薦讀

  • 5G+AR加持 晨星機(jī)器人掀起“智能化+人機(jī)交互”制造新趨勢(shì) 5G+AR加持 晨星機(jī)器人掀起“智能化+人機(jī)交互”制造新趨勢(shì)

    2021世界制造業(yè)大會(huì)于11月22日在合肥落下帷幕。為期四天的大會(huì)中,作為向世界展示智能制造全面能力的窗口,聯(lián)想展示了一系列讓人驚喜的創(chuàng)新產(chǎn)品。現(xiàn)場(chǎng)展示的ThinkPad X1 Fold整體重量?jī)H有1公斤,折疊起來之后的厚度大約為24毫米。當(dāng)保持半開狀態(tài)時(shí),可以像拿本書一樣握住,并且能同時(shí)運(yùn)行兩個(gè)應(yīng)用程序。使用固定在中間的鍵盤之后,瞬間變...

  • 智能手機(jī)競(jìng)爭(zhēng)中失敗,日本在聯(lián)網(wǎng)汽車領(lǐng)域舉步維艱 智能手機(jī)競(jìng)爭(zhēng)中失敗,日本在聯(lián)網(wǎng)汽車領(lǐng)域舉步維艱

    據(jù)外媒報(bào)道,在制造帶有數(shù)字聯(lián)網(wǎng)服務(wù)的汽車的競(jìng)爭(zhēng)中,豐田汽車和日產(chǎn)汽車面臨著被本土市場(chǎng)拖累的風(fēng)險(xiǎn)。與美國和歐洲的汽車消費(fèi)者不同的是,日本消費(fèi)者不愿意為這些聯(lián)網(wǎng)功能和服務(wù)買單。結(jié)果就是:日本只有10%的汽車...

  • 2020年河南省將推廣應(yīng)用3萬臺(tái)工業(yè)機(jī)器人 2020年河南省將推廣應(yīng)用3萬臺(tái)工業(yè)機(jī)器人

    到2020年,推廣應(yīng)用3萬臺(tái)工業(yè)機(jī)器人,建設(shè)1000條智能生產(chǎn)線、300個(gè)智能車間、150個(gè)智能工廠……4月16日,在2018兩岸智能裝備制造鄭州論壇上,河南省工信委發(fā)布了《2017年河南省智能制造白皮書》,河南智能制造的2020...

熱門標(biāo)簽