AVt天堂网 手机版,亚洲va久久久噜噜噜久久4399,天天综合亚洲色在线精品,亚洲一级Av无码毛片久久精品

當前位置:首頁 > 科技  > 知識百科

谷歌奪回AI畫語權(quán),網(wǎng)友:DALL·E 2誕生一個月就過時了?

來源: 責編: 時間:2023-08-07 16:30:19 275觀看
導(dǎo)讀 本文經(jīng)AI新媒體量子位(公眾號ID:QbitAI)授權(quán)轉(zhuǎn)載,轉(zhuǎn)載請聯(lián)系出處。在讓AI搞創(chuàng)作這件事上,谷歌和OpenAI正面剛起來了。這不,震驚全網(wǎng)的DALL·E 2才新鮮出爐一個月,谷歌就派出

本文經(jīng)AI新媒體量子位(公眾號ID:QbitAI)授權(quán)轉(zhuǎn)載,轉(zhuǎn)載請聯(lián)系出處。6ed28資訊網(wǎng)——每日最新資訊28at.com

在讓AI搞創(chuàng)作這件事上,谷歌和OpenAI正面剛起來了。6ed28資訊網(wǎng)——每日最新資訊28at.com

這不,震驚全網(wǎng)的DALL·E 2才新鮮出爐一個月,谷歌就派出名為Imagen的選手來打擂臺。6ed28資訊網(wǎng)——每日最新資訊28at.com

 6ed28資訊網(wǎng)——每日最新資訊28at.com

直接上圖對比,左邊是谷歌Imagen選手眼中的“貓貓絆倒人類雕像”,右邊則是DALL·E 2選手的同題創(chuàng)作。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

你覺得哪一位選手的作品更符合題意?6ed28資訊網(wǎng)——每日最新資訊28at.com

而讓網(wǎng)友們直呼“DALL·E 2這就過時了?”的,還不只是這種正面PK的刺激。6ed28資訊網(wǎng)——每日最新資訊28at.com

看到這么一張照片,如果不說是AI生成的,是不是要先感嘆一句兩腳獸的擺拍技術(shù)越來越高超了?6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

輸入“折紙作品:一只狐貍和一只獨角獸在飄雪的森林里”,Imagen創(chuàng)作出的畫面則是醬嬸的:6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

還可以試試把文字寫得長一點。6ed28資訊網(wǎng)——每日最新資訊28at.com

比如《一只非常快樂的毛茸熊貓打扮成了在廚房里做面團的廚師的高對比度畫像,他身后的墻上還有一幅畫了鮮花的畫》…(啊先讓我喘口氣)6ed28資訊網(wǎng)——每日最新資訊28at.com

Imagen也輕松拿下,要素齊全:6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

看到這,機器學習圈的網(wǎng)友反應(yīng)是這樣的:6ed28資訊網(wǎng)——每日最新資訊28at.com

不是吧,這才一個月就又更新?lián)Q代了?6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

求求別再震驚我了。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

這事兒熱度一起,很快就破了圈。6ed28資訊網(wǎng)——每日最新資訊28at.com

吃瓜群眾們立刻就想到一塊去了。6ed28資訊網(wǎng)——每日最新資訊28at.com

以后可能沒圖庫網(wǎng)站什么事兒了。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

那么這個來自谷歌的新AI,又掌握了什么獨家秘技?6ed28資訊網(wǎng)——每日最新資訊28at.com

具體詳情,我們一起接著往下看。6ed28資訊網(wǎng)——每日最新資訊28at.com

增強「理解」比優(yōu)化「生成」更重要6ed28資訊網(wǎng)——每日最新資訊28at.com

文本到圖像生成我們之前介紹過不少,基本都是一個套路:6ed28資訊網(wǎng)——每日最新資訊28at.com

CLIP負責從文本特征映射到圖像特征,然后指導(dǎo)一個GAN或擴散模型生成圖像。6ed28資訊網(wǎng)——每日最新資訊28at.com

但谷歌Imagen這次有個顛覆性的改變——6ed28資訊網(wǎng)——每日最新資訊28at.com

使用純語言模型只負責編碼文本特征,把文本到圖像轉(zhuǎn)換的工作丟給了圖像生成模型。6ed28資訊網(wǎng)——每日最新資訊28at.com

語言模型部分使用的是谷歌自家的T5-XXL,訓(xùn)練好后凍結(jié)住文本編碼器。6ed28資訊網(wǎng)——每日最新資訊28at.com

圖像生成部分則是一系列擴散模型,先生成低分辨率圖像,再逐級超采樣。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

這樣做最大的好處,是純文本訓(xùn)練數(shù)據(jù)要比高質(zhì)量圖文對數(shù)據(jù)容易獲取的多。6ed28資訊網(wǎng)——每日最新資訊28at.com

T5-XXL的C4訓(xùn)練集包含800GB的純文本語料,在文本理解能力上會比用有限圖文對訓(xùn)練的CLIP要強。6ed28資訊網(wǎng)——每日最新資訊28at.com

這一點也有著實驗數(shù)據(jù)做支撐,人類評估上,T5-XXL在保真度和語義對齊方面表現(xiàn)都比CLIP要好。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

在實驗中谷歌還發(fā)現(xiàn),擴大語言模型的規(guī)模對最后效果影響更大,超過擴大圖像生成模型的影響。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

看到這有網(wǎng)友指出,谷歌最后采用的T5-XXL參數(shù)規(guī)模還不到最新PaLM語言模型5400億參數(shù)的1%,如果用上PaLM,又會是啥樣?6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

除了語言模型部分的發(fā)現(xiàn),谷歌通過Imagen的研究對擴算模型作出不少優(yōu)化。6ed28資訊網(wǎng)——每日最新資訊28at.com

首先,增加無分類器引導(dǎo)(classifier-free guidance)的權(quán)重可以改善圖文對齊,但會損害圖像保真度。6ed28資訊網(wǎng)——每日最新資訊28at.com

解決的辦法是每一步采樣時使用動態(tài)閾值,能夠防止過飽和。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

第二,使用高引導(dǎo)權(quán)重的同時在低分辨率圖像上增加噪聲,可以改善擴散模型多樣性不足的問題。6ed28資訊網(wǎng)——每日最新資訊28at.com

第三,對擴散模型的經(jīng)典結(jié)構(gòu)U-Net做了改進,新的Efficient U-Net改善了內(nèi)存使用效率、收斂速度和推理時間。6ed28資訊網(wǎng)——每日最新資訊28at.com

對語言理解和圖像生成都做出改進之后,Imagen模型作為一個整體在評估中也取得了很好的成績。6ed28資訊網(wǎng)——每日最新資訊28at.com

比如在COCO基準測試上達到新SOTA,卻根本沒用COCO數(shù)據(jù)集訓(xùn)練。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

在COCO測試的人類評估部分也發(fā)現(xiàn)了Imagen的一個缺點,不擅長生成人類圖像。6ed28資訊網(wǎng)——每日最新資訊28at.com

具體表現(xiàn)是,無人類圖像在寫實度上獲得更高的人類偏好度。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

同時,谷歌推出了比COCO更有挑戰(zhàn)性的測試基準DrawBench,包含各種刁鉆的提示詞。6ed28資訊網(wǎng)——每日最新資訊28at.com

實驗發(fā)現(xiàn),DALL·E 2難以準確理解同時出現(xiàn)兩個顏色要求的情況,而Imagen就沒問題。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

反常識情況,比如“馬騎著宇航員”兩者表現(xiàn)都不佳,只能畫出“宇航員騎著馬”。6ed28資訊網(wǎng)——每日最新資訊28at.com

但是Imagen對“一只熊貓在做咖啡拉花”理解更準確,只錯了一次。DALL·E 2則全都把熊貓畫進了拉花圖案里。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

△大概“馬騎著宇航員”有點反常識(狗頭)6ed28資訊網(wǎng)——每日最新資訊28at.com

對于要求圖像中出現(xiàn)文字的,也是Imagen做得更好。6ed28資訊網(wǎng)——每日最新資訊28at.com

除了最基本的把文字寫對以外,還可以正確給文字加上煙花效果。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

AI畫畫越來越出圈6ed28資訊網(wǎng)——每日最新資訊28at.com

說起來,AI作畫這件事,最早便源起于谷歌。6ed28資訊網(wǎng)——每日最新資訊28at.com

2015年,谷歌推出DeepDream,開創(chuàng)了AI根據(jù)文本生成圖像的先河。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

△DeepDream作品6ed28資訊網(wǎng)——每日最新資訊28at.com

但要說相關(guān)技術(shù)真正開“卷”、出圈,標志性事件還得數(shù)2021年OpenAI的DALL·E橫空出世。6ed28資訊網(wǎng)——每日最新資訊28at.com

當時,吳恩達、Keras之父等一眾大佬都紛紛轉(zhuǎn)發(fā)、點贊,DALL·E甚至被稱為2021年第一個令人興奮的AI技術(shù)突破。6ed28資訊網(wǎng)——每日最新資訊28at.com

隨后,語言理解模型和圖像生成模型多年來的技術(shù)進展,便在“AI作畫”這件事上集中爆發(fā),一系列CLIP+GAN、CLIP+擴散模型的研究和應(yīng)用,頻頻在網(wǎng)絡(luò)上掀起熱潮。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

從此一發(fā)不可收拾,技術(shù)更新迭代越來越快。6ed28資訊網(wǎng)——每日最新資訊28at.com

DALL·E 2剛發(fā)布的時候就有網(wǎng)友發(fā)起一個投票,問多長時間會出現(xiàn)新的SOTA。6ed28資訊網(wǎng)——每日最新資訊28at.com

當時大多數(shù)人選了幾個月或1年以上。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

但現(xiàn)在,Imagen的出現(xiàn)只用了6周。6ed28資訊網(wǎng)——每日最新資訊28at.com

隨著AI畫畫效果越來越強大,受眾范圍也不斷擴大,突破技術(shù)圈進入大眾視野。6ed28資訊網(wǎng)——每日最新資訊28at.com

前一陣,就有AI畫畫應(yīng)用登上蘋果App Store圖形與設(shè)計排行榜榜首。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

現(xiàn)在最新的潮流,是各路設(shè)計師排隊申請Midjourney、Tiamat等商業(yè)化產(chǎn)品的內(nèi)測,刷爆社交網(wǎng)絡(luò)。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

如此出圈,也給OpenAI和谷歌這樣的大公司帶來很大壓力。6ed28資訊網(wǎng)——每日最新資訊28at.com

出于AI倫理、公平性等方面考慮,DALL·E 2和Imagen都沒有直接開源或開放API。6ed28資訊網(wǎng)——每日最新資訊28at.com

各自也都在論文里有大篇幅涉及風險、社會影響力的內(nèi)容。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

OpenAI選擇了內(nèi)測模式,而谷歌還在做進一步研究和規(guī)范,等到確保AI不被濫用之后再擇機公開。6ed28資訊網(wǎng)——每日最新資訊28at.com

現(xiàn)在想體驗Imagen的話,有一個在線Demo演示。6ed28資訊網(wǎng)——每日最新資訊28at.com

可以從給定的幾個提示詞中自由組合出不同場景。6ed28資訊網(wǎng)——每日最新資訊28at.com

6ed28資訊網(wǎng)——每日最新資訊28at.com

快來試試吧~6ed28資訊網(wǎng)——每日最新資訊28at.com

Demo地址:6ed28資訊網(wǎng)——每日最新資訊28at.com
https://gweb-research-imagen.appspot.com6ed28資訊網(wǎng)——每日最新資訊28at.com

論文地址:6ed28資訊網(wǎng)——每日最新資訊28at.com
https://gweb-research-imagen.appspot.com/paper.pdf6ed28資訊網(wǎng)——每日最新資訊28at.com

 6ed28資訊網(wǎng)——每日最新資訊28at.com

本文鏈接:http://www.tebozhan.com/showinfo-119-2346-0.html谷歌奪回AI畫語權(quán),網(wǎng)友:DALL·E 2誕生一個月就過時了?

聲明:本網(wǎng)頁內(nèi)容旨在傳播知識,若有侵權(quán)等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 消息稱博通與云計算公司VMware洽談收購事宜 后者市值約400億美元

下一篇: DeepMind開源了MuJoCo!Meta竟用來讓「骷髏手」盤核桃

標簽:
  • 熱門焦點
Top