分享到微信打開微信,點(diǎn)擊底部的“發(fā)現(xiàn)”, |
繼Sora、Vidu、快手可靈、Luma AI輪番出場“秀”完之后,視頻生成領(lǐng)域的核心玩家Runway也來了。
當(dāng)?shù)貢r(shí)間6月17日,AI視頻生成初創(chuàng)公司Runway在官網(wǎng)宣布,即將推出新的視頻生成模型Gen-3 Alpha,該模型可以創(chuàng)建具有復(fù)雜場景變化、多種電影風(fēng)格和詳細(xì)藝術(shù)指導(dǎo)的高精細(xì)視頻。
目前Gen-3還未開放給公眾試用,但在官網(wǎng)的博客中,Runway秀出了數(shù)十個(gè)精彩的生成視頻,無論是光線、色彩、運(yùn)動(dòng)軌跡、人物細(xì)節(jié)都非常逼真,有行業(yè)人士表示一些視頻是Sora級(jí)別的質(zhì)量。
Runway表示,Gen-3 Alpha是即將推出的一系列模型中的首個(gè),這一系列模型是在為大規(guī)模多模態(tài)訓(xùn)練而構(gòu)建的新基礎(chǔ)設(shè)施上訓(xùn)練的。Gen-3 Alpha 經(jīng)過視頻和圖像聯(lián)合訓(xùn)練,將為 Runway 的文本轉(zhuǎn)視頻、圖像轉(zhuǎn)視頻和文本轉(zhuǎn)圖像工具、現(xiàn)有控制模式(如運(yùn)動(dòng)畫筆、高級(jí)相機(jī)控制、導(dǎo)演模式)以及即將推出的工具提供支持,以更精細(xì)地控制結(jié)構(gòu)、風(fēng)格和運(yùn)動(dòng)。
Gen-3 Alpha背后的訓(xùn)練工作是研究科學(xué)家、工程師和藝術(shù)家組成的跨學(xué)科團(tuán)隊(duì)共同努力完成的,旨在讓Gen-3 Alpha理解、解釋各種藝術(shù)風(fēng)格和電影術(shù)語。Runway提到,與 Gen-2 相比,Gen-3在保真度、一致性和運(yùn)動(dòng)方面有了重大改進(jìn),并且朝著構(gòu)建通用世界模型邁出了一步。
Runway 2018年成立紐約,在2023年6月完成了1.41億美元的 C 輪融資,估值達(dá)到15億美元,這一輪投資方包括谷歌、英偉達(dá)、Salesforce Venture 等。自創(chuàng)立以來Runway的總?cè)谫Y額已達(dá)2.37億美元。
Runway是AI視頻生成領(lǐng)域的先行者,2023年2月Runway發(fā)布第一代視頻生成模型Gen1,支持視頻風(fēng)格轉(zhuǎn)繪;隨后在2023年3月發(fā)布Gen2,拉開了文生視頻和圖生視頻的序幕。Runway也和不少電影有過合作,包括《黑寡婦》《瞬息全宇宙》等都運(yùn)用了Runway的技術(shù)支持。
自O(shè)penAI在年初發(fā)布Sora以來,AI視頻生成“戰(zhàn)場”就風(fēng)起云涌。上周6月12日,AI初創(chuàng)公司Luma AI發(fā)布視頻生成工具Dream Machine,效果逼真且開放使用,引起轟動(dòng),用戶涌入網(wǎng)頁導(dǎo)致“請求需排隊(duì)”。同樣在本月,快手自研視頻生成大模型可靈上線,申請使用的預(yù)約人數(shù)已經(jīng)超5萬。4月底,生數(shù)科技發(fā)布首個(gè)文生視頻模型Vidu,稱全面對(duì)標(biāo)Sora。
在這個(gè)時(shí)間點(diǎn),Runway加入隊(duì)列宣布發(fā)布新一代視頻生成模型,有行業(yè)人士稱其“坐不住了”。目前Runway官網(wǎng)工具界面仍然顯示的是Gen-2模型,此次提及的Gen-3還未有入口。
①國家超算互聯(lián)網(wǎng)QwQ-32B API接口服務(wù)上線,免費(fèi)100萬Tokens;②華為已正式組建醫(yī)療衛(wèi)生軍團(tuán),重點(diǎn)構(gòu)建AI輔助診斷解決方案體系,推動(dòng)醫(yī)療大模型在臨床場景的應(yīng)用;③中控技術(shù)與大華股份成立視覺AI聯(lián)合實(shí)驗(yàn)室。
在能力較突出的視頻生成大模型中,開源模型已占有一席之地。
AI會(huì)不會(huì)叩響處理器架構(gòu)革命的閘門?
全國首個(gè)AI心臟大模型“觀心”測試版將于2月26日發(fā)布。
AI制藥行業(yè)正展現(xiàn)出前所未有的廣闊發(fā)展前景,其重要性及影響力在醫(yī)藥領(lǐng)域內(nèi)日益凸顯。通過整合大數(shù)據(jù)與機(jī)器學(xué)習(xí)算法,AI制藥正全面推動(dòng)藥物研發(fā)流程的加速,為醫(yī)藥產(chǎn)業(yè)的革新與發(fā)展注入了新的活力。