[每日中文朗读] OpenAI Sora:“原始版”世界模拟器 我们离黑客帝国还有多远?

要約

SORAが発表された同日、OPENAIが最新の動画生成モデルSTABLE CASCADEを発売した。SORAは、生成型AI画像とビデオ分野の競争を激化させるに違いないと筆者。ユーザーは驚きのあまり、SORAにも「またとない」と高く評価されている。
原文: 新浪 每日科技新闻 2024年02月17日
movie generative ai

本文(ピンイン)

“两[liǎng]只[zhǐ]金[jīn]毛[máo]猎[liè]犬[quǎn]在[zài]山[shān]顶[dǐng]播[bō]客[kè]”

“火[huǒ]星[xīng]上[shàng]日[rì]落[luò]时[shí]的[de]一[yī]场[chǎng]极[jí]具[jù]未[wèi]来[lái]感[gǎn]的[de]无[wú]人[rén]机[jī]比[bǐ]赛[sài]”

“在[zài]一[yí]个[gè]与[yǔ]自[zì]然[rán]和[hé]谐[xié]共[gòng]生[shēng],同[tóng]时[shí]又[yòu]有[yǒu]超[chāo]强[qiáng]朋[péng]克[kè]气[qì]质[zhí]和[hé]高[gāo]科[kē]技[jì]属[shǔ]性[xìng]的[de]未[wèi]来[lái]城[chéng]市[shì]漫[màn]游[yóu]……”

根[gēn]据[jù]上[shàng]述[shù]提[tí]示[shì]词[cí],OpenAI首[shǒu]席[xí]执[zhí]行[xíng]官[guān]阿[ā]尔[ěr]特[tè]曼[màn]在[zài]X平[píng]台[tái]上[shàng]发[fā]布[bù]了[le]一[yī]系[xì]列[liè]视[shì]频[pín],精[jīng]美[měi]的[dí]场[chǎng]景[jǐng]让[ràng]用[yòng]户[hù]惊[jīng]叹[tàn]不[bù]已[yǐ]。而[ér]这[zhè]些[xiē]视[shì]频[pín]全[quán]都[dōu]是[shì]通[tōng]过[guò]OpenAI 2月[yuè]15日[rì]发[fā]布[bù]的[de]最[zuì]新[xīn]视[shì]频[pín]生[shēng]成[chéng]模[mó]型[xíng]Sora制[zhì]作[zuò]的[de],用[yòng]户[hù]震[zhèn]惊[jīng]之[zhī]余[yú],也[yě]给[jǐ]予[yǔ]了[le]Sora高[gāo]度[dù]评[píng]价[jià],将[jiāng]其[qí]描[miáo]述[shù]为[wèi]“绝[jué]无[wú]仅[jǐn]有[yǒu]”和[hé]“游[yóu]戏[xì]规[guī]则[zé]改[gǎi]变[biàn]者[zhě]”。

图[tú]片[piàn]来[lái]源[yuán]:X平[píng]台[tái]图[tú]片[piàn]来[lái]源[yuán]:X平[píng]台[tái]
Sora采[cǎi]用[yòng]了[le]OpenAI文[wén]生[shēng]图[tú]模[mó]型[xíng]DALL–E 3背[bèi]后[hòu]的[de]强[qiáng]大[dà]技[jì]术[shù],可[kě]将[jiāng]简[jiǎn]短[duǎn]的[de]文[wén]本[běn]描[miáo]述[shù]转[zhuǎn]化[huà]成[chéng]长[cháng]达[dá]1分[fēn]钟[zhōng]的[de]高[gāo]清[qīng]视[shì]频[pín]。业[yè]界[jiè]大[dà]佬[lǎo]Gabor Cselle将[jiāng]Sora和[hé]Pika、RunwayML和[hé]Stable Video进[jìn]行[xíng]对[duì]比[bǐ]后[hòu]发[fā]现[xiàn],在[zài]输[shū]入[rù]相[xiàng]同[tóng]的[de]提[tí]示[shì]后[hòu],其[qí]他[tā]主[zhǔ]流[liú]工[gōng]具[jù]生[shēng]成[chéng]的[de]视[shì]频[pín]都[dōu]大[dà]约[yuē]只[zhǐ]有[yǒu]5秒[miǎo]钟[zhōng],Sora可[kě]以[yǐ]在[zài]一[yī]段[duàn]长[cháng]达[dá]17秒[miǎo]视[shì]频[pín]场[chǎng]景[jǐng]中[zhōng],保[bǎo]持[chí]动[dòng]作[zuò]和[hé]画[huà]面[miàn]一[yī]致[zhì]性[xìng]。

英[yīng]伟[wěi]达[dá]人[rén]工[gōng]智[zhì]能[néng]研[yán]究[jiū]院[yuàn]首[shǒu]席[xí]研[yán]究[jiū]科[kē]学[xué]家[jiā]Jim Fan也[yě]对[duì]Sora的[de]能[néng]力[lì]发[fā]出[chū]感[gǎn]叹[tàn],称[chēng]这[zhè]是[shì]视[shì]频[pín]生[shēng]成[chéng]领[lǐng]域[yù]的[de]GPT–3时[shí]刻[kè]。他[tā]表[biǎo]示[shì],Sora是[shì]一[yí]个[gè]“数[shù]据[jù]驱[qū]动[dòng]的[de]物[wù]理[lǐ]引[yǐn]擎[qíng]”,一[yí]个[gè]可[kě]学[xué]习[xí]的[de]模[mó]拟[nǐ]器[qì]或[huò]“世[shì]界[jiè]模[mó]型[xíng]”。360集[jí]团[tuán]创[chuàng]始[shǐ]人[rén]、董[dǒng]事[shì]长[zhǎng]周[zhōu]鸿[hóng]祎[yī]则[zé]称[chēng],随[suí]着[zhe]Sora的[de]到[dào]来[lái],人[rén]类[lèi]离[lí]AGI真[zhēn]的[de]就[jiù]不[bù]远[yuǎn]了[le],不[bú]是[shì]10年[nián]、20年[nián]的[de]问[wèn]题[tí],可[kě]能[néng]一[yī]两[liǎng]年[nián]很[hěn]快[kuài]就[jiù]可[kě]以[yǐ]实[shí]现[xiàn]。

在[zài]随[suí]后[hòu]发[fā]布[bù]的[de]技[jì]术[shù]报[bào]告[gào]中[zhōng],OpenAI介[jiè]绍[shào]了[le]Sora的[de]强[qiáng]大[dà]性[xìng]能[néng]以[yǐ]及[jí]背[bèi]后[hòu]的[de]支[zhī]撑[chēng]技[jì]术[shù],也[yě]对[duì]Sora的[de]局[jú]限[xiàn]性[xìng]进[jìn]行[xíng]了[le]客[kè]观[guān]的[de]分[fēn]析[xī]。《每[měi]日[rì]经[jīng]济[jì]新[xīn]闻[wén]》记[jì]者[zhě]通[tōng]过[guò]梳[shū]理[lǐ],总[zǒng]结[jié]出[chū]了[le]Sora的[de]六[liù]大[dà]核[hé]心[xīn]优[yōu]势[shì]。

从[cóng]技[jì]术[shù]上[shàng]看[kàn],Sora有[yǒu]望[wàng]将[jiāng]数[shù]字[zì]内[nèi]容[róng]的[de]创[chuàng]造[zào]力[lì]和[hé]真[zhēn]实[shí]感[gǎn]提[tí]升[shēng]到[dào]新[xīn]的[de]水[shuǐ]平[píng],但[dàn]凡[fán]事[shì]总[zǒng]有[yǒu]两[liǎng]面[miàn]性[xìng],影[yǐng]视[shì]、广[guǎng]告[gào]制[zhì]作[zuò]和[hé]视[shì]频[pín]等[děng]行[háng]业[yè]也[yě]将[jiāng]面[miàn]临[lín]严[yán]重[zhòng]的[de]冲[chōng]击[jī]。另[lìng]外[wài],有[yǒu]专[zhuān]家[jiā]对[duì]于[yú]技[jì]术[shù]的[de]迅[xùn]猛[měng]发[fā]展[zhǎn]也[yě]表[biǎo]示[shì]出[chū]了[le]担[dān]忧[yōu],称[chēng]这[zhè]类[lèi]技[jì]术[shù]可[kě]能[néng]会[huì]导[dǎo]致[zhì]“深[shēn]度[dù]伪[wěi]造[zào]”视[shì]频[pín],让[ràng]人[rén]难[nán]以[yǐ]识[shí]别[bié],产[chǎn]生[shēng]滥[làn]用[yòng]等[děng]问[wèn]题[tí]。

技[jì]术[shù]报[bào]告[gào]揭[jiē]秘[mì]Sora六[liù]大[dà]核[hé]心[xīn]优[yōu]势[shì]

值[zhí]得[de]注[zhù]意[yì]的[de]是[shì],Sora推[tuī]出[chū]的[de]同[tóng]一[yì]天[tiān],谷[gǔ]歌[gē](141.76, –2.18, –1.51%)发[fā]布[bù]了[le]Gemini多[duō]模[mó]态[tài]模[mó]型[xíng]的[de]更[gēng]新[xīn]版[bǎn]本[běn],而[ér]三[sān]天[tiān]前[qián],Stability AI推[tuī]出[chū]了[le]新[xīn]的[de]图[tú]像[xiàng]生[shēng]成[chéng]模[mó]型[xíng]Stable Cascade。OpenAI的[de]最[zuì]新[xīn]举[jǔ]动[dòng]无[wú]疑[yí]将[jiāng]加[jiā]剧[jù]生[shēng]成[chéng]式[shì]AI图[tú]片[piàn]和[hé]视[shì]频[pín]领[lǐng]域[yù]的[de]竞[jìng]争[zhēng]。

而[ér]在[zài]Sora推[tuī]出[chū]后[hòu]不[bù]久[jiǔ],OpenAI发[fā]布[bù]了[le]这[zhè]款[kuǎn]新[xīn]工[gōng]具[jù]的[de]技[jì]术[shù]报[bào]告[gào]。在[zài]报[bào]告[gào]中[zhōng],OpenAI首[shǒu]先[xiān]重[zhòng]点[diǎn]介[jiè]绍[shào]了[liǎo]如[rú]何[hé]将[jiāng]不[bù]同[tóng]类[lèi]型[xíng]的[de]视[shì]觉[jué]数[shù]据[jù]转[zhuǎn]化[huà]为[wéi]统[tǒng]一[yī]的[de]格[gé]式[shì],以[yǐ]便[biàn]于[yú]对[duì]生[shēng]成[chéng]模[mó]型[xíng]进[jìn]行[xíng]大[dà]规[guī]模[mó]训[xùn]练[liàn]的[de]方[fāng]法[fǎ],并[bìng]对[duì]Sora的[de]能[néng]力[lì]和[hé]局[jú]限[xiàn]性[xìng]进[jìn]行[xíng]了[le]评[píng]价[jià]。

图[tú]片[piàn]来[lái]源[yuán]:Sora技[jì]术[shù]报[bào]告[gào]图[tú]片[piàn]来[lái]源[yuán]:Sora技[jì]术[shù]报[bào]告[gào]
《每[měi]日[rì]经[jīng]济[jì]新[xīn]闻[wén]》记[jì]者[zhě]经[jīng]过[guò]对[duì]报[bào]告[gào]的[de]梳[shū]理[lǐ],总[zǒng]结[jié]出[chū]了[le]Sora的[de]6大[dà]优[yōu]势[shì]:

(1)准[zhǔn]确[què]性[xìng]和[hé]多[duō]样[yàng]性[xìng]:Sora可[kě]将[jiāng]简[jiǎn]短[duǎn]的[de]文[wén]本[běn]描[miáo]述[shù]转[zhuǎn]化[huà]成[chéng]长[cháng]达[dá]1分[fēn]钟[zhōng]的[de]高[gāo]清[qīng]视[shì]频[pín]。它[tā]可[kě]以[yǐ]准[zhǔn]确[què]地[dì]解[jiě]释[shì]用[yòng]户[hù]提[tí]供[gōng]的[de]文[wén]本[běn]输[shū]入[rù],并[bìng]生[shēng]成[chéng]具[jù]有[yǒu]各[gè]种[zhǒng]场[chǎng]景[jǐng]和[hé]人[rén]物[wù]的[de]高[gāo]质[zhí]量[liàng]视[shì]频[pín]剪[jiǎn]辑[jí]。它[tā]涵[hán]盖[gài]了[le]广[guǎng]泛[fàn]的[de]主[zhǔ]题[tí],从[cóng]人[rén]物[wù]和[hé]动[dòng]物[wù]到[dào]郁[yù]郁[yù]葱[cōng]葱[cōng]的[de]风[fēng]景[jǐng]、城[chéng]市[shì]场[chǎng]景[jǐng]、花[huā]园[yuán],甚[shèn]至[zhì]是[shì]水[shuǐ]下[xià]的[de]纽[niǔ]约[yuē]市[shì],可[kě]根[gēn]据[jù]用[yòng]户[hù]的[de]要[yāo]求[qiú]提[tí]供[gōng]多[duō]样[yàng]化[huà]的[de]内[nèi]容[róng]。另[lìng]据[jù]Medium,Sora能[néng]够[gòu]准[zhǔn]确[què]解[jiě]释[shì]长[cháng]达[dá]135个[gè]单[dān]词[cí]的[de]长[zhǎng]提[tí]示[shì]。

(2)强[qiáng]大[dà]的[de]语[yǔ]言[yán]理[lǐ]解[jiě]:OpenAI利[lì]用[yòng]Dall–E模[mó]型[xíng]的[de]re–captioning(重[chóng]述[shù]要[yào]点[diǎn])技[jì]术[shù],生[shēng]成[chéng]视[shì]觉[jué]训[xùn]练[liàn]数[shù]据[jù]的[de]描[miáo]述[shù]性[xìng]字[zì]幕[mù],不[bù]仅[jǐn]能[néng]提[tí]高[gāo]文[wén]本[běn]的[de]准[zhǔn]确[què]性[xìng],还[hái]能[néng]提[tí]升[shēng]视[shì]频[pín]的[de]整[zhěng]体[tǐ]质[zhí]量[liàng]。此[cǐ]外[wài],与[yǔ]DALL·E 3类[lèi]似[sì],OpenAI还[hái]利[lì]用[yòng]GPT技[jì]术[shù]将[jiāng]简[jiǎn]短[duǎn]的[de]用[yòng]户[hù]提[tí]示[shì]转[zhuǎn]换[huàn]为[wèi]更[gèng]长[zhǎng]的[de]详[xiáng]细[xì]转[zhuǎn]译[yì],并[bìng]将[jiāng]其[qí]发[fā]送[sòng]到[dào]视[shì]频[pín]模[mó]型[xíng]。这[zhè]使[shǐ]Sora能[néng]够[gòu]精[jīng]确[què]地[dì]按[àn]照[zhào]用[yòng]户[hù]提[tí]示[shì]生[shēng]成[chéng]高[gāo]质[zhí]量[liàng]的[de]视[shì]频[pín]。

(3)以[yǐ]图[tú]/视[shì]频[pín]生[shēng]成[chéng]视[shì]频[pín]:Sora除[chú]了[le]可[kě]以[yǐ]将[jiāng]文[wén]本[běn]转[zhuǎn]化[huà]为[wéi]视[shì]频[pín],还[hái]能[néng]接[jiē]受[shòu]其[qí]他[tā]类[lèi]型[xíng]的[de]输[shū]入[rù]提[tí]示[shì],如[rú]已[yǐ]经[jīng]存[cún]在[zài]的[de]图[tú]像[xiàng]或[huò]视[shì]频[pín]。这[zhè]使[shǐ]Sora能[néng]够[gòu]执[zhí]行[xíng]广[guǎng]泛[fàn]的[de]图[tú]像[xiàng]和[hé]视[shì]频[pín]编[biān]辑[jí]任[rèn]务[wù],如[rú]创[chuàng]建[jiàn]完[wán]美[měi]的[dí]循[xún]环[huán]视[shì]频[pín]、将[jiāng]静[jìng]态[tài]图[tú]像[xiàng]转[zhuǎn]化[huà]为[wéi]动[dòng]画[huà]、向[xiàng]前[qián]或[huò]向[xiàng]后[hòu]扩[kuò]展[zhǎn]视[shì]频[pín]等[děng]。OpenAI在[zài]报[bào]告[gào]中[zhōng]展[zhǎn]示[shì]了[le]基[jī]于[yú]DALL·E 2和[hé]DALL·E 3的[de]图[tú]像[xiàng]生[shēng]成[chéng]的[de]demo视[shì]频[pín]。这[zhè]不[bù]仅[jǐn]证[zhèng]明[míng]了[liǎo]Sora的[de]强[qiáng]大[dà]功[gōng]能[néng],还[hái]展[zhǎn]示[shì]了[le]它[tā]在[zài]图[tú]像[xiàng]和[hé]视[shì]频[pín]编[biān]辑[jí]领[lǐng]域[yù]的[de]无[wú]限[xiàn]潜[qián]力[lì]。

(4)视[shì]频[pín]扩[kuò]展[zhǎn]功[gōng]能[néng]:由[yóu]于[yú]可[kě]接[jiē]受[shòu]多[duō]样[yàng]化[huà]的[de]输[shū]入[rù]提[tí]示[shì],用[yòng]户[hù]可[kě]...

単語(ピンイン)

金[jīn]毛[máo]猎[liè]犬[quǎn] Golden retriever
日[rì]落[luò]时[shí] At Sunset
根[gēn]据[jù]上[shàng]述[shù] Based on the above ; ubisupra
首[shǒu]席[xí]执[zhí]行[xíng]官[guān] chief executive officer
阿[ā]尔[ěr]特[tè]曼[màn] Altman ; Altmann ; Sam Altman
一[yī]系[xì]列[liè] a series of ; a range of ; range ; sequence ; succession ; string ; round ; battery ; constellation ; tail ; parade
惊[jīng]叹[tàn]不[bù]已[yǐ] Amazing ; perpetually wonder at (sth.)
高[gāo]度[dù]评[píng]价[jià] Highly rated ; set a high value on ; high rating ; give a high appraisal to ; speak highly of sb ; value oneself on
游[yóu]戏[xì]规[guī]则[zé] Game Rules ; rules for games ; play rules
改[gǎi]变[biàn]者[zhě] changer ; Game Changer ; Changemaker ; Alter

中国語

Posted by revolution-x