OpenAI 除了有聊天機器人 ChatGPT、AI 文生圖工具 DALL-E 3 外，現在也要開始在「AI 影片生成」上發力！日前 OpenAI 宣布推出全新影片生成模型「Sora」，只要透過文字敘述即可生成一部時長 60 秒的超逼真影片。
雖說目前 Sora 還沒開放使用，但驚人的實際效果已經讓人非常期待未來正式上線後的發展。
OpenAI 全新影片生成模型「Sora」
Sora 是 OpenAI 日前新推出的影片生成模型，用戶只要跟之前使用 AI 繪圖一樣給出文字敘述（提示詞 / Prompt），Sora 就會依照用戶要求生成一段時長 60 秒的影片。
OpenAI 表示 Sora 能夠理解用戶的敘述內容，甚至會判斷敘述中的人事物在現實世界的存在方式，進而生成包含複雜場景與多個角色、特定動作、精確主體與背景細節的影片。
- 複雜場景與多個角色：Sora 可以創造出包含人物、動物、物件等多個元素的場景，這些元素之間能夠進行互動，使畫面充滿故事性。
- 特定動作：Sora 能夠理解並描繪不同的動作，例如走路、奔跑、跳躍、飛行等，並且這些動作皆能符合現實世界的物理原則。
- 精確主體與背景細節：Sora 可準確描繪主體與背景細節，像是人物的表情、服飾、物體外觀、光影效果等等。
不僅如此，Sora 還具備深度語言理解能力，可精準解讀文字敘述並生成具備情感的角色；也可在統一人物形象和視覺風格的前提下生成多鏡頭畫面。
而 Sora 的實際效果也確實非常驚人，生成的影片超逼真，各位可以看以下 OpenAI 提供的範例：
Introducing Sora, our text-to-video model.
Sora can create videos of up to 60 seconds featuring highly detailed scenes, complex camera motion, and multiple characters with vibrant emotions. https://t.co/7j2JN27M3W
Prompt: “Beautiful, snowy… pic.twitter.com/ruTEWn87vf
— OpenAI (@OpenAI) February 15, 2024
影片提示詞（中文翻譯）：「雪花紛飛，美麗的東京街頭一片繁忙。鏡頭穿梭於熙熙攘攘的街道，追隨著一些人享受著美麗的雪景和在附近攤位購物。絢麗的櫻花花瓣與雪花一起隨風飄舞。」
Prompt: “A stylish woman walks down a Tokyo street filled with warm glowing neon and animated city signage. she wears a black leather jacket, a long red dress, and black boots, and carries a black purse. she wears sunglasses and red lipstick. she walks confidently and casually.… pic.twitter.com/cjIdgYFaWq
— OpenAI (@OpenAI) February 15, 2024
影片提示詞（中文翻譯）：「一位時尚的女子走在東京街上，周圍充斥著溫暖發光的霓虹和動態的城市招牌。她身穿黑色皮夾克、紅色長裙和黑色靴子，手上拎著黑色包包。她戴著墨鏡，擦著紅色口紅，自信而閒適地走著。街道濕漉漉的，反射出五彩斑斕的燈光，仿佛一面鏡子。周圍也有許多行人走動。」
Prompt: “Animated scene features a close-up of a short fluffy monster kneeling beside a melting red candle. the art style is 3d and realistic, with a focus on lighting and texture. the mood of the painting is one of wonder and curiosity, as the monster gazes at the flame with… pic.twitter.com/aLMgJPI0y6
— OpenAI (@OpenAI) February 15, 2024
影片提示詞（中文翻譯）：「動畫場景聚焦一隻矮小、毛茸茸的怪物跪在燃燒的紅色蠟燭旁，近距離特寫。場景採用 3D 風格，以寫實細膩的筆觸描繪光影和紋理。怪物瞪大眼睛，張開嘴巴凝視火焰，畫面洋溢著驚奇和好奇的氛圍。它的姿勢和表情傳達出一種純真和頑皮的意境，彷彿它正在初次探索周圍的世界。畫面運用暖色調的燈光，進一步襯托溫馨舒適的氣氛。」
Sora 尚未開放使用，目前還有細節需要改善
不過 OpenAI 仍表示 Sora 現階段尚未開發完成、屬於半成品階段，還無法完全精細還原每個場景細節，例如吃餅乾後餅乾上可能會沒有咬痕、人類在跑步機上跑錯方向、會莫名其妙無中生有多個人物…等等；所以 Sora 尚未開放給大眾使用。
目前 Sora 是僅開放給「Red Teaming」測試，以模型是否有潛在的危害或風險；也有開放給一些視覺藝術家、設計師、電影製作人，希望透過專家的意見持續優化 Sora 模型。
OpenAI 說明選在開發階段就發表 Sora 目的是為了盡早與外界合作，獲得更多回饋；同時也讓大眾了解未來 AI 的能力。
更多 AI 相關資訊》
- 不只是靜態的圖片！蘋果最新 AI 模型幫你把文字轉動畫
- Google Bard 正式改名 Gemini：並推出 Gemini Advanced 方案，連手機也能用
- Photoshop 網頁版開放使用 AI 編輯功能，從無到有生成、填色、擴張都 OK
- 結合 AI 功能的超強瀏覽器「Arc Search 」，幫你一鍵統整所有搜尋結果
- ChatGPT 的 App Store 來了！OpenAI 宣布開放 GPT Store 商店，還可以分潤
相關文章
