應(yīng)用

技術(shù)

物聯(lián)網(wǎng)世界 >> 物聯(lián)網(wǎng)新聞 >> 物聯(lián)網(wǎng)熱點(diǎn)新聞
企業(yè)注冊個人注冊登錄

昆侖萬維發(fā)布 AI 短劇平臺 SkyReels:可生成劇情 / 對白,號稱讓創(chuàng)作者“一鍵成劇”

2024-08-20 09:21 IT之家
關(guān)鍵詞:昆侖萬維AI

導(dǎo)讀:昆侖萬維全球首個集成視頻大模型與 3D 大模型的 AI 短劇平臺 SkyReels 正式發(fā)布。

  從昆侖萬維獲悉,全球首個集成視頻大模型與 3D 大模型的 AI 短劇平臺 SkyReels 正式發(fā)布。

image.png

  據(jù)官方介紹,SkyReels 平臺集劇本生成、角色定制、分鏡、劇情、對白 / BGM 及影片合成于一體,創(chuàng)作者能夠“一鍵成劇”,用戶輸入一個簡單創(chuàng)意,該工具即可完成從劇本到成品短劇制作的全流程

  官方分享了一段 AI 短劇 DEMO 如下:

  一天,敏感內(nèi)向的男孩小杰獨(dú)自走在街頭,卻意外偶遇了一只不屬于地球的靈動小生物 —— 它那一身亮橙色皮毛在陽光下閃閃發(fā)亮。小生物跟小杰在相處中成了朋友,他們在草坪上打盹、在水池中嬉戲??尚〗懿恢赖氖?,這只毛茸茸的小生物,竟是實驗室里逃走的 424 試驗品 ——

image.png

  該平臺集成了昆侖萬維自研劇本大模型SkyScript、自研分鏡大模型StoryboardGen、自研3D 生成大模型Sky3DGen、以及業(yè)界首個將 AI 3D 引擎與視頻大模型深度融合的創(chuàng)新平臺 WorldEngine。

  具體來看,SkyReels 可通過 AI 一鍵生成完整劇本、分鏡、人物對白與 BGM,支持角色形象、音色與分鏡的自定義調(diào)整,并能夠自動將內(nèi)容轉(zhuǎn)換為 1080P 60 幀的高清視頻,單次可生成視頻長度達(dá) 180 秒。

  昆侖萬維號稱構(gòu)建了億級的高質(zhì)量短劇結(jié)構(gòu)化數(shù)據(jù)集SkyScript-100M,該數(shù)據(jù)集針對海量精彩短劇的劇情節(jié)奏、爽點(diǎn)、情緒變化進(jìn)行了高質(zhì)量標(biāo)注。