在Chat-GPT3重構(gòu)全世界對(duì)人工智能認(rèn)知的四年后,2024開年,OpenAI所發(fā)布的文字轉(zhuǎn)視頻大模型Sora引爆了AI熱潮。近年來(lái),人們似乎已經(jīng)借助AI之手,在歷史厚重的霧靄中勾勒出了下一階段技術(shù)革命的輪廓。
而在這股AI科技發(fā)展浪潮中,成都樂(lè)曼多旗下千面智娛AI工作室(以下中文簡(jiǎn)稱千面智娛,英文簡(jiǎn)稱Quick magic)歷經(jīng)四年時(shí)間研發(fā)的千面AI視頻動(dòng)捕產(chǎn)品出海全球市場(chǎng)。
據(jù)千面智娛的介紹,工作室成立的最初目的是為了拓展樂(lè)曼多在AI領(lǐng)域新的發(fā)展機(jī)會(huì),同時(shí)將AI技術(shù)參與到公司的研發(fā)流程中,進(jìn)一步提升產(chǎn)品研發(fā)的核心競(jìng)爭(zhēng)力 。
樂(lè)曼多為世人熟知的是其國(guó)內(nèi)領(lǐng)先的體育游戲研發(fā)能力,其中動(dòng)作和戰(zhàn)斗是構(gòu)成體育競(jìng)技游戲的核心體驗(yàn),或許AI能夠提供新的解決路徑。
千面智娛的源起僅僅是一個(gè)想法,對(duì)于當(dāng)時(shí)才憑借體育游戲打出名頭的樂(lè)曼多來(lái)講,AI無(wú)疑是一個(gè)未曾踏足的新領(lǐng)域,這種魄力正符合樂(lè)曼多的氣質(zhì),畢竟打一開始這家廠商就喜歡另辟蹊徑。
“從2D視頻中獲取人物的3D動(dòng)作數(shù)據(jù)””是樂(lè)曼多為千面智娛定下的AI探索發(fā)展方向之一。四年時(shí)間,千面智娛深度耕耘AI視頻動(dòng)作捕捉賽道,逐漸成為這一領(lǐng)域的優(yōu)質(zhì)產(chǎn)品提供商。
千面AI視頻動(dòng)捕技術(shù),作為千面智娛創(chuàng)新研發(fā)的重要里程碑,已經(jīng)達(dá)到了成熟的技術(shù)水準(zhǔn)。這項(xiàng)技術(shù)的核心理念十分簡(jiǎn)潔明了:利用先進(jìn)的人工智能技術(shù),將視頻中的人體關(guān)節(jié)二維信息捕捉并轉(zhuǎn)化為適用于三維模型的動(dòng)作數(shù)據(jù)。這一過(guò)程不僅簡(jiǎn)化了傳統(tǒng)游戲和動(dòng)畫制作中人物動(dòng)作的創(chuàng)建流程,而且極大地提高了制作效率和質(zhì)量。
千面智娛表示,千面AI視頻動(dòng)捕技術(shù)已經(jīng)成功地顛覆了傳統(tǒng)的動(dòng)畫動(dòng)作制作流程。通過(guò)這項(xiàng)技術(shù),動(dòng)畫師們可以更加便捷地將現(xiàn)實(shí)世界的動(dòng)作捕捉并應(yīng)用到虛擬角色上,從而創(chuàng)造出更加生動(dòng)逼真的動(dòng)畫效果。這一技術(shù)的進(jìn)步不僅為動(dòng)畫制作行業(yè)帶來(lái)了革命性的變革,也為創(chuàng)作者們提供了更加廣闊的創(chuàng)作空間和可能性。
千面智娛介紹說(shuō),“傳統(tǒng)的3D動(dòng)作制作面臨著一系列挑戰(zhàn)。在缺乏動(dòng)作捕捉技術(shù)的情況下,動(dòng)畫師需要通過(guò)參考圖片、視頻等素材,手工制作 (手K) 出流暢且自然的動(dòng)作文件。這個(gè)過(guò)程不僅包括模型檢查、骨骼搭建、蒙皮處理和動(dòng)畫制作等繁瑣步驟,而且耗時(shí)且結(jié)果依賴于制作者的專業(yè)水平,這可能導(dǎo)致最終效果與需求方的預(yù)期存在差異?!?/p>
為了解決這一問(wèn)題,千面智娛推出了創(chuàng)新的AI動(dòng)捕技術(shù)。這項(xiàng)技術(shù)允許用戶直接上傳需求視頻,AI將自動(dòng)分析并生成精確的3D動(dòng)畫數(shù)據(jù),其生成的動(dòng)作效果能高質(zhì)量還原視頻細(xì)節(jié),且支持全身捕捉、半身捕捉、面部捕捉、手部捕捉以及多人大場(chǎng)景的動(dòng)作捕捉,其所需的僅僅只有一個(gè)視頻文件。
同時(shí),視頻動(dòng)捕相比傳統(tǒng)手K方式,效率提升非常顯著。九游會(huì)真人游戲以120秒視頻為例,總共3600幀動(dòng)畫(1秒=30幀);視頻動(dòng)捕10多分鐘能完成捕捉,輸出一份3D動(dòng)畫數(shù)據(jù);而動(dòng)畫師對(duì)著視頻參考手K按一天100幀計(jì)算,需要36天(36天=51840分鐘);效率提升 5184 倍。捕捉完成后,用戶可以將這些數(shù)據(jù)輕松導(dǎo)入到任意模型中,極大地簡(jiǎn)化了動(dòng)畫制作的流程。
通過(guò)千面AI動(dòng)捕,動(dòng)畫制作變得更加快捷和高效,同時(shí)也保證了動(dòng)畫質(zhì)量的一致性和高標(biāo)準(zhǔn)。這一技術(shù)的應(yīng)用,不僅提升了制作效率,還降低了對(duì)專業(yè)技能的依賴,使得更多的創(chuàng)作者能夠?qū)崿F(xiàn)他們的創(chuàng)意愿景。千面智娛憑借其先進(jìn)的AI技術(shù),正引領(lǐng)動(dòng)畫產(chǎn)業(yè)走向一個(gè)更加繁榮和創(chuàng)新的未來(lái)。
千面AI視頻動(dòng)捕技術(shù)正引領(lǐng)動(dòng)畫制作行業(yè)邁向一個(gè)全新的時(shí)代。通過(guò)將動(dòng)畫制作的復(fù)雜過(guò)程交給人工智能,這項(xiàng)技術(shù)不僅解放了對(duì)專業(yè)場(chǎng)地和人力資源的依賴,還實(shí)現(xiàn)了成本的大幅降低和效率的顯著提升。現(xiàn)在,用戶可以直接通過(guò)千面AI視頻動(dòng)捕平臺(tái)網(wǎng)站,輕松完成從視頻上傳到動(dòng)畫生成的全過(guò)程,無(wú)須具備計(jì)算機(jī)專業(yè)知識(shí)。
千面智娛目前已經(jīng)分別在海內(nèi)外部署了入口網(wǎng)站,國(guó)內(nèi)站點(diǎn)()與海外站點(diǎn)(),這樣的全球布局能為世界范圍內(nèi)的創(chuàng)作者帶來(lái)易用性和高生成質(zhì)量兼具的AI UGC平臺(tái),極大地降低動(dòng)畫制作的入門門檻,為個(gè)人用戶打開創(chuàng)作的大門。
同時(shí),九游會(huì)真人游戲千面智娛通過(guò)開放API接口,為企業(yè)提供了更多的靈活性和創(chuàng)新空間,鼓勵(lì)他們利用這一技術(shù)創(chuàng)造出更加多元和豐富的內(nèi)容,共同促進(jìn)UGC生態(tài)的繁榮發(fā)展。 千面AI視頻動(dòng)捕技術(shù)的推出,不僅為動(dòng)畫制作帶來(lái)了革命性的變革,也為整個(gè)創(chuàng)意產(chǎn)業(yè)的未來(lái)描繪了一幅光明的藍(lán)圖。
千面智娛第一代AI產(chǎn)品視頻動(dòng)捕面向?qū)I(yè)用戶從視頻得到3D動(dòng)作數(shù)據(jù),第二代AI產(chǎn)品阿瓦塔面向普通用戶創(chuàng)作豐富多彩的視頻內(nèi)容。從專業(yè)用戶使用的AI動(dòng)作捕捉工具到普通用戶使用的AI UGC創(chuàng)作平臺(tái)的進(jìn)化,千面智娛的愿景——“人人皆可創(chuàng)造”,正在實(shí)現(xiàn)。
樂(lè)曼多早在2019年根據(jù)自身的業(yè)務(wù)需求,前瞻性投入對(duì)AI技術(shù)的相關(guān)研究,目前除了在AI視頻動(dòng)捕的成功應(yīng)用外,公司已在美術(shù)、程序、策劃、運(yùn)營(yíng)等環(huán)節(jié)形成清晰的AI發(fā)展規(guī)劃布局。
樂(lè)曼多擁有《街籃2》等多款游戲產(chǎn)品,在運(yùn)營(yíng)階段根據(jù)場(chǎng)景需要將AI陪玩部署應(yīng)用到產(chǎn)品中,向玩家持續(xù)提供情緒價(jià)值,增加用戶體驗(yàn),豐富游戲生態(tài)。
使用深度監(jiān)督學(xué)習(xí)技術(shù),讓局內(nèi)陪玩AI的行為和玩家對(duì)齊,實(shí)現(xiàn)了AI行為的擬真性。同時(shí)融合大語(yǔ)言模型(LLM)技術(shù)和聲音合成技術(shù)(TTS),AI在局內(nèi)和局外與玩家通過(guò)文字、聲音進(jìn)行擬真互動(dòng),向玩家提供鼓勵(lì)、支援、求助、調(diào)侃、戲謔等多種情緒價(jià)值。
為助力用戶擁抱AI時(shí)代,解決美術(shù)層面的多端需求,千面智娛為B、C端雙端量身架設(shè)了AI美術(shù)生成平臺(tái)。對(duì)于B端用戶來(lái)說(shuō),其是專業(yè)的原創(chuàng)角色設(shè)計(jì)、場(chǎng)景圖片渲染、UI美術(shù)設(shè)計(jì)、2D3D轉(zhuǎn)換等需求的一站式解決方案,同時(shí),其集成了樂(lè)曼多十年來(lái)對(duì)于體育游戲以及漫畫IP改編的經(jīng)驗(yàn),能夠承擔(dān)漫改IP的游戲化還原過(guò)程中美術(shù)層面的諸多工作。
而對(duì)于C端用戶,其又是簡(jiǎn)單、易用的AI美術(shù)生成器,不論是在圖片生成過(guò)程中精準(zhǔn)還原用戶關(guān)鍵詞需求,還是直接對(duì)常規(guī)視頻進(jìn)行LIVE2D轉(zhuǎn)化,均是一把好手。
樂(lè)曼多和千面智娛深知,隨著時(shí)代的發(fā)展,技術(shù)的進(jìn)步會(huì)帶來(lái)新的需求,競(jìng)爭(zhēng)也會(huì)愈發(fā)激烈。而要想抓住用戶,必須要進(jìn)一步拓展AI產(chǎn)品的使用場(chǎng)景與空間。樂(lè)曼多與千面智娛現(xiàn)在已經(jīng)開始了3D模型的AI生成與渲染、文字生成視頻、文字生成代碼等多種功能的測(cè)試、研發(fā)與布局。
十年時(shí)間,樂(lè)曼多以體育游戲?yàn)槠瘘c(diǎn),敢于挑戰(zhàn),耐心成長(zhǎng)為以AI技術(shù)內(nèi)核驅(qū)動(dòng)的科技企業(yè),在未來(lái),千面智娛也將繼續(xù)致力下沉AI技術(shù),讓技術(shù)最終為生活添彩、為生產(chǎn)助力,為人人皆可創(chuàng)作的愿景不懈努力。