字節(jié)大模型內(nèi)部賽馬，下一個(gè)爆款 or 燒錢深坑？
今年最火的兩款全球AI產(chǎn)品，當(dāng)屬視頻生成大模型產(chǎn)品Sora和音樂生成大模型產(chǎn)品Suno。
今年4月，經(jīng)Suno爆改的周杰倫金曲《以父之名》和《夜曲》直接封神，在音樂界掀起了一股不小的波瀾。不少人認(rèn)為，這兩條賽道會(huì)催生出新的爆款產(chǎn)品，誰(shuí)能夠拿下其中一條賽道，誰(shuí)就能成為AI行業(yè)的王者。
兩款A(yù)I產(chǎn)品的火爆，迅速點(diǎn)燃了國(guó)內(nèi)大廠對(duì)這兩條賽道的爭(zhēng)奪戰(zhàn)。阿里發(fā)布了通義萬相AI視頻服務(wù)，字節(jié)跳動(dòng)發(fā)布了“PixelDance”，快手發(fā)布了視頻大模型產(chǎn)品“可靈”，QQ音樂、網(wǎng)易云音樂也發(fā)布了AI創(chuàng)作功能，而AI頭部公司的Minimax、生數(shù)科技、智譜AI也紛紛跟進(jìn)。
在這兩條熱門賽道中最不遺余力的當(dāng)屬字節(jié)。9月24日，火山引擎在深圳舉辦AI創(chuàng)新巡展上，發(fā)布了豆包視頻生成-PixelDance、豆包視頻生成-Seaweed兩款大模型，意味著字節(jié)正式宣告進(jìn)軍AI視頻生成賽道。
不僅如此，字節(jié)還在音樂生成賽道上，推出了Seed-Music音樂生成模型，并于今年7月推出了發(fā)布了全新版本的海綿音樂APP，主打“一鍵創(chuàng)作你的AI音樂”，這款產(chǎn)品也是字節(jié)AI音樂產(chǎn)品的代表作。
至此，字節(jié)完成了在AI視頻和AI音樂這兩條熱門賽道上的全布局。火力全開之下的字節(jié)，能夠得償所愿嗎？
字節(jié)AI賽道創(chuàng)業(yè)：試錯(cuò)、內(nèi)部賽馬并舉
豆包視頻生成大模型的發(fā)布，是字節(jié)在AI領(lǐng)域的一次重磅亮相。
據(jù)火山引擎介紹，豆包視頻生成模型基于DiT架構(gòu)，通過高效的DiT融合計(jì)算單元，讓視頻在大動(dòng)態(tài)與運(yùn)鏡中自由切換，擁有變焦、環(huán)繞、平搖、縮放、目標(biāo)跟隨等多鏡頭語(yǔ)言能力。
而在此前視頻生成模型大多只能完成簡(jiǎn)單指令，豆包視頻生成模型則能實(shí)現(xiàn)自然連貫的多拍動(dòng)作與多主體復(fù)雜交互。例如，后者可以讓不同人物完成多個(gè)動(dòng)作指令的互動(dòng)，使人物樣貌、服裝細(xì)節(jié)甚至頭飾，在不同運(yùn)鏡下也保持一致，接近實(shí)拍效果。
基于豆包視頻生成大模型，字節(jié)內(nèi)部也推出了相關(guān)的具有AI視頻生產(chǎn)能力的產(chǎn)品，主要由兩個(gè)業(yè)務(wù)團(tuán)隊(duì)在推進(jìn)，一個(gè)是豆包，一個(gè)是剪映，可以看做是內(nèi)部的一場(chǎng)賽馬。
豆包對(duì)外的產(chǎn)品是豆包APP，剪映則是即夢(mèng)AI APP，兩者的底層技術(shù)都是使用的豆包視頻生成大模型，即夢(mèng)使用的是豆包視頻生成大模型“PixelDance”。
兩款產(chǎn)品雖然都有著視頻生成能力，但即夢(mèng)更具有代表性。
即夢(mèng)的前身是Dreamina，是原字節(jié)跳動(dòng)中國(guó)CEO、轉(zhuǎn)崗至剪映的業(yè)務(wù)負(fù)責(zé)人張楠的創(chuàng)業(yè)項(xiàng)目。剛上線之時(shí)，這僅僅是一個(gè)文生圖的創(chuàng)作產(chǎn)品。隨后，Dreamina瞄上了Sora的潛力，內(nèi)部基于PixelDance模型開始研發(fā)視頻生成能力，今年2月，Dreamina的視頻生成服務(wù)開啟對(duì)外測(cè)試。
今年5月，Dreamina改名即夢(mèng)，宣布其AI作圖和AI視頻生成功能全量上線，并在DY內(nèi)進(jìn)行大量投放。張楠更是在朋友圈轉(zhuǎn)發(fā)，稱即夢(mèng)剛剛上線，還有很多待優(yōu)化的地方。
音樂生成方面，海綿音樂APP則是字節(jié)的代表，這款產(chǎn)品是字節(jié)在AI賽道上試錯(cuò)的一個(gè)典型案例。海綿音樂的前身是2022年2月的海綿樂隊(duì)APP。Tech星球了解到，這是字節(jié)內(nèi)部的一款創(chuàng)業(yè)項(xiàng)目，但這款產(chǎn)品誕生之初并不是奔著AI而去，而是服務(wù)于汽水音樂和DY上對(duì)音樂編輯有所需求的用戶。
到了2022年底，隨著國(guó)內(nèi)AI浪潮出現(xiàn)后，海綿樂隊(duì)才開始轉(zhuǎn)向AI領(lǐng)域，并加入AI作曲能力，但此時(shí)的創(chuàng)作能力很一般，“因?yàn)榇藭r(shí)的字節(jié)，并沒有成體系的音樂生成大模型，海綿樂隊(duì)只能靠自己去摸索”，一位曾在海綿樂隊(duì)工作的員工向Tech星球表示。
2023年6月推出了新版本，主打哼唱成曲和伴奏制作，雖然在AI能力上仍不出眾，但對(duì)接下來的試錯(cuò)和更新提供了經(jīng)驗(yàn)。隨著豆包音樂生成模型的出現(xiàn)，才讓海綿樂隊(duì)有了一戰(zhàn)之力，最終在今年7月，更名為海綿音樂，主攻AI音樂創(chuàng)作賽道。目前，已經(jīng)開始在各渠道進(jìn)行投放推廣。
需要注意的是，字節(jié)的AI產(chǎn)品在這兩條賽道上的發(fā)展并不是獨(dú)立，而是相互競(jìng)爭(zhēng)。豆包、即夢(mèng)在近期也開始推出音樂生成服務(wù)，逐步滲透到AI音樂賽道，“競(jìng)爭(zhēng)是無可避免的，誰(shuí)都想成為爆款A(yù)I產(chǎn)品，誰(shuí)都想成為或繼續(xù)保持在內(nèi)部的核心位置，這無疑需要AI產(chǎn)品更加具有綜合體驗(yàn)”，即夢(mèng)的一位運(yùn)營(yíng)告訴Tech星球。
左手視頻，右手音樂
據(jù)七麥數(shù)據(jù)顯示，字節(jié)視頻生成APP即夢(mèng)自今年8月上線以來，在iOS端的攝影與錄像（免費(fèi)）榜單的排名逐漸上升，兩個(gè)月時(shí)間，已經(jīng)穩(wěn)定在前40的名次，安卓端，近30天日均下載量，為22978次。
借助DYAPP以及投放，即夢(mèng)的視頻生成服務(wù)逐漸成為不少DY創(chuàng)作者的首選。但即夢(mèng)并不滿足于此，今年8月，即夢(mèng)開始在AI短劇領(lǐng)域的創(chuàng)作探索。聯(lián)合DY、博納影業(yè)AIGMS制作中心出品并制作《三星堆：未來啟示錄》。即夢(mèng)還在DY內(nèi)發(fā)起了“即夢(mèng)AI迷你劇場(chǎng)”的活動(dòng)，支持AI短劇的創(chuàng)作。
截至9月，豆包大模型日均tokens使用量已經(jīng)超過1.3萬億，相比5月首次發(fā)布時(shí)猛增十倍，其中不乏即夢(mèng)所作出的貢獻(xiàn)。
在商業(yè)模式上，即夢(mèng)已推出會(huì)員體系，有79元單月、69元連續(xù)包月和659元包年的基礎(chǔ)會(huì)員等不同訂閱方式。具體來說，基礎(chǔ)會(huì)員每月可使用505個(gè)積分生成約2020張圖片或168個(gè)AI視頻。
有分析人士認(rèn)為，即夢(mèng)目前的產(chǎn)品功能、商業(yè)模式聚焦于服務(wù)UGC（用戶生成內(nèi)容），與DY的生態(tài)融合將是未來的發(fā)展重點(diǎn)。
相比于字節(jié)在視頻生成方面取得的成績(jī)，字節(jié)在音樂生成方面，目前仍然是不溫不火。七麥數(shù)據(jù)顯示，海綿音樂有著廣告投放，但并沒有在iOS端，取得排名，近30日日均下載量?jī)H為15次。
音樂行業(yè)人士李磊認(rèn)為，雖然AI音樂很火，但好聽的AI歌曲創(chuàng)作多來自于專業(yè)人士，普通用戶對(duì)于AI音樂生成工具的使用門檻和學(xué)習(xí)成本也有一定的要求，如果工具過于復(fù)雜或難以使用，就會(huì)影響用戶的體驗(yàn)和接受度。而且，用戶對(duì)AI音樂的接受度也需要時(shí)間來培養(yǎng)。
“字節(jié)在多個(gè)領(lǐng)域都有業(yè)務(wù)布局，在資源有限的情況下，公司需要在不同業(yè)務(wù)之間進(jìn)行資源分配和權(quán)衡。AI音樂生成領(lǐng)域雖然具有很大的發(fā)展?jié)摿Γ谇捌谛枰罅康难邪l(fā)投入和市場(chǎng)推廣，相比于更加成熟的AI視頻，公司肯定更愿意加大對(duì)這一塊的力度投入”，一位汽水音樂的運(yùn)營(yíng)小可告訴Tech星球。
下一個(gè)AI爆款，還是燒錢深坑
不可否認(rèn)，AIGC（人工智能生成內(nèi)容）是一個(gè)巨大的市場(chǎng)，量子位智庫(kù)預(yù)計(jì)，2024年我國(guó)AIGC應(yīng)用市場(chǎng)規(guī)模達(dá)到200億。2030年，我國(guó)AIGC應(yīng)用將成為萬億規(guī)模市場(chǎng)，五年(2024-2028年)平均復(fù)合增長(zhǎng)率超過30%。
目前，國(guó)內(nèi)在視頻生成模型方面，有優(yōu)勢(shì)的是快手和字節(jié)跳動(dòng)，因?yàn)槎叩臉I(yè)務(wù)離視頻更近，能夠待其視頻生成足夠優(yōu)秀之后會(huì)快速完成拉新，并帶動(dòng)用戶體驗(yàn)提升。
而背靠快手的視頻生成AI產(chǎn)品可靈，也成為了字節(jié)在AI視頻賽道上最有力的競(jìng)爭(zhēng)者。
可靈的發(fā)展速度也很迅猛，今年8月的官方數(shù)據(jù)顯示，可靈累計(jì)生成視頻數(shù)量超過1600萬，不到2個(gè)月，可靈AI已有超過360萬用戶，累計(jì)生成3700萬個(gè)視頻和超過一億張圖片。
近日，快手副總裁、大模型團(tuán)隊(duì)負(fù)責(zé)人張迪宣布，可靈AI將內(nèi)測(cè)視頻人臉模型功能。該功能基于創(chuàng)新的ID保持能力，支持用戶自助訓(xùn)練人臉模型，完成訓(xùn)練后，可使用該模型進(jìn)行5秒至10秒的文生視頻。
此外，AI視頻生成技術(shù)研發(fā)成本高和周期長(zhǎng)也是一個(gè)事實(shí)。據(jù)界面新聞報(bào)道，百度CEO李彥宏稱“百度不做Sora”后，有關(guān)“中國(guó)版Sora到底值不值得做”的話題，在微博、小紅書等社交媒體引發(fā)眾多爭(zhēng)論。
李彥宏在內(nèi)部講話中稱，Sora這種視頻生成模型的投入周期太長(zhǎng)，10年、20年都可能拿不到業(yè)務(wù)收益，無論多火爆，百度都不去做。
AI音樂生成方面，版本正在快速迭代，字節(jié)仍需快馬加鞭。近日，AI音樂創(chuàng)作平臺(tái)Suno推出的一項(xiàng)創(chuàng)新功能——SunoScenes，允許用戶通過上傳照片和視頻作為提示詞，生成與之相匹配的30秒音樂。
而且，音樂數(shù)據(jù)的版權(quán)問題也是一個(gè)挑戰(zhàn)。獲取合法的音樂數(shù)據(jù)，需要與版權(quán)方進(jìn)行合作，這可能會(huì)增加成本和難度。同時(shí)，音樂數(shù)據(jù)的質(zhì)量也參差不齊，如何篩選和整理高質(zhì)量的音樂數(shù)據(jù)用于模型訓(xùn)練是一個(gè)重要的問題。
本文鏈接：http://knowith.com/news-23-16620.html字節(jié)大模型內(nèi)部賽馬，下一個(gè)爆款 or 燒錢深坑？
聲明：本網(wǎng)頁(yè)內(nèi)容由互聯(lián)網(wǎng)博主自發(fā)貢獻(xiàn)，不代表本站觀點(diǎn)，本站不承擔(dān)任何法律責(zé)任。天上不會(huì)到餡餅，請(qǐng)大家謹(jǐn)防詐騙！若有侵權(quán)等問題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系，我們將在第一時(shí)間刪除處理。
