Kaiber的新應用程式利用生成式AI工具幫助藝術家創作音樂視頻

Kaiber是背後的生成式AI創意工作室,製作了流行藝術家Kid Cudi和Linkin Park的音樂視頻,今天宣布推出其新的移動應用程式,為創作者、音樂人和藝術家提供一系列AI工具,包括文本到視頻、圖像到視頻和視頻到視頻。

成立於2022年,Kaiber利用了各種開源項目,如AnimatedDiff、Automatic1111、ControlNet和Deforum等。它還擁有專利技術層將所有元素融合成一個藝術工具。

與其他AI視頻生成器(Runway、Meta的Make-A-Video和Google的Imagen Video)一樣,Kaiber允許用戶上傳圖像/視頻或輸入自己的想法來生成動畫內容。

Kaiber提供兩種動畫風格——“翻頁書”,逐幀效果,或“運動”,流暢風格,在其中內容在幀之間平滑過渡。用戶可以描述他們希望視頻的外觀,或從Kaiber的預設主題和風格中選擇。

Kaiber允許用戶自定相機運動,無論是他們想要動畫放大/縮小、順時針/逆時針旋轉或向上、向下、向左或向右移動。還有不同的長寬比,取決於創作者想要上傳視頻的平台。例如,YouTube的16:9,TikTok的9:16和Instagram的1:1、3:4或4:3。允許的最長視頻持續時間為八分鐘,但該公司計劃在未來支援更長的視頻。視頻生成需要30分鐘。

圖片來源:Kaiber

此外,用戶可以添加自己的音樂,使該應用程式成為獨立藝術家的負擔得起的選擇,他們不想為僅一個視頻支付動畫工作室數十萬美元。此外,Kaiber還包括音頻反應功能,意味著輸出會響應用戶上傳的音頻。

“我們的移動應用程序將Kaiber的核心能力——如文本到視頻、圖像到視頻和視頻到視頻——融合成了一個小巧、用戶友好的格式,”共同創始人兼首席執行官Victor Wang告訴TechCrunch。

Wang補充說:“雖然一些高級工具如全面的故事板和特定的文本到視頻模型仍然僅限於Web版,但客戶應該很快可以期待功能平等。”

除了應用程式的推出,Kaiber還與三位獨立藝術家合作推出了“共同創作”功能,這是移動體驗獨有的。用戶可以使用針對每位藝術家設計的音樂和生成式AI風格創建內容。

值得注意的是,其中一位藝術家是該公司的共同創始人兼首席技術官Eric Gao,他的藝名是Oksami。他在Spotify上擁有超過53,000名聽眾和將近58,000名YouTube訂閱者。用戶可以試聽他的四首最受歡迎的歌曲,包括在Spotify上超過1百萬次播放的《Midnight Diner》。應用程式中的另外兩位藝術家是Yung Bae和August Kamp。

關於商業權利,支付帳戶的創作者擁有他們製作的視頻。免費帳戶的用戶獲得Commons Noncommercial 4.0 Attribution International許可,這意味著他們有權使用內容,但不能出售。使用免費帳戶製作的視頻將帶有Kaiber標誌水印。

Kaiber還提供聯盟計劃,讓創作者獲得訂閱推薦的10%傭金。只要推薦的客戶保持訂閱,聯盟夥伴就可以繼續獲得傭金。

Kaiber的應用程式可在iOS和Android設備上使用。有三個訂閱級別:探索者(每月5美元,300積分),專業版(每月15美元,1,000積分)和藝術家版(每月30美元,2,500積分)。一個積分等於一秒長的視頻。但根據使用的功能不同,積分成本也有所不同。還有提供100積分的七天免費試用。

“我們的核心理念是創作過程很難,”共同創始人兼創意負責人Jacky Lu告訴我們。“但創作過程在所有形式上具有共同的因素,如音樂、視頻、圖像和其他形式的藝術——人們以相似的模式創作東西。為了做出最好的藝術作品,我們需要直觀和簡單的工具,以及受到他人啟發的能力。現在有了生成AI,我們可以與其他人和機器一起創作藝術。”

Kaiber於今年五月從測試版中推出,擁有超過200萬用戶。現在,該公司宣稱擁有超過500萬名註冊用戶。Kid Cudi的AI動力歌詞視頻和Linkin Park的AI音樂視頻幫助使Kaiber名聲大噪,還有一個病毒性的TikTok趨勢稱為“Astral Jump”。該公司的工作室技術產品Kaiber Studios已為超過200萬藝術家提供生成式音頻和視頻支持,包括Grimes、Wu-Tang Clan、Money Man、Don Diablo和Mike Shinoda。

Kaiber完全自給自足。在推出幾個月後,公司報告稱總收入達到了七位數。

@daniverdari

WAKE UP ✨ ASTRAL JUMP #trend #tutorial 的教程

♬ The Enemy Between My Ears – Sons Of Charlie

王和高是童年的好朋友,他們的母親一起從上海移民到美國。他們於2022年二月創立了他們的第一家初創公司Secret Garden,作為對Web3 NFT熱潮的回應。該公司的第一次銷售獲得了120萬美元的總收入,利潤約30萬美元,為業務提供了資金。不幸的是,FTX市場崩盤導致Secret Garden的資金受損,他們別無選擇,只能倒閉。

“FTX.us的市場崩盤考驗了我們的韌性,但我們的決心只變得更加堅定,從Secret Garden的灰燼中誕生了Kaiber,”王說。“這是一個克服逆境的敘事,由熱情和對音樂與視覺藝術中人工智能變革力量的堅定信念推動。”

AI初創公司Runway推出應用程式,為用戶帶來視頻到視頻生成AI