視頻生成跨越式突破,智象未來(HiDream.ai)智象大模型2.0邁入分鐘級行列
近日,智象未來(HiDream.ai)智象大模型2.0在文生視頻領域取得了重大突破,將視頻生成時長從去年的15秒提升至分鐘級別,這是繼去年12月打破4秒時長限制后的又一技術飛躍。
智象未來(HiDream.ai)智象大模型2.0的文生視頻功能在時長、畫面自然度、內容和角色一致性方面均有顯著提升,這得益于其自研的DiT架構。與傳統U-Net架構相比,DiT架構具有更高的靈活度,能夠有效提升圖像和視頻的生成質量。眾所周知,DiT 架構的基礎實現依賴于 Transformer 技術。為了進一步提升這一技術的性能,智象未來(HiDream.ai)智象大模型 2.0 對整個Transformer網絡結構、訓練數據的構成和訓練策略上采用完全自研的模塊,特別是在訓練策略方面進行了深度研究和改進。
該模型采用了高效的時空聯合注意力機制,不僅適應了視頻的空間域和時間域特征,還解決了傳統注意力機制在訓練過程中的速度問題。為了支持更長視頻片段的訓練,智象未來(HiDream.ai)智象大模型2.0能夠處理幾分鐘甚至十幾分鐘的視頻片段,使得直接輸出分鐘級時長的視頻成為可能。同時,智象未來(HiDream.ai)還自研了視頻描述生成的Captioning Model,實現了對視頻內容的詳細且精準描述。
在訓練策略上,智象未來(HiDream.ai)智象大模型2.0利用不同長度的視頻片段進行視頻和圖片數據的聯合訓練,并動態調整不同長度視頻的采樣率,以完成長鏡頭訓練。此外,模型還根據用戶反饋數據進行強化學習,進一步優化性能。
從原來的15秒左右延長至分鐘級別,智象未來(HiDream.ai)的智象大模型2.0現已實現視頻生成時長的顯著提升,達到了行業領先水平。除了視頻時長進入分鐘級別這一重大進步外,此次升級的另一個亮點是視頻時長和尺寸的可變性。以往的視頻生成模型通常是預設固定時長,用戶無法進行選擇。而智象未來(HiDream.ai)則將選擇權交給了用戶,用戶既可以直接指定視頻時長,也可以根據輸入的Prompt內容,讓系統動態判斷。內容復雜時,系統會生成較長視頻;內容簡單時,則生成較短視頻,以這種動態調整的方式,自適應地滿足用戶的創作需求。同時,視頻的尺寸也可根據用戶需求進行定制,這一靈活的設計大幅提升了用戶體驗。
值得一提的是,智象未來(HiDream.ai)的智象大模型2.0在視頻畫面觀感上也有了顯著的提升,物體動作表現得更加自然流暢,細節渲染更為精細,并且支持了4K超清畫質。隨著這次技術升級,智象未來(HiDream.ai)智象大模型2.0正朝著生成更高質量的多鏡頭視頻方向快速發展,并向L3階段加速前進。據了解,升級后的文生視頻功能即將投入使用,屆時用戶將能夠體驗到更加豐富和高質量的視頻生成服務。
業內人士表示,隨著智象未來(HiDream.ai)智象大模型2.0的不斷完善和升級,其有望為視頻內容創作領域帶來更多革命性的變化,助力廣大用戶輕松實現創意變現,推動整個行業邁向更加廣闊的發展空間。
免責聲明:市場有風險,選擇需謹慎!此文僅供參考,不作買賣依據。
關鍵詞:
責任編輯:孫知兵
免責聲明:本文僅代表作者個人觀點,與太平洋財富網無關。其原創性以及文中陳述文字和內容未經本站證實,對本文以及其中全部或者部分內容、文字的真實性、完整性、及時性本站不作任何保證或承諾,請讀者僅作參考,并請自行核實相關內容。
如有問題,請聯系我們!
- 視頻生成跨越式突破,智象未來(HiDream.ai2024-08-12
- 非遺助陣!舍得將老酒盛宴開進新疆,老酒價2024-08-12
- 國家發改委等三部門印發方案 強化“雙碳”2024-08-12
- 風電光伏發電合計裝機首超煤電2024-08-12
- 深入推進綠色低碳發展——國家發展改革委負2024-08-12
- 以煤為媒:發出光與熱 照亮你和我——《煤2024-08-12
- 2024年服貿會將于9月12日至16日在京舉辦2024-08-12
- 多個用電量數據透視中國經濟 持續向好動力2024-08-12
- 國際勞工組織:全球青年勞動力市場前景有所2024-08-12
- 第32屆廣博會將首次舉辦“全空間無人體系”2024-08-12
- 北京亦莊發布生產性服務業專項政策 提出開2024-08-12
- 整裝最美工匠 | 瓦工張波:方寸之間 砌2024-08-12
- 國開行印發做好金融“五篇大文章”總體方案2024-08-12
- 「吉隆坡Pallet基金會」完成數百萬美元A輪2024-08-12
- 劃重點!央行下半年聚焦票據市場,專業票據2024-08-12
- 票據服務行業代表深度數科—— ”專業陪伴2024-08-12
- “不忘初心、不認輸、不停步” ,愛果樂集2024-08-12
- 涂料展丨和合與共,攜手同行 2024中國國際2024-08-12
- 木林森榮登中國品牌500強,展現民族品牌新2024-08-12
- 太湖遠大IPO網上路演成功舉辦,以“打造細2024-08-12
- 8月10-11日“全國萬人普查月”即將在南京天2024-08-07
- 前海人壽附近商圈感受浪漫,陳琳夫婦甜蜜約2024-08-12
- 網球奪金引爆!深度數科表示:專業票據同樣2024-08-12
- 譚松韻海邊紅裙彰顯浪漫,潤致娃娃針:她的2024-08-12
- 銀飾潮流新風尚!七度銀飾攜手IPTV閃耀登陸2024-08-12
- 中國“星鏈”千帆星座啟航 恒友匯攜伙伴共2024-08-12
- 富邦華一銀行臺青暑期實習計劃助力臺籍學生2024-08-12
- 宏利公布2024年第二季度業績2024-08-12
- 緊跟行業步伐,大全能源為構建可持續未來貢2024-08-12
- 英諾賽科發布車規新品,為新能源汽車智能化2024-08-12
精彩推薦
- eπ007增程版上市交付 全系13.16萬起
- 8月末社會融資規模存量為368.61萬億元,...
- 貸款平穩增長,“組合拳”持續發力——8...
- Mysteel早讀:黑色期貨夜盤飄紅,寶武10...
- 招商蛇口更換掌舵人:“老將”蔣鐵峰升任...
- 搭檔超20年合伙人反目,董事長把副董事長...
- 中國探月工程首任首席科學家:下一步我...
- 好消息!奉賢4座口袋公園改造提升工程即...
- cf體驗服資格是永久的嗎(cf體驗版)
- 李家超昨日下午視察災情,稱香港特區政...
- 存內控獨立性不足等問題,證監會對華西...
- 美網決賽對陣出爐!2號種子拒絕爆冷,2-...
- 千里走單騎的內容概括100字(千里走單騎...
- 洋錢罐借款怎么樣容易下款嗎?看看你就...
- Mysteel晚餐:唐山鋼坯下調40,高爐電爐...