阿里云AI視頻進化:可一鍵讓照片開口說話 媲美真人
【資料圖】
快科技8月16日消息, 阿里云推出數(shù)字人視頻生成工具Live Portait,上傳一張照片和一段文本或語音即可生成一段開口說話的數(shù)字人視頻。
該功能可應用于視頻直播、聊天機器人、企業(yè)營銷等場景。目前,該工具已在魔搭社區(qū)創(chuàng)空間開放體驗。
自對話大模型和AI繪畫模型相繼火熱后,業(yè)界對生成式AI的研究逐步朝更多模態(tài)的方向演進,AI視頻生成便是熱門技術(shù)之一。該技術(shù)可將文本或音頻等信息轉(zhuǎn)換為面部運動信息,進而驅(qū)動生成照片人物形象的動畫,能有效降低視頻拍攝和制作門檻。
此次上線的Live Portait工具由運動模塊和生成模塊組成,其 采用阿里云自研的口型預測算法,生成的口型準確度相比傳統(tǒng)方法大幅提高 ;在訓練階段,增加了姿態(tài)的顯式控制,無需底板視頻也可以生成任意動作的視頻,大幅提升數(shù)字人說話的真實感。
此外,通過眼神主動控制技術(shù), Live Portait可以為眼球增加一些自然運動,使得生成結(jié)果在觀感上更接近真人效果。 據(jù)介紹,Live Portait相關技術(shù)已被CVPR、ICCV等國際AI頂會收錄。
根據(jù)魔搭社區(qū)上的信息顯示,在Live Portait上傳照片后,用戶可選擇文本驅(qū)動和音頻驅(qū)動兩種方式,文本驅(qū)動模式下, 該工具提供了普通話、英語、粵語、童聲等28種聲音。 此外,Live Portait還提供了輕量模型選擇,幫助用戶更快速生成視頻。
該工具算法負責人張邦表示:“ Live Portait集成了團隊多項自研創(chuàng)新技術(shù),例如僅需單張圖片就能生成逼真的面部動畫,突破了傳統(tǒng)對抗生成網(wǎng)絡的局限。隨著技術(shù)的進一步迭代,圖生視頻有巨大的應用空間,有望成為企業(yè)降本增效的生產(chǎn)工具。”
據(jù)悉,該團隊研究方向涵蓋數(shù)字人、3D模型AI生成、高真實感渲染、自然人機交互等領域,目前已發(fā)表50多篇國際頂會論文。
關鍵詞:
相關文章
新時代新征程新偉業(yè)丨江蘇:快慢之間 創(chuàng)新跑出新節(jié)奏
您的瀏覽器不支持此視頻格式央視網(wǎng)消息(新聞聯(lián)播):江蘇聚焦科技自立
銀行無卡轉(zhuǎn)賬怎么操作_無卡轉(zhuǎn)賬怎么操作
你們好,最近小活發(fā)現(xiàn)有諸多的小伙伴們對于銀行無卡轉(zhuǎn)賬怎么操作,無卡
武漢蒲潭社區(qū):開通線上義賣銷售渠道 激發(fā)殘疾人就業(yè)創(chuàng)業(yè)活力
武漢蒲潭社區(qū):開通線上義賣銷售渠道激發(fā)殘疾人就業(yè)創(chuàng)業(yè)活力---陽光家
精彩推送
森峰科技創(chuàng)業(yè)板首發(fā)申請過會:融合激光技術(shù)與智能制造先進理念 加速核心技術(shù)自研和成果轉(zhuǎn)化
8月17日,濟南森峰激光科技股份有限公司(以下簡稱“森峰科技”)創(chuàng)業(yè)
【財經(jīng)分析】重慶啤酒二季度股東總數(shù)翻番 分析人士對業(yè)績預期存分歧
股價在8月16日創(chuàng)出年內(nèi)新低的重慶啤酒在披露半年報后迎來漲停,帶動釀
72個總投資487億元項目集中簽約開工 我市與全省同步舉行第九期“三個一批”項目建設活動
新鄉(xiāng)網(wǎng)訊(新鄉(xiāng)日報全媒體記者廖亮)8月15日,我市與全省同步舉行第九
企業(yè)管理信息系統(tǒng)案例分析 企業(yè)管理信息系統(tǒng)
1、一)數(shù)據(jù)處理功能 1 數(shù)據(jù)收集2 數(shù)據(jù)準備3 數(shù)據(jù)輸入4 數(shù)據(jù)處理5 數(shù)
國泰環(huán)保:8月15日融資買入593.37萬元,融資融券余額5264.52萬元
8月15日,國泰環(huán)保(301203)融資買入593 37萬元,融資償還456 85萬元
大族數(shù)控:8月15日融券凈賣出400股,連續(xù)3日累計凈賣出3400股
8月15日,大族數(shù)控(301200)融資買入311 07萬元,融資償還318 44萬元
新湖集團就轉(zhuǎn)讓新湖中寶8.6億股簽署股份轉(zhuǎn)讓補充協(xié)議
為進一步符合相關部門監(jiān)管要求,根據(jù)《上海證券交易所上市公司股份協(xié)議
區(qū)域發(fā)展新亮點丨“相互奔赴”暖消費 共繪優(yōu)質(zhì)生活圈——粵港澳大灣區(qū)協(xié)同發(fā)展觀察
新華社廣州8月16日電題:“相互奔赴”暖消費共繪優(yōu)質(zhì)生活圈——粵港澳
蘇美達股東戶數(shù)增加3.24%,戶均持股31.73萬元
蘇美達最新股東戶數(shù)3 53萬戶,低于行業(yè)平均水平。公司戶均持有流通股份
「17日資金路線圖」兩市主力資金凈流出70億元 機械設備等行業(yè)實現(xiàn)凈流入
8月17日,大盤盤初下探至3130點附近后,持續(xù)拉升走高,三大指數(shù)盤中經(jīng)
渴望轉(zhuǎn)型的龍王豆?jié){,首嘗聯(lián)名就被《超能一家人》坑了
鋅刻度從龍王豆?jié){在社交平臺上發(fā)布的宣傳帖看到,有關這一聯(lián)名款的宣傳
新時代新征程新偉業(yè)丨江蘇:快慢之間 創(chuàng)新跑出新節(jié)奏
您的瀏覽器不支持此視頻格式央視網(wǎng)消息(新聞聯(lián)播):江蘇聚焦科技自立
銀行無卡轉(zhuǎn)賬怎么操作_無卡轉(zhuǎn)賬怎么操作
你們好,最近小活發(fā)現(xiàn)有諸多的小伙伴們對于銀行無卡轉(zhuǎn)賬怎么操作,無卡
永利澳門(01128)發(fā)布中期業(yè)績,股東應占純利8746.7萬港元
永利澳門(01128)發(fā)布截至2023年6月30日止六個月中期業(yè)績,經(jīng)營收益107
【利率債發(fā)行結(jié)果】23海南債24票面利率為2.4500%
附件:2023年海南省政府一般債券(四期)、專項債券(十六期)、再融資一般
學院派玻璃藝術(shù)(關于學院派玻璃藝術(shù)簡述)
,你們好,今天0471房產(chǎn)來聊聊一篇院派玻璃藝術(shù),院派玻璃藝術(shù)簡述的文
村鎮(zhèn)銀行緣何加快“結(jié)構(gòu)性重組”步伐
隨著我國金融行業(yè)的發(fā)展和農(nóng)村經(jīng)濟的逐漸崛起,村鎮(zhèn)銀行的角色也在不斷
“煥新成都產(chǎn)鏈·重構(gòu)城市價值”論壇在成都舉行
(王爵)15日下午,由仲量聯(lián)行主辦的睿見論壇之“REDEFINE煥新成都產(chǎn)鏈·
香農(nóng)芯創(chuàng)(300475.SZ):劉翔累計減持3.26%股份 減持計劃已實施完畢
格隆匯8月17日丨香農(nóng)芯創(chuàng)(300475 SZ)公布,近日,公司收到劉翔先生出具
粵港澳大灣區(qū):協(xié)同創(chuàng)新 風頭正勁
中國(深圳)綜合開發(fā)研究院發(fā)布的《共享創(chuàng)新——加速邁向全球頂級科創(chuàng)
人民銀行增加支農(nóng)支小再貸款額度350億元 支持做好6省(市)抗災救災及災后重建金融服務工作
據(jù)中國人民銀行消息,近日,受臺風影響,我國多地出現(xiàn)極端降雨過程,引
巨星醫(yī)療控股(02393.HK)發(fā)盈喜 預期上半年歸母純利不少于360萬元 同比扭虧為盈
巨星醫(yī)療控股(02393)公布,相比于2022年上半年取得綜合虧損凈額約人民幣1
遵循興趣發(fā)展規(guī)律 點燃科學之夢 —— 聚焦《關于加強新時代中小學科學教育工作的意見》(十)
今年5月,教育部等十八部門聯(lián)合印發(fā)了《關于加強新時代中小學科學教育
