EMO来了!通义APP推出照片唱歌功能

访客11个月前AI生活115

把一段音频、一张照片输入AI模型,就能让图中人物开口唱歌说话,让奥黛丽赫本唱《上春山》、陶俑仕女说英文RAP、爱因斯坦说中文段子。不久前,这款名为EMO的模型因为阿里通义实验室的一篇论文火遍海内外,模型的产品化进程也广受关注。4月25日,EMO终于上线通义APP,开放给所有用户免费使用。

打开通义APP,进入“全民舞台”频道,就可来到EMO产品页面“全民唱演”。在歌曲、热梗、表情包中任选一款模板,上传肖像照片,EMO随即就能合成视频。

EMO来了!通义APP推出照片唱歌功能

通义APP首批上线了80多个EMO模板,包括热门歌曲《上春山》《野狼disco》等,网络热梗“钵钵鸡”“回手掏”等。目前通义APP暂不开放用户自定义音频,用户只能选择APP预置的音频来生成视频。

EMO是通义实验室研发的AI模型,其背后的肖像说话(Talking Head)技术是当前大热的AIGC领域。EMO之前的Talking Head技术都需针对人脸、人头或者身体部分做3D建模,通义实验室在业界率先提出了弱控制设计,无需建模就可驱动肖像开口说话,不仅降低视频生成成本,还大幅提升了视频生成质量。EMO学习并编码了人类表达情绪的能力,能将音频内容和人物的表情、嘴型匹配,还能把音频的语气特征和情绪色彩反映到人物微表情上。

EMO来了!通义APP推出照片唱歌功能

2月底,通义实验室公布相关论文,EMO随之成为继SORA之后最受关注的AI模型之一。现在,通义APP让所有人都可免费体验前沿模型的创造力。未来,EMO技术有望应用于数字人、数字教育、影视制作、虚拟陪伴、电商直播等场景。

通义APP近期爆款频出,现象级应用“全民舞王”曾在社交平台掀起“兵马俑跳科目三”“金毛跳舞”的热潮,全民舞王背后的模型Animate Anyone也出自通义实验室。近期,通义APP还陆续推出了超长文档解析、AI编码助手、AI会议助手等免费实用功能。通义大模型正在成为越来越多用户的超级AI助手。

本站部分文章来自互联网,文章版权归原作者所有。如有疑问请联系QQ:362580117!

相关文章

CCIG丨汇智聚力·创未来,2023中国图象图形大会圆满落幕

CCIG丨汇智聚力·创未来,2023中国图象图形大会圆满落幕

大会现场 5月11-14日,中国图象图形大会(CCIG2023)在苏州隆重召开。本次大会由中国科学技术协会指导,中国图象图形学学会主办,苏州...

韦东奕又火了!成果很高,数学技术强,确实是一个数学天才!

韦东奕又火了!成果很高,数学技术强,确实是一个数学天才!

韦东奕又火了! 这次不是因为他的简朴以及矿泉水瓶子,而是因为其扎实的科研能力。 据知乎网友爆料,一个科技公司用PS5做了一个cluster...

深圳电信“火力全开”、“上天下海”,助力深圳打造极速先锋城市

深圳电信“火力全开”、“上天下海”,助力深圳打造极速先锋城市

3月14日下午,以 “极速城 圳先锋”为主题的中国电信助力深圳市极速先锋城市建设行动计划发布会在深圳福田香格里拉酒店举办。深圳市通管局局长何...

助力“百千万工程” 拼多多首次受邀走进柏桥讲堂

助力“百千万工程” 拼多多首次受邀走进柏桥讲堂

又到一年一度的荔枝季。在全球最大的荔枝优势产区广东茂名,鲜嫩多汁的果子即将奔赴全国各地。近几年农产品通过新电商上行,荔枝是热销的重要品类之一。...

紧赶慢赶三年后,岚图起个大早赶个晚集?

紧赶慢赶三年后,岚图起个大早赶个晚集?

近日,岚图汽车宣布完成近50亿元的A轮融资,融资后市场估值近300亿元。 金额之大,大幅超越以往蔚小理以及零跑等造车新势力的A轮融资金额,也...

额定负载30KG,大族机器人S30大负载协作机器人正式入列

额定负载30KG,大族机器人S30大负载协作机器人正式入列

近日,大族机器人正式发布S30大负载协作机器人,它的额定负载达到30KG,是大族机器人现有产品矩阵中负载能力最大的一款,也是整个协作机器人领...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。