下载APP
    扫描二维码
    下载潮新闻客户端
    读报

    让赫本唱《上春山》,让陶俑说RAP!通义APP推出照片唱歌功能

    潮新闻 记者 张云山2024-04-25 09:59全网传播量988
    00:00
    00:00

    把一段音频、一张照片输入AI模型,就能让图中人物开口唱歌说话,让奥黛丽赫本唱《上春山》、陶俑仕女说英文RAP、爱因斯坦说中文段子。不久前,这款名为EMO的模型因为阿里通义实验室的一篇论文火遍海内外,模型的产品化进程也广受关注。4月25日,EMO终于上线通义APP,开放给所有用户免费使用。

    打开通义APP,进入“全民舞台”频道,就可来到EMO产品页面“全民唱演”。在歌曲、热梗、表情包中任选一款模板,上传肖像照片,EMO随即就能合成视频。

    通义APP首批上线了80多个EMO模板,包括热门歌曲《上春山》《野狼disco》等,网络热梗“钵钵鸡”“回手掏”等。目前通义APP暂不开放用户自定义音频,用户只能选择APP预置的音频来生成视频。

    EMO是通义实验室研发的AI模型,其背后的肖像说话(Talking Head)技术是当前大热的AIGC领域。EMO之前的Talking Head技术都需针对人脸、人头或者身体部分做3D建模,通义实验室在业界率先提出了弱控制设计,无需建模就可驱动肖像开口说话,不仅降低视频生成成本,还大幅提升了视频生成质量。EMO学习并编码了人类表达情绪的能力,能将音频内容和人物的表情、嘴型匹配,还能把音频的语气特征和情绪色彩反映到人物微表情上。

    2月底,通义实验室公布相关论文,EMO随之成为继SORA之后最受关注的AI模型之一。现在,通义APP让所有人都可免费体验前沿模型的创造力。未来,EMO技术有望应用于数字人、数字教育、影视制作、虚拟陪伴、电商直播等场景。

    通义APP近期爆款频出,现象级应用“全民舞王”曾在社交平台掀起“兵马俑跳科目三”“金毛跳舞”的热潮,全民舞王背后的模型Animate Anyone也出自通义实验室。近期,通义APP还陆续推出了超长文档解析、AI编码助手、AI会议助手等免费实用功能。通义大模型正在成为越来越多用户的超级AI助手。

    “转载请注明出处”

    最新评论(17)
    潮客_quv75m · 2023-07-26 07:33 · 江苏南京回复
    封神演义是一部古老的书籍,本次翻拍的电影在一定程度上还原了那个远古时期的神话世界,让人身临其境,总体来说还是不错的,期待后续的篇章。
    酒吞往事 · 2023-07-26 06:54 · 浙江杭州回复
    还没看过封神,好不好看
    挥霍黑白青春 · 2023-07-26 06:54 · 浙江杭州回复
    这让我对《封神》的更加期待了
    忆海oceanmemory · 2023-07-26 06:54 · 浙江杭州回复
    周杰伦的MV一直以来都有很高的制作水准
    千姿百态MyriadForms · 2023-07-26 06:54 · 浙江杭州回复
    妲己的形象在《封神》中真的很迷人,让人难以忘怀。
    红牛great · 2023-07-26 06:53 · 浙江杭州回复
    真的吗?我完全不知道!
    茶咯咯小女子 · 2023-07-26 05:37 · 浙江杭州回复
    漂亮,好看,这造型也绝美,继续加油,很棒的演员,演的很不错
    潮客_qsqqui · 2023-07-26 05:36 · 江苏镇江回复
    很漂亮,妩媚多姿,非常漂亮,,有时间了好好看看
    潮客_22xrzy · 2023-07-26 05:25 · 北京回复
    原来是她,谁会想到这位女主已经出名好久!!
    潮客_3jyyh8 · 2023-07-26 05:12 · 浙江杭州回复
    纣王人怎么样我不评价,但我相信他的眼光
    潮新闻小编 · 2023-07-26 05:13回复
    杰伦的眼光我从没看错
    一生暖阳 · 2023-07-26 05:12 · 浙江杭州回复
    妲己这个角色的塑造很成功了,既有妩媚的一面,又有冷峻的一面
    点击查看更多评论