8 月 7 日消息,8 月 6 日,通义 App 上线新功能“角色扮演”,用户只需要上传一段视频即可完成“现实与虚拟”的跨界,实现诸如机器人“带娃”、孙悟空“跳舞”、二次元女生“职场搬砖”的效果。
附操作方法:用户准备一段不超过 15 秒的视频,通过“通义 App > 频道 > 角色扮演 > 开始创作”的顺序进入功能入口,用户也可以在官方提供的视频模板中选择视频,最多可替换视频中的 3 个角色。可选角色方面,官方提供了孙悟空、机器人及两款不同风格的女性角色供用户选择。
据介绍,“角色扮演”功能背后的“核心技术”是通义实验室研发的 AI 模型 Motionshop。其支持在不改变周边场景的情况下,利用视频处理、角色跟踪 / 分割、姿态估计、路径追踪渲染等多种技术,使动态视频中的主角“跨越现实与虚拟的界限”。
官方还透露,该功能免费向用户提供,近期也将支持用户自定义创建角色的功能。