霉霉憨豆讲中文、蔡明阿姨秀英语,能让你说任何语种的AI神器火了

时间:2023-11-18 02:58:05 阅读:

如果你经常玩微博或者逛哔哩哔哩,最近一定被一个关于“没有电影口音的翻译”的视频所击中。

片中老年人学英语,斯威夫特、特朗普、艾玛·沃特森、憨豆先生等外国友人都说着流利的中文,他们的嘴巴动作、语气和声音无缝衔接,毫无违和感; 从而打造出“毒舌女王”,因角色而闻名的蔡明阿姨,上了一堂地道的英语脱口秀,口音听起来像伦敦口音。

还没有观看的朋友可以点击体验:

发布视频的博主表示,他真的很震惊。 完全一致的音色和完美匹配的口型,已经超越了真人配音所能达到的水平。 评论区也炸了。 网友们简直不敢相信自己的眼睛和耳朵。 他们问道:“外面的世界都发展成这样了吗?更何况是老人家,谁看了不迷茫呢?”

老年人学英语_老年人学英语视频_播放老年人学英语

图片来自微博

视频《johnhuu教英语》的原作者表示,要实现这种“没有翻译电影口音的配音效果”,需要同时满足三个条件:正宗口语、克隆说话人的声音、更换嘴巴形状。 他对自己是如何制作的保持沉默,称自己“先掌握了这项技术,但制作起来还是很麻烦”。

播放老年人学英语_老年人学英语视频_老年人学英语

图片来自抖音

但聪明的网友很快就发现,其实也很简单?

Johnhuu使用的工具应该是HeyGen,一个在线AI数字真人视频生成平台。 它将人工智能技术融入到通用视频制作流程中,快速为用户生成定制内容。 目前,您可以创建自己的AI图像、创建虚拟主播、将文本/图片转换为视频、克隆声音等。

这段病毒视频似乎与 HeyGen 最近更新的视频翻译功能结合在一起。 只需上传视频并选择要转换的语言,就可以让视频中的“美国甜心”斯威夫特保留她原来的声音和语气,变身为“10级中文学者”(Johnhuu还进行翻译、字幕、等剪辑调整)。

国外社交网站上,大家已经兴奋的玩起来了:

从硅谷来到中国的连续创业者Jim 英语在《也许我以后能‘说’粤语!》中对英语大加赞赏!

HeyGen 的联合创始人兼首席产品官 Wayne Liang 录制了一段英文视频来演示日语和法语版本。

有些人甚至同时解锁了6种语言:韩语、印尼语、意大利语、土耳其语、德语和英语。 每一个都栩栩如生,可以轻松切换,就像母语人士一样。

老年人学英语视频_老年人学英语_播放老年人学英语

图片来自X

播放老年人学英语_老年人学英语_老年人学英语视频

于是在网络上,全世界的金发蓝眼网友熟练地说出“Hello,Bonjour”,亚洲家庭成员优雅地微笑:“Bonjour老年人学英语,Hola”。 语言的巴别塔似乎暂时消失了。 毕竟,谁不想看到“另一个自己”在异国他乡说外语呢?

那么,HeyGen 到底有何来历,让大家如此关注,又为何突然如此火爆呢?

海根是谁?

事实上,推出HeyGen的公司的中文名称是时云科技。 成立于2020年底,总部位于深圳。 他们的愿景是“颠覆内容生产方式,利用AI生成打造新一代内容生产平台”。 他们希望取代相机,让用户以更低的成本创作出高质量的内容。 其核心技术为深度学习、生成对抗网络(GAN)、强化学习和3D建模等,获得IDG资本、真格基金、红杉中国、百度等早期投资。

创始人Joshua Xu和Wayne Liang是美国卡内基梅隆大学的两位校友。 其中,Joshua 是 Snapchat 的前 100 名员工、Monetization 团队的三号工程师和 Ads Ranking 团队的总工程师。 他参与创建了 Snapchat 机器学习平台 Barista。 Wayne曾任字节跳动美国公司设计总监霉霉憨豆讲中文、蔡明阿姨秀英语,能让你说任何语种的AI神器火了,负责企业软件设计和内部产品创新。

老年人学英语视频_老年人学英语_播放老年人学英语

图片来自HeyGen

从公司发布的招聘信息来看,团队成员人数较少且年轻。 他们主要来自Snapchat、Google、Pinterest、Byte、腾讯、百度等国内外各大互联网公司。 他们在洛杉矶和旧金山湾区设有办事处。 观点。

播放老年人学英语_老年人学英语视频_老年人学英语

图片来自时云科技/Boss直聘

今年4月,Joshua在X上愉快地向公众宣布,HeyGen在上线短短7个月内已经迭代了30多个版本,并实现了100万美元的年度经常性收入(ARR)老年人学英语,达到了一个重要的里程碑。

老年人学英语_老年人学英语视频_播放老年人学英语

图片来自X

8月,他再接再厉,在社交平台上正式公布了自己最新的数字人像“约书亚头像2.0”:以下两个视频片段100%由AI生成,展示了约书亚的虚拟形象和声音克隆。 他表示,这次HeyGen极大地提高了数字人的视频质量,并对语音技术进行了微调,以完美模仿他们自己独特的口音和语言模式。 效果如此爆炸,再次引起不小的轰动,观看次数超过300万次。

那么我们现在可以用 HeyGen 做什么呢?

AI视频内容创作矩阵

登录账户控制面板,官方给出的四大主要功能列表如下。

播放老年人学英语_老年人学英语_老年人学英语视频

老年人学英语_老年人学英语视频_播放老年人学英语

图片来自HeyGen

第一个也是最流行的是制作自己的人工智能头像。 通过录制2分钟左右的清晰视频,您可以在短时间内创建自己的数字人像,并生成与您的声音相匹配的多语言视频。 值得一提的是,正如Joshua 2.0所演示的,这里你不再是像过去常见的AI换脸软件那样只是一张僵硬的脸在动,而是表情、嘴型、肢体动作都自然一致,足够了看起来真实。

同时,用户还可以利用在线AI创作或上传图片生成图像,让你的照片动起来、会说话。 帖子上有网友先用GPT-4中的DALL·E 3制作了皮克斯风格的卡通人物图片,然后上传到HeyGen,几分钟就完成了。 无需寻求帮助即可制作小动画。

老年人学英语视频_老年人学英语_播放老年人学英语

图片来自X

此外,短视频内容创作者不再需要昂贵的摄影团队、布景和剪辑。 他们只需从平台上数百个内置模板中选择背景、主题、虚拟主播,输入台词,点击声音即可。 ,您可以创建适合您需要的视频剪辑。 用户还可以根据自己的喜好更换背景、添加动画元素、AI换脸、换衣服。 对于营销和电商从业者来说可以说是一个好消息。

老年人学英语_播放老年人学英语_老年人学英语视频

HeyGen内置多种模板,图片来自HeyGen

不会写台词也没关系。 在最后的AI Script中,你只需要输入主题和风格,选择语言,HeyGen就可以帮你写出几个专业级别的段落。 即使主题不确定,只需粘贴链接即可生成文本脚本。

现在,HeyGen 内置了 300 多种声音,支持 40 多种语言,还集成了在线设计工具 Canva、ChatGPT Plugin 等老年人学英语,让用户可以随时在这些第三方平台上调用它来创作视频。

价格方面,您可以注册为免费用户以使用有限的资源,也可以每月 29 美元升级为创建者用户或每月 89 美元升级为企业用户。

老年人学英语_播放老年人学英语_老年人学英语视频

图片来自HeyGen

在作家刘慈欣的小说《诗云》中,一个先进的外星文明耗尽了太阳系的大部分能量,列出了所有可能的单词组合,以创造出可以超越唐代诗人李白的诗歌。 尽管他们借助先进的科技写下了令人印象深刻的诗篇,但他们最终还是选择了认输,放弃了对地球的入侵。

Joshua Xu 和团队喜欢《诗云》这个描述“艺术与科技的对抗”的故事,“诗云科技”也由此得名。 在人工智能赛道群雄逐鹿、AIGC应用拥挤在一起的今天,时云科技推出的HeyGen作为新的黑马进入了公众的视野。 或许用科技升华艺术才是这个年轻团队所追求的。

未来将如何发展? 它能否保持目前的骄人成绩并获得越来越多的用户群体? 对于网友最关心的AI安全和监管,您怎么看? 欢迎留言告诉我们!

最后硅星还用DALL·E 3和HeyGen制作了一个小动画,走之前点开看一下~

猜你喜欢

新华社英文专稿向全球推介快乐老人大学

在此之前,10月16日,新华社发表了另一篇题为《湖南:社区大学助力老人乐享文化晚年》的报道,其中也提到了快乐老年大学在湖南广大老年人中大受欢迎的现象。colleges》英文专稿全文(中文翻译为红网老年频道编者所加):“老年人课上学得认真,课下坚持练习,他们学得比小朋友们还快,”她告诉新华社记者。...

生有涯而知也无涯,让咱学无止境

无论对于在校的学生,还是踏入社会的成人,或者步入暮年的老人来说,学习,都是一个永恒相伴的话题,古人云“活到老、学到老”亦是这个道理。让学无止境,成为全民终身学习的新追求“活到老,学到老,在以后的岁月里,我仍然要学习学习再学习,我还要动员更多的朋友走进终身学习的行列。...

发表评论

评论列表