蜂巢科技:使用 Translation AI,实现 AR 眼镜的准确实时语音翻译功能
关于 蜂巢科技
蜂巢科技于 2020 年 10 月在北京成立,是一家专精于个人消费电子产品开发的创新硬件公司。蜂巢科技的核心团队具备在微软、阿里巴巴、小米、华为等科技巨头任职的专业背景,致力于让科技更自然地融入人们的日常生活。2022 年 11 月,蜂巢科技推出搭载双摄像头,支持无需手持拍照、录影、直播和实时翻译的 AR 眼镜 SUPERHEXA Vision。
请告知我们您遇到的挑战。我们在此提供帮助。
联系我们蜂巢科技使用 Translation AI 打造 AR 眼镜上的实时翻译功能,协助用户打破语言隔阂,实时理解 11 种语言的对话内容。
Google 成效
- 使用 Translation AI 的简易设定,将翻译功能的开发时间缩短四倍
- 运用 Media Translation 的视频模型,协助提高翻译准确度
- 使用 Google 广大全球网络支持高速数据传输,实现实时分析
支持 AR 眼镜上 11 种语言的实时翻译
在大量文字翻译工具的协助下,人们现在只需要在电子设备上输入文字内容,就可以轻易地理解不同语言。但如果我们可以像阅读电影字幕一样,在智能眼镜的屏幕上实时看到对话内容的翻译文字,跨语言的沟通是否会更加方便?
这正是 蜂巢科技 2020 年开始开发其第一代增强现实(AR)眼镜时希望实现的主要功能之一。总部位于北京的蜂巢科技拥有来自多家科技巨头的专业核心团队,致力于让科技更自然地融入人们的日常生活。2022 年 11 月,蜂巢科技推出搭载双摄像头,支持无需手持拍照、录影、直播和实时翻译的 AR 眼镜 SUPERHEXA Vision。
"我们想要打造一个面向未来的智能眼镜形态的相机,同时也是一款能让用户日常生活更便利、更具创造力的消费级 AR 头戴式设备。"蜂巢科技创始人暨首席执行官夏勇峰表示,"SUPERHEXA Vision 让用户能轻易地拍下或录下他们眼前看到的景象,同时顺畅地与说不同语言的人们互动。"
为了打造 SUPERHEXA Vision 的实时翻译功能,蜂巢科技的团队需要一个能支持最多语言,生成准确且即时语音转文字翻译的人工智能(AI)翻译工具。比较过多家产品之后,蜂巢科技最终选择使用 Google Cloud 的 Translation AI,因为其支持 11 种语言的高质量实时语音转文字翻译。
"在市场上寻找最先进翻译技术的过程中,我们发现 Google Cloud 的 Translation AI 是符合我们需求的最佳选择。我们的比较测试显示,Translation AI 能在最短时间内生成最准确的翻译,并支持最多语言,包括我们主要目标市场最广泛使用的英语和西班牙语。"
—蜂巢科技创始人暨首席执行官 夏勇峰运用 Translation AI 加速翻译功能开发
夏勇峰指出,由于设定 API 授权和 AI 翻译模型的过程十分简易,使用 Translation AI 打造蜂巢科技 AR 眼镜上的实时翻译功能大幅缩短了开发时间。例如,如果没有 Translation AI 的简易设定方式,蜂巢团队需要超过一个星期才能完成一个翻译模型的设定;使用 Translation AI 只需要两天。
Google Cloud 团队提供的技术支持也协助加速了开发过程。一开始,蜂巢团队使用 Translation AI 的默认翻译模型进行开发,但实时语音翻译的准确度未能满足团队期待。在 Google Cloud 团队的建议下,蜂巢科技转而使用 Translation AI 下专为语音翻译设计的 API Media Translation 的视频模型,大幅提高了实时语音翻译的准确度。
运用 AI 实时翻译打破语言隔阂
目前,SUPERHEXA Vision 上的实时翻译功能由 Translation AI 支持,能翻译 11 种语言。当 SUPERHEXA Vision 的用户听到外语句子时,音频会由眼镜接收,通过 Speech-to-Text 转成文字,再由 Translation AI 的 AI 模型自动翻译成目标语言,展示在眼镜的屏幕上。借由这个功能,SUPERHEXA Vision 的用户就能即时理解外语的对话内容。
夏勇峰指出,Google Cloud 分布全球的广大服务器网络是蜂巢科技能实现实时翻译的关键,因为实时翻译功能需要数据在终端设备和翻译模型所在的服务器之间高速传输。有了 Google Cloud 提供的高连通性,蜂巢科技得以确保 SUPERHEXA Vision 的用户无论身在何处,都能在 500 毫秒之内看到语音翻译内容出现在眼镜屏幕上。
"使用 Translation AI 支持我们 AR 眼镜的语音翻译功能让我们能保证高度准确且快速的翻译,"他补充表示,"我们的用户因此得以在国外旅游或参与多语言会议时互动或沟通无碍。"
使用 AI 技术扩展 AR 眼镜功能
推出 SUPERHEXA Vision 之后,蜂巢科技的团队仍不断持续开发更多创新功能,丰富用户的 AR 体验。其开发计划之一是使用 Vision AI 支持影像识别功能,让 AR 眼镜用户能识别眼前的植物或动物,在眼镜屏幕上立即看到相关信息,得到更好的户外活动体验。
夏勇峰说:"通过使用 Google Cloud 的强大翻译和语音识别技术,我们成功在 AR 眼镜上实现了高质量的实时翻译。接下来,我们将运用 Google Cloud 的其他 AI 技术,提供更精彩丰富的 AR 体验。"
请告知我们您遇到的挑战。我们在此提供帮助。
联系我们关于 蜂巢科技
蜂巢科技于 2020 年 10 月在北京成立,是一家专精于个人消费电子产品开发的创新硬件公司。蜂巢科技的核心团队具备在微软、阿里巴巴、小米、华为等科技巨头任职的专业背景,致力于让科技更自然地融入人们的日常生活。2022 年 11 月,蜂巢科技推出搭载双摄像头,支持无需手持拍照、录影、直播和实时翻译的 AR 眼镜 SUPERHEXA Vision。