谷歌|谷歌打造“野生字幕君”:不用联网 支持所有应用


【谷歌|谷歌打造“野生字幕君”:不用联网 支持所有应用】
谷歌|谷歌打造“野生字幕君”:不用联网 支持所有应用
本文插图

在刚刚过去的Google I/O 2019上 , 谷歌展示了一项名为Live Caption(实时字幕)的新功能 。 它内置在Android Q中 , 可以将手机上播放的音频实时转化为字幕 , 适用于播客、视频网站、语音消息、本地拍摄视频等场景 。
更厉害的是 , Live Caption的处理过程全部都在手机本地完成 , 不需要上传到云端 , 既保证了速度 , 又保证了安全 。 Live Caption还有哪些强大之处?这篇文章向你完整介绍 。
没网也能用 , 在本地进行处理
字幕的重要性可能超过了很多人的想象 。 在一般观众眼里 , 它是可有可无的选项 , 而对于听力障碍者 , 字幕是他们理解内容的重要工具 , Live Caption正是为他们而设计 。 在此之前 , 谷歌已经在YouTube中加入了自动字幕 , 然而世界上还有很多没有字幕的视频内容 , 对于听力障碍者来说 , 它们就像没有声音的默剧 。
能不能给手机上的所有音频添加实时字幕?这成为了谷歌的下一个目标 。 经过多个团队的努力 , 这个方案终于被实现出来 。 不过在最初 , 系统需要将音频上传到云端 , 然后运行一个2GB的机器学习模型 , 过程耗时又不安全 。 后来 , 他们在手机终端实现了相同的处理效果 , 并且只需要运行一个80M的模型 , 它可以在手机联网时自动更新 , 然后在没网状态下完全离线运行 。
Live Caption的优势主要有三个:第一 , 完全在本地运行 , 适用于所有场景;第二 , 数据不会上传到云端 , 保证数据安全;第三 , 内容创作者和应用开发者不需要做任何工作 , 就可以让用户体验到实时字幕 。
系统级的实时字幕 , 支持所有应用
在谷歌的演示中 , Live Caption可以在直播、视频网站、播客、拍摄的本地视频、社交媒体、语音消息等多种场景下使用 。 打开方式是点击音量键 , 点击实时字幕按钮 。

谷歌|谷歌打造“野生字幕君”:不用联网 支持所有应用
本文插图

随着音频的播放 , 画面中央会显示动态的实时字幕 , 你可以调整字幕条的显示大小 , 拖动它们到任意位置 。 更神奇的 , 即使在静音状态下Live Caption也能正常运行 。

谷歌|谷歌打造“野生字幕君”:不用联网 支持所有应用
本文插图

虽然谷歌主要强调了Live Caption对听力障碍者的作用 , 但其实它对普通用户也十分有用 。 在看视频的同时开启字幕 , 可以更好地理解内容 , 谷歌将这个功能做到了系统底层 , 就意味着你可以在任何视频中开启字幕 。 另外在会议和地铁这样的特殊场景 , 你可以在不开启音频的情况下理解视频内容 。
今年晚些时候推出
前几天我们给大家推荐了几个“自动加字幕”的工具 , 视频创作者可以利用它们来减轻工作负担 。 不过谷歌的思路显然更加彻底 , 他们将实时字幕做成了系统级的功能 , 内容创作者和应用开发者不需要做任何工作 , 就能让用户随时体验到实时字幕 。 这个功能集成在Android Q中 , 一旦普及就能方便大量用户 。
目前Live Caption还无法在Android Q系统中进行体验 。 Android团队的Brian Kemler透露 , 它将在今年晚些时候推出 。 由于对内存和空间有要求 , Live Caption会首先出现在高端的Android Q设备上 , 之后将支持更多设备 。
文章参考:VentureBeat


    推荐阅读