微软Skype同声翻译对话技术是由Skype和微软机器翻译(Microsoft Translator)团队联合开发,在微软的演示视频中包括了近乎实时的英德音频互译。Skype Translator整合了微软Skype语音和聊天技术、机器翻译技术、神经网络语音识别,这些都是微软研究院基础研究的领域(微软曾演示过实时语音机器翻译)。
两个不同语种的人借助Skype Translator可实现无障碍交谈,当你说出一个完整的句子后,系统便会开始进行记录翻译,对方即可听到翻译后的句子,并可通过字幕显示在屏幕上。
这个实时语音翻译系统能够识别不同用户间的不同语言不同口音的说话方式。Skype技术令人兴奋的地方在于,能够对完整对话实现语音到语音的实时翻译,而不仅仅是解决简单的单词、词组、句子。
目前,Skype Translator这一实时语音翻译功能有可能帮助改变世界未来的交流方式。比如在线教育,2014年微软正式推出了SkypeTranslator预览版,让来自美国和墨西哥的小学生使用各自母语就能进行语音通话。它可以识别美国小学生的英文语句并将其翻译为西班牙语,然后以文本的形式呈献给墨西哥小学生,反之亦然。
微软希望从更多真实的Skype对话中,获得数据从而进一步提升新翻译服务的准确程度,并增强对复杂口语化、非书面语言的理解。即Skype Translator会把整个对话内容记录下来,用于机器学习以不断提高语音识别和文本翻译的质量。这样的数据采集无疑会引发使用者对个人隐私保护的担忧,因只需要极少数的Skype用户对话,就可以提供足够的信息。
微软研究院Olivier Fontana表示:虽然Skype Translator预览版的翻译目前尚不完美,但Skype Translator的团队认为这款应用已经可以向数十亿的意大利语和汉语普通话使用者推送了。要知道,全球各地有超过13亿以上的人在说汉语。目前,已支持实时语音翻译的四种语言有:西班牙语、英语、汉语(普通话)和意大利语。微软最近还为这款应用添加了克罗地亚语、塞尔维亚语和波斯尼亚语文字翻译服务,总共支持超过50种语言。