近日,继“小妮”之后,京东数科第二位国风AI主播“小可”来了,娇俏可爱的样子根本看不出来是AI技术虚拟出来的人物。
据了解,为了研发出写实逼真的AI虚拟数字人,京东数科AI实验室在文字转语音、3D人脸建模、语音转视频等方面进行了一系列技术创新。仅需使用一段几分钟的人物视频数据,经过几小时训练就可以合成出写实风格的AI虚拟数字人。
京东数科自研轻量级对抗语音合成技术,通过结合深度神经网络在多人数据上进行个性化建模,达到音色丰富、特色鲜明的语音合成效果,甚至可以模拟人的呼吸和停顿,听感酷似真人。
小可能够模仿不同人的说话习惯,学到如何用点头、眨眼这些细微动作对发言中的重要内容加以强调。在AI算法的驱动下,只需输入文本内容,小可就能根据语义实时进行主持,且表情、动作和语音表达非常自然逼真。