近两年,元宇宙概念兴起,虚拟数字人成功在金融行业出圈,各家商业银行纷纷推出虚拟数字员工,例如:浦发银行推出“AI虚拟数字人”小浦,百信银行发布虚拟数字员工AIYA艾雅,中金财富数字员工Jinn亮相虚拟发布会,平安银行原创虚拟偶像“小财娘”等。可见,借助虚拟数字人提供数字化服务,正成为金融机构升级用户体验的新路径。
近日,兴业证券旗下的两款虚拟数智人通过一支新春拜年视频正式亮相:2D真人形象数智人名叫小知,是兴业证券的首位数智服务官,3D卡通数智形象名为机智猫,是由兴业证券的自有吉祥物演化而来。
与此前行业内的虚拟数字人不同,“小知”是兴业证券携手火山引擎打造的业内首款以自有员工为原型、集“播报+服务”于一体的全真数字分身。从外形来看,不仅与真人无异,其微表情、口形和动作都达到高仿真和自然度要求。除此之外,小知还能智能识别文本的内容,再通过音色生动传递开心、惊讶、愤怒等丰富的情感,为用户提供有温度的服务。
然而如此相貌“孪生”且生动自然的虚拟数字人小知是如何做到完美复刻的?这一切的背后均离不开“火山语音”,其作为火山引擎金融虚拟数字人解决方案的技术提供方,在打造小知的过程中运用了多项业界领先的核心技术。比如为了使“小知”的口唇形自然,火山语音通过非自回归模型的唇形生成网络,合成与输入文本或语音完全匹配的唇形,该技术有效减小误差累积,准确率高达98.55%,整体MOS分4.0+;基于火山语音创新的Motion Graph技术,“小知”可以轻松做到毫秒级动作切换延迟且自然无感知;“小知”丰富的情感演绎能力,是在火山语音业内领先的端到端语音合成技术加持下,通过控制音色的重音、停顿等,赋予多样的语气,实现笑声、哭腔等非语言现象建模能力,从而让AI演绎更贴近真人。
同时,在“小知”身上还运用到了抖音同源的面部重塑、人脸关键点检测、虚拟人通用大模型等技术。与小知一同亮相的3D虚拟数字形象机智猫,采用火山语音领先的自研细粒度唇形驱动方案,仅使用5分钟的精标数据训练即可生成高精度的唇形及表情,带给用户生动活泼的服务体验。
值得一提的是,在火山语音的“AI虚拟员工解决方案”支持下,火山引擎已建立了包括2D、3D卡通和3D超写实在内的虚拟数字人产品矩阵;从场景适配出发,包括“播报型数字人”和“交互型数字人”两种类型。目前该方案已经具备标准平台的快速交付能力,面向金融、大消费、泛互等行业提供涵盖“金融客服”、“智慧导览”、“智能助理”、“虚拟直播”等场景细分解决方案,为用户带来全新的互动服务和便捷体验。2022年6月,火山引擎虚拟人数字平台已获得信通院首批数字人系统基础能力认证。
据《虚拟数字人深度产业报告》预计,2030年我国虚拟数字人整体市场规模将达到2700亿,其中,以企业服务为形式的2B、2C服务有巨大的机会。对于银行来说,在降本增效的大趋势下,银行业必须要重新思考如何在保持原有服务特点的同时,又能够摆脱对人的依赖,因此虚拟数字人给了很好的解决方案。正如此次兴业证券打造的虚拟数字人,除了借助虚拟人打造IP,提升品牌科技感,以及降本增效以外,还可进一步拓展虚拟人交互、虚拟人直播等场景,为客户提供多维度、多渠道、更满意的使用体验。
在当前数字化浪潮之下,火山语音作为金融虚拟数字人解决方案的技术提供方,在持续提供全球优质的语音AI技术能力以及全栈语音产品解决方案的同时,将继续深耕AI数字人技术,不断探索前沿科技与业务场景的高效结合,以实现更大的用户价值。可以预料,随着技术进一步成熟,在金融领域未来会有更多的虚拟“打工人”出现。