千言

数字栩生联合千博信息共同研发国内首个高保真手语数字人主播

观看视频

项目背景

由数字栩生联合千博信息共同研发的超写实数字人,以真人演员为基础,采用光场扫描采集和实时渲染技术,将真实的演员重建为高逼真数字主持人。团队攻关克难,在国际上首次实现手语与表情唇语姿态多模态融合,达到精准翻译。

解决方案

“千言”数字人具备高仿真的人物外观及裸眼立体成像效果,支持语音实时交互。她可通过条形麦克风阵列定向获取用户的语音,经过云端实时语音引擎识别以及大模型训练的聊天系统产生语音回复文本,再生成时间上能够对齐的自然口型、表情及伴随动作。
高逼真
光场采集
通过纯扫描采集了50多组表情,进行表情重建、表情拆分、表情融合,制作出高写实度的表情动态材质,组合输出几百个有个性的表情
多样化
驱动
  • 实时驱动
  • 文字驱动
  • 语音驱动
  • 消除沟通距离感受情绪表达
  • 可应用于文稿电台等播报
  • 可应用于导购等互动类场景
多模态
融合技术
通过计算机模仿听障人士的大脑,生成对应图像、文字、影音等方式,可实现与聋哑人交流。

项目成就

  • 手语汉语双向翻译

    数字人千言可以实现电视转播手语的自动生成,可以完成从汉语到手语、手语到汉语的双向翻译,实现听障聋人群的信息无障碍交流。

  • 场景丰富

    除了实时手语播报,数字人千言还能歌善舞,可以对残疾人提供关心和帮助,满足他们更多的情感需求。

  • 应用广泛

    目前千言已签约几百家电视台,应用场景非常广泛,可实现部分替代某类职业。

观看视频

舞蹈动作

观看视频

手语动作