机器人

北大核心,JST,EI,CSCD,WJCI

国内刊号:21-1137/TP

国际刊号:1002-0446

机器人杂志2023年第4期:基于Transformer架构和B样条平滑约束的机器人面部情感迁移网络

发布日期:

作者:黄忠, 任福继, 胡敏, 刘娟

关键词:类人机器人, 面部情感迁移, 域内形变注意力, 域间协作注意力, 三次B样条平滑约束

为提高类人机器人面部情感迁移的时空一致性并降低机械运动约束的影响,提出一种基于Transformer架构和B样条平滑约束的机器人面部情感迁移网络RFEFormer。该网络由面部形变编码子网和驱动序列生成子网组成。在面部形变编码子网中,为表征帧内不同层次、不同粒度的空间信息,基于域内形变注意力和域间协作注意力双重机制构建帧内空间注意力模块并嵌入到Transformer编码器中;在驱动序列生成子网中,利用Transformer解码器实现面部时空序列和历史电机驱动序列的交叉注意以及未来电机驱动序列的多步预测,并引入三次B样条平滑约束实现预测序列的规整。实验结果表明:RFEFormer网络的电机驱动偏差、面部形变逼真度和电机运动平滑度分别为3.21%、89.48%和90.63%,且实时面部情感迁移帧率大于25帧/秒。与相关方法相比,RFEFormer网络在满足实时性的同时提升了逼真度、平滑度等时序指标性能,而人类感官对这些指标更为敏感、也更为关注。

来源:2023年第4期

《机器人》期刊编辑部

查看机器人杂志2023年第4期

声明

严正声明:本站非期刊官网,非中介代理。

本站仅提供学术规范服务:快速预审、润色编辑服务、中英文查重、降重、去重服务、推荐合适的期刊投稿等学术规范服务。 如需提供学术规范服务请联系在线编辑。

联系我们

  • 地址:沈阳市浑南区创新路135号
  • 电话:024-23970050
  • E-mail:jqr@sia.cn

咨询工作人员