基于纹理图像和用户动作信息的纹理触觉再现方法研究
DOI:
CSTR:
作者:
作者单位:

作者简介:

通讯作者:

中图分类号:

TH7 TP391

基金项目:

国家自然科学基金 ( 62003169)、江苏省自然科学基金青年基金 (BK20200823)、江苏产业前瞻与关键核心技术重点项目(BE2020006-2)、江苏省研究生科研与实践创新计划项目(SJCX22_0348,KYCX22_1202,SJCX22_0351)资助


Research on texture haptic display method based on texture image and user action information
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    近年来,对虚拟表面纹理进行工具介导的振动触觉再现已经成为触觉领域的一个研究热点。 针对已有的纹理触觉渲染 方法还存在适用范围窄、泛化能力弱、交互真实感低等问题,以改进后的 MelGAN 为基本网络,构建了一种新的纹理触觉渲染模 型。 该模型以纹理图像和用户的实时动作信息为输入,在能够高保真地生成振动触觉信号的同时,对常见纹理图像拥有更好的 泛化能力。 此外,设计了一款具有动作信息实时采集和振动触觉表达功能的笔式装置。 在采集了数据库之外的真实纹理表面 的振动触觉信号后,比较了提出的模型与已有方法在信号生成方面的性能差异。 结果表明,模型实现了最低的均方根误差 (0. 173),验证了其对未建模纹理进行触觉渲染的能力。 最后,使用笔式装置进行了两项用户实验。 平均 6. 01 的主观相似度评 分说明,即使是数据库之外的新纹理,模型也能为用户提供较高的纹理交互真实感。

    Abstract:

    In recent years, tool-medicated haptic feedback for virtual surface textures has become a hot topic in the field of haptics. In view of the problems of narrow application range, weak generalization ability and low interactive realism of the existing haptic texture rendering methods, a new texture haptic rendering model is constructed in this paper based on the improved MelGAN. This model takes texture image and real-time user action information as inputs, which can generate vibrotactile signals with high fidelity and has better generalization ability for common texture images. Furthermore, this paper designs a pen-type device with real-time action data acquisition and vibrotactile expression. After collecting vibrotactile signals from real texture surfaces outside the database, this paper compared the performance differences between the proposed model and existing methods in signal generation. The results indicate that the model in this paper achieved the lowest root mean square error ( 0. 173), verifying its ability to perform haptic rendering on unmodeled textures. Finally, this paper conducted two user experiments using a pen-type device. A subjective similarity score of 6. 01 on average indicates that even for new textures outside of the database, our model can provide users with a high level of texture interaction realism.

    参考文献
    相似文献
    引证文献
引用本文

陈大鹏,陈 庚,刘 佳,方映平,张运杰.基于纹理图像和用户动作信息的纹理触觉再现方法研究[J].仪器仪表学报,2024,45(4):145-154

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2024-07-15
  • 出版日期:
文章二维码