基于图像亮度信息力触觉交互纹理力再现方法

发布者:系统管理员发布时间:2020-08-06浏览次数:679

专利类型:发明授权

申请(专利)号:CN201710113964.0

申请日:2017-02-28

授权公布号:CN106919257B

授权公告日:2019-12-13

申请人:南京信息工程大学

地址: 210044 江苏省南京市宁六路219号

发明人:张小瑞; 赵喆; 孙伟; 刘佳; 朱利丰; 宋爱国; 舒雅

分类号: G06F3/01;G06T7/44;G06T7/90

主分类号:G06F3/01

国省代码:32

页数:13

代理机构:江苏爱信律师事务所

代理人:唐小红

主权项:

1.基于图像亮度信息力触觉交互纹理力再现方法,其特征在于,包括如下步骤:首先进行图片的导入存储,结合优化图片处理方法,对图片进行亮度信息提取预处理;在力触觉交互系统初始化之后,在虚拟环境对物体进行建模产生仿真图像,通过结合运动定律算法计算虚拟环境物体不同位置纹理力,循环进行位置检测和碰撞检测,在确定产生碰撞的位置通过力触觉交互设备将纹理力计算结果输出给操作者;具体图片预处理算法及纹理力计算方法如下:(1)导入物体表面二维纹理图片,假设该二维纹理图片大小为m×n个像素,即图像横向像素个数为m,纵向像素个数为n;利用下述公式红绿蓝过滤器得到的亮度值将图像处理出红、绿、蓝三个分量R、G、B:其中,λ表示波长,E(λ)表示输入过滤器的光或者射线,SR、SG、SB是三个颜色过滤器;将RGB空间进行如下线性变换得到原图像亮度信息V:V=0.299R+0.587G+0.114B其中0<R<1,0<G<1,0<B<1(2)运用去噪声高斯滤波器进行滤波去噪,噪声在图像处理中被看成一个高频信号,图像去噪可由下面的线性卷积实现: 其中,I、Ω、V(η,ξ)分别表示:去噪后的图像像素块顶点亮度信息值、整个图像平面、原图像亮度信息;H(x1,y1)为高斯滤波算子,其表达式为:其中选定的参数σ表征高斯滤波宽度,决定图片处理平滑程度;(3)通过均值法对每个像素块周围区域的亮度值求区域平均值,近似估算该像素块顶点的亮度值:以像素块D0,0为例:其中,I  s,t表示去噪后的图像各个像素块顶点亮度信息值,(s,t)表示像素块顶点位置坐标,s∈{0,1,2,3,…m},t∈{0,1,2,3,…n},Di,j表示各个像素块亮度值,(i,j)表示各像素块位置坐标,i∈{0,1,2,3,…m-1},j∈{0,1,2,3,…n-1};(4)对各个像素块求得的亮度信息进行规范化处理,得到整体图像物体纹理的表面高度Qm×n,其计算公式如下:其中Di,j表示各个像素块亮度值,di,j表示处理后各个像素块物体纹理的表面高度,i∈{0,1,2,3,…m-1},j∈{0,1,2,3,…n-1},为整体图像所有像素块亮度值的平均值;通过均值法和规范化处理,在得到像素块有限纹理信息的同时,减少力触觉交互系统在数据力重现过程中可能出现的严重抖动现象,更真实有效的实现纹理再现;(5)将图像输出的位置坐标:PX,PY,PZ转化为虚拟环境下的坐标MX,MY,MZ,具体坐标转换公式如下:通过交互系统模块检测,当虚拟探针没有触碰到虚拟物体纹理时,输出力为0;当发生触碰,则纹理力计算如后述步骤:假设预处理后虚拟物体的纹理图片位于虚拟空间坐标OXYZ中的OXY平面,即Z=0,且位置左右上下对齐,假设虚拟碰撞点在虚拟环境的坐标为(X,Y,Z),得到碰撞点在OXY平面投影点为(X,Y),此处(X,Y)为像素块图片位置坐标(i,j)对应到OXY平面的位置坐标,X∈{0,1,2,3,…m-1},Y∈{0,1,2,3,…n-1};基于以上图片预处理,得到的每个像素块所对应的纹理表面物理高度值,即投影点所对应的物体表面纹理高度值为dX,Y,则在碰撞点的输出纹理接触力计算方法如下:假设物体表面为刚性,则纹理接触力由法向力和切向摩擦力合成,法向力的计算方法如下:d X,Y为接触点像素块物体表面纹理高度值,k为物体表面的刚性系数;当dX,Y为正,这表明物体表面在接触点出处是凸起,如果为负,则意味着物体表面在接触点处是凹下的;切向摩擦力遵循动摩擦力产生公式:切向摩擦力的方向与OXY平面平行,并与运动方向相反;其中μ(X,Y)位虚拟物体在接触点处的动摩擦因数;μ(X,Y)=ρ×r(X,Y)其中,ρ是纹理表面材料的粗糙系数,r(X,Y)为接触点的局部粗糙系数,与该接触点的局部凹凸程度有关;最终,计算纹理接触力后通过力/触觉交互系统输出合力。

摘要:

本发明公开了基于图像亮度信息力触觉交互纹理力再现方法,本发明结合计算机图像处理、虚拟现实技术与力触觉传感技术,通过算法优化,合理得对纹理接触力进行建模,对图像信息进行预处理,结合运动学原理,在虚拟接触点产生相应纹理的接触力,再将得到的相应纹理信息通过力触觉再现设备反馈给操作者,可以使操作者真实得感知物体表面纹理物理属性,从而达到重构物体表面三维纹理信息的目的。与已有的技术方法相比,该方法一定程度上提高了纹理再现效率和操作者真实感体验。