基于光学惯性跟踪的摄像机器人虚实融合精度优化装置的制作方法

1.本实用新型公开了一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，属于机器人技术和影视拍摄技术交叉的领域。


背景技术：

2.运用于影视制作的摄像机器人在其末端安装摄像机通过机器人运动控制系统对摄像机轨迹进行规划和运行，再连接虚拟拍摄系统，提供摄像机位姿的实时跟踪，以达到真实摄像机的画面与虚拟拍摄场景的画面实时融合的效果。摄像机器人使用的是工业机器人，对于没有经过任何补偿的工业机器人，其重复定位精度较高可达0.1mm左右，但是其绝对定位精度较低，要高出重复定位精度1～2个数量级，毫米级的误差会导致真实摄像机画面和虚拟场景画面的融合不匹配，虚实画面合成的误差在50个像素以上，导致在摄像机移动的过程中可能出现真实物体在虚拟场景中漂移的情况，因此没有经过补偿的摄像机器人在虚拟拍摄中难以满足跟踪精度要求。
3.传统的机器人标定方法通常借助于激光跟踪仪等仪器获取机器人末端位姿数据误差，这些设备存在成本高、设备笨重、操作技术门槛高的缺点。而本装置基于光学和惯性进行定位，轻便、成本低、操作容易，通过本装置可以快速简单的标定机器人补偿参数，给出补偿后的机器人末端位姿数据，显著提升摄像机器人和虚拟拍摄系统的虚实画面合成的精度。


技术实现要素：

4.本实用新型的目的是为了提供一种用于摄像机器人的虚实融合精度优化装置，解决摄像机器人在虚拟拍摄中对摄像机位姿的跟踪定位不准确的问题。通过在机器人末端安装本装置获取摄像机的位姿，比对摄像机器人提供的位姿数据，进行绝对定位精度的补偿修正，实现摄像机器人的摄像机高精度定位跟踪。
5.本实用新型提供了一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，所述装置包括：光学惯性跟踪装置和处理器，所述光学惯性跟踪装置包括互相连接的惯性测量单元和摄像头，所述处理器还分别连接所述惯性测量单元和摄像头；其中，
6.所述处理器安装固定在第一容纳部内，光学惯性跟踪装置安装固定在第二容纳部内，第二容纳部固定于第一容纳部的下方。
7.进一步地，所述处理器采用cpu、fpga、或单片机。
8.进一步地，所述摄像头采用ccd传感器。
9.进一步地，所述惯性测量单元采用光纤陀螺惯性测量单元imu800。
10.进一步地，所述惯性测量单元包含三个单轴的加速度计和三个单轴的陀螺。
11.进一步地，所述惯性测量单元包含两个a/d转换器ad7716bs与e/eprom存储器。
12.进一步地，所述a/d转换器的型号为ad7716bs，e/eprom存储器的型号为x25650。
13.进一步地，所述摄像机器人虚实融合精度优化装置安装在摄像机器人的兔笼下
方。
14.进一步地，所述摄像机器人虚实融合精度优化装置通过网线连接外部摄像机器人控制系统。
15.本实用新型的优点在于：本装置能结合光学惯性跟踪装置，使用其定位出摄像机的准确位姿，再对摄像机器人的位姿数据进行补偿，从而提高摄像机器人的绝对精度，以达到虚实融合的精度要求。
附图说明
16.通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本实用新型的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
17.附图1示出了根据本实用新型实施方式的基于光学惯性跟踪的摄像机器人虚实融合精度优化装置的结构示意图；
18.附图2示出了为本实用新型的装置工作流程示意图；
19.附图3为调整摄像机器人至一个初始姿态后的效果图；
20.附图4为变换姿态后未经过本装置优化的效果图；
21.附图5为变换姿态后经过本装置优化的效果图。
22.附图6为本装置的硬件外观结构图。
具体实施方式
23.下面将参照附图更详细地描述本公开的示例性实施方式。虽然附图中显示了本公开的示例性实施方式，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反，提供这些实施方式是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
24.本实用新型的思想在于，采用光学惯性跟踪装置，使用其定位出摄像机的准确位姿，再对摄像机器人的位姿数据进行补偿，从而提高摄像机器人的绝对精度，以达到虚实融合的精度要求。光学惯性跟踪装置的位移精度在0.2mm左右，角度精度在0.1
°
左右，远高于摄像机器人的绝对定位精度。
25.如图1所示，为基于光学惯性跟踪的摄像机器人虚实融合精度优化装置的结构示意图。该装置包括：光学惯性跟踪装置和处理器，所述光学惯性跟踪装置包括互相连接的惯性测量单元和摄像头，所述处理器还分别连接所述惯性测量单元和摄像头。
26.处理器可以采用cpu、fpga、单片机等硬件形式来实现，在此不作限制。
27.摄像头采用ccd传感器等形式来实现，在此不作限制。
28.惯性测量单元可以采用光纤陀螺惯性测量单元imu800等型号，在此不作限制。惯性测量单元是测量物体三轴姿态角(或角速率)以及加速度的装置。一般的，一个imu包含了三个单轴的加速度计和三个单轴的陀螺，加速度计检测物体在载体坐标系统独立三轴的加速度信号，而陀螺检测载体相对于导航坐标系的角速度信号，测量物体在三维空间中的角速度和加速度，并以此解算出物体的姿态。
29.例如，惯性测量装置imu采用捷联式惯导，该系统有三个加速度传感器与三个角速
度传感器(陀螺)组成，加速度计用来感受装置相对于地垂线的加速度分量，角速度传感器用来感受装置的角度信息。主要有两个a/d转换器ad7716bs与64k的e/eprom存储器x25650构成，a/d转换器采用imu各传感器的模拟变量，转换为数字信息后经过cpu计算后最后输出装置俯仰角度、倾斜角度与侧滑角度，e/eprom存储器主要存储了imu各传感器的线性曲线图与imu各传感器的件号与序号，部品在刚开机时，图像处理单元读取e/eprom内的线性曲线参数为后续角度计算提供初始信息。
30.如图1所示，本实用新型的摄像机器人虚实融合精度优化装置安装在摄像机器人的兔笼下方，并通过网线连接摄像机器人控制系统。
31.如图2所示，为本实用新型的装置工作流程示意图，具体包括如下步骤：
32.步骤1、将识别标识布置于摄像机器人下方的地面。
33.步骤2、将本装置安装、连接到摄像机器人的兔笼处。
34.步骤3、通过装置带有的广角摄像头拍摄地面的识别标识，通过装置内部的图像识别算法识别出标识的空间位置并反算出装置的笛卡尔空间坐标。该图像识别算法属于本领域计算图像中某个物体空间位置的已有技术，在此不再赘述。
35.步骤4、通过装置内部的惯性测量单元根据内部传感器数据，对通过光学计算出的笛卡尔空间坐标进行精度修正，计算出具有更高精度的装置笛卡尔空间坐标。
36.步骤5、通过网线与摄像机器人建立tcp连接通信。
37.步骤6、控制摄像机器人至多个位姿进行数据采样，将各个位姿的摄像机器人根据运动学模型计算得出的末端笛卡尔数据通过tcp通信发送给本装置。本装置也在各个位姿对自身的笛卡尔空间坐标进行采样。
38.步骤7、虚实融合精度优化装置根据采样的两组空间坐标数据计算出摄像机器人需要的绝对精度修正参数，并通过tcp通信发送给摄像机器人。
39.步骤8、摄像机器人连接虚拟拍摄系统，发送经过精度修正之后通过机器人运动学计算的摄像机位姿，在虚拟拍摄系统中实时同步摄像机位姿，并在虚拟拍摄系统中输出合成后的画面。
40.步骤9、控制摄像机器人移动摄像机至多个位姿，可以看出合成后的虚实画面匹配程度较未经过精度修正时有明显提升，虚实画面合成的误差由原先的50像素以上减少至10像素以下，明显的真实物体在虚拟场景中漂移的情况消失。
41.需要说明的是，本实用新型上述工作过程中涉及到的精度修正程序、运动学模型计算等均属于根据已知运动学原理、坐标计算方法所进行的常规设计，本实用新型的改进点在于硬件结构的设计。
42.附图3为调整摄像机器人至一个初始姿态后的效果图；在初始姿态时，一般不存在漂移的情况。
43.附图4为变换姿态后未经过本装置优化的效果图；由图4可以看出未经过精度修正时，虚实画面合成的误差大概约为50像素，明显的真实物体在虚拟场景中存在漂移的情况。
44.附图5为变换姿态后经过本装置优化的效果图。将摄像机器人给出的理论摄像机位姿和通过本装置获取的真实摄像机位姿进行图像合成，主要对比的是两个正方体的重合效果。由图5可以看出合成后的虚实画面匹配程度较未经过精度修正时有明显提升，虚实画面合成的误差由原先的50像素以上减少至10像素以下，明显的真实物体在虚拟场景中漂移
的情况消失。
45.附图6为本装置的硬件外观结构图。处理器安装固定在第一容纳部内，光学惯性跟踪装置安装固定在第二容纳部内。第二容纳部固定于第一容纳部的下方，以对准待拍摄物体。
46.以上所述，仅为本实用新型较佳的具体实施方式，但本实用新型的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本实用新型揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本实用新型的保护范围之内。因此，本实用新型的保护范围应以所述权利要求的保护范围为准。

技术特征：
1.一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，其特征在于，所述装置包括：光学惯性跟踪装置和处理器，所述光学惯性跟踪装置包括互相连接的惯性测量单元和摄像头，所述处理器还分别连接所述惯性测量单元和摄像头；其中，所述处理器安装固定在第一容纳部内，光学惯性跟踪装置安装固定在第二容纳部内，第二容纳部固定于第一容纳部的下方。2.根据权利要求1所述的一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，其特征在于，所述处理器采用cpu、fpga、或单片机。3.根据权利要求1所述的一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，其特征在于，所述摄像头采用ccd传感器。4.根据权利要求1所述的一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，其特征在于，所述惯性测量单元采用光纤陀螺惯性测量单元imu800。5.根据权利要求1所述的一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，其特征在于，所述惯性测量单元包含三个单轴的加速度计和三个单轴的陀螺。6.根据权利要求1所述的一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，其特征在于，所述惯性测量单元包含两个a/d转换器ad7716bs与e/eprom存储器。7.根据权利要求6所述的一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，其特征在于，所述a/d转换器的型号为ad7716bs，e/eprom存储器的型号为x25650。8.根据权利要求1所述的一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，其特征在于，所述摄像机器人虚实融合精度优化装置安装在摄像机器人的兔笼下方。9.根据权利要求1所述的一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，其特征在于，所述摄像机器人虚实融合精度优化装置通过网线连接外部摄像机器人控制系统。

技术总结
本实用新型提供了一种基于光学惯性跟踪的摄像机器人虚实融合精度优化装置，所述装置包括：光学惯性跟踪装置和处理器，所述光学惯性跟踪装置包括互相连接的惯性测量单元和摄像头，所述处理器还分别连接所述惯性测量单元和摄像头；其中，所述处理器安装固定在第一容纳部内，光学惯性跟踪装置安装固定在第二容纳部内，第二容纳部固定于第一容纳部的下方。本实用新型结合光学惯性跟踪装置，使用其定位出摄像机的准确位姿，再对摄像机器人的位姿数据进行补偿，从而提高摄像机器人的绝对精度，以达到虚实融合的精度要求。达到虚实融合的精度要求。达到虚实融合的精度要求。


技术研发人员：顾赟章 褚轶 朱登明 朱正刚
受保护的技术使用者：太仓中科信息技术研究院
技术研发日：2021.08.20
技术公布日：2022/5/25