Android手机摄像头实现长度测量PPT.ppt

单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,单击此处编辑母版标题样式,队伍,LBYTE,Android,手机摄像头实现长度测量,1,随着智能手机的飞速发展，智能手机的使用逐渐普及起来，,智能手机提供的摄像功能越来越强，摄像的像素越来越清晰，,那么，除了摄像，我们能不能利用智能手机提供的摄像功能,来扩展一些新的功能呢？,2,当你在上海旅行时，看到了东方明珠时，是不是既想把它照下来，又想如果要是同时能把它的高度计算 出来多好啊？,3,当你在北京博物馆参观时，看到了青铜鼎时，是不是既想把它照下来，又想知道这个鼎的高和宽呢？,4,我们队伍设计的基于,Android,手机摄像头实现长度测量 的程序就是来实现上面的需求的。这样我们可以不用尺子来测量距离。,5,市场上已有的一些先进的测量仪器,6,虽然市场上出现了这些先进的测量距离的仪器，使人们不用尺子就能测量物体的高度，但是他们往往比较昂贵且不易携带。,7,Contents,我们的目标,不接触目标物体，不使用尺子就能测量人的高度、桌子的长度、远方物体的距离，无需通过高端昂贵的专业仪器，只需要使用随手可得的带摄像头手机就能完成这些功能。,8,目标软件的特点,移动：运行在,Android,智能手机上，随时随地可以使用。,实用：我们身上不会带上尺子，但手机却是随身携带的物品，如果需要测量，拿出手机拍两幅物体的照片就能够得到长度信息；另外有的时候条件不允许接触测量，比如危险物品、贵重物品以及难以触及的物品，但使用这款软件就无需接触实现距离的测量。,易用：分别从两个角度拍摄物体的两幅图片，选择始点和终点，程序就会计算出两点的距离展示给用户。,9,如何实现？,使用初等凸透镜成像公式？,理想情况，假定,f,可变焦、成像点清晰,实际情况，焦距一般固定，三维物体距离不同，无法在,f,下得到清晰像点，清晰不好判断、坐标系统不好固定。,10,实现方法,古典,+,现代,射影几何与计算机视觉对极几何,基于针孔摄像头模型，空间中一点,M,到像平面点,m,的映射要经过投影矩阵,P,的转换（图,2,），,sm=KR|TM,，其中,K,是摄像头参数矩阵，,R,、,T,是摄像头坐标系相对于世界坐标系的旋转和平移矩阵，,sm,是像点的齐次坐标。,11,对极几何,空间物体点通过两个投影矩阵投影到左右两幅图像上，根据三维重构的理论，只需要得到这两个投影矩阵以及两个像点在图像上的坐标就可以使用三角法定位目标点三维坐标,。,根据投影矩阵的构成，获取摄像头参数矩阵,K,、拍摄第二幅图像时候摄像头经历的刚体变换,旋转和平移,(R|T),矩阵是整个系统实现的关键。,12,获取手机摄像头参数矩阵,K,使用张正友标定法,”Flexible Camera Calibration By Viewing a Plane From Unknown Orientations”,，这个方法操作比较容易，只需要做一幅黑白棋盘（显示器打开这样一幅图片也可以），用手机摄像头从不同角度拍摄大约,10,幅棋盘的图片，使用他们算法实现的标定程序就可以得到摄像头参数矩阵。,13,获取旋转平移矩阵,R,T,如果以拍摄第一幅图的摄像机坐标系作为参考坐标系，那么第一个摄像头位置的,R,就是单位矩阵,I,，,T,没有平移为零。,运用对极几何的理论，第二个位置的,R,和,T,可以利用两幅图片的对应关系求出来，只要找到,7,对以上的匹配点就可以把两幅图像的内在关系计算出来，当然匹配的点越多越准确，后继的操作也就越精准。,14,对应点匹配,人工目测匹配,优点：确保,100%,准确,缺点：费时，匹配的点少,算法自动匹配,优点：快速，匹配点多,缺点：复杂环境下匹配不准确,15,计算,R,和,T,使用匹配的特征点对计算出基本矩阵,F,，根据匹配点的数目可以选择使用,7,点法、,8,点法、,RANSAC,等计算,F,的算法,计算本质矩阵,E,，,E,等于,K,的转置矩阵左乘,F,再左乘,K,对,E,进行,SVD,分解，得到的,U,矩阵的最后一列乘以单值即为平移向量,T,，,U,矩阵左乘反对称矩阵再左乘,V,转置矩阵即得到旋转矩阵,R,。,16,Android,手机上的实现,界面：简洁友好，分为操作栏和帮助栏，操作栏的竖排按钮体现了操作的流程，帮助栏有使用方法的详细介绍。选择匹配点也简单好玩，因为只需要选择七个点就足够计算本质矩阵，进入选点界面后可以看到七个彩色小点排成北斗七星形状，通过触摸移动这些小点到特征明显的位置比如角点。,处理：为了实现实时处理，核心运算代码会调用到,OpenCv,（开源计算机视觉库），编写好,C+,程序之后通过,NDK,把源代码编译成可以供,Android,端,java,程序调用的动态链接库。,17,使用方法,1),从两个不同角度拍摄目标。,2),在第一幅图片上移动彩色小点，选择七个处于三维空间的点；右图需找到和左图相匹配的七个点。,3,）点击测量距离按钮得到,7,个点两两以厘米为单位的实际距离，并返回第一和第二个点之间的距离。,18,Thank You!,19,