2.845

2023影响因子

(CJCR)

  • 中文核心
  • EI
  • 中国科技核心
  • Scopus
  • CSCD
  • 英国科学文摘

留言板

尊敬的读者、作者、审稿人, 关于本刊的投稿、审稿、编辑和出版的任何问题, 您可以本页添加留言。我们将尽快给您答复。谢谢您的支持!

姓名
邮箱
手机号码
标题
留言内容
验证码

一种新的康复与代步外骨骼机器人研究

黄高 张伟民 MarcoCeccarelli 余张国 陈学超 孟非 黄强

王伟, 高伟, 朱海, 胡占义. 快速鲁棒的城市场景分段平面重建. 自动化学报, 2017, 43(4): 674-684. doi: 10.16383/j.aas.2017.c160261
引用本文: 黄高, 张伟民, MarcoCeccarelli, 余张国, 陈学超, 孟非, 黄强. 一种新的康复与代步外骨骼机器人研究. 自动化学报, 2016, 42(12): 1933-1942. doi: 10.16383/j.aas.2016.c160180
WANG Wei, GAO Wei, ZHU Hai, HU Zhan-Yi. Rapid and Robust Piecewise Planar Reconstruction of Urban Scenes. ACTA AUTOMATICA SINICA, 2017, 43(4): 674-684. doi: 10.16383/j.aas.2017.c160261
Citation: HUANG Gao, ZHANG Wei-Min, MARCO Ceccarelli, YU Zhang-Guo, CHEN Xue-Chao, MENG Fei, HUANG Qiang. Research of a New Rehabilitation and Assisting Robot. ACTA AUTOMATICA SINICA, 2016, 42(12): 1933-1942. doi: 10.16383/j.aas.2016.c160180

一种新的康复与代步外骨骼机器人研究

doi: 10.16383/j.aas.2016.c160180
基金项目: 

国家自然科学基金 61321002

国际科技支撑计划 2015BAK35B01

国家111引智计划 B08043

国际科技支撑计划 2015BAF13B01

北京市科技计划项目 Z161100003116081

国家自然科学基金 61320106012

国家自然科学基金 61273348

国家高技术研究发展计划(863计划) 2014AA041602

国家高技术研究发展计划(863计划) 2015AA043202

北京市科技计划项目 v

国家自然科学基金 61533004

国家高技术研究发展计划(863计划) 2015AA042305

国家自然科学基金 61673069

国家自然科学基金 61375103

详细信息
    作者简介:

    黄高 北京理工大学机电学院智能机器人研究所博士研究生.2010年获得武汉轻工大学机械学院学士学位.主要研究方向为康复机器人系统设计技术.E-mail:huanggao@bit.edu.cn

    MarcoCeccarelli:Marco Ceccarelli 意大利卡西诺大学教授.1982年获得罗马大学机械工程专业学士学位, 1987年获得罗马大学博士学位.主要研究方向机器人机构设计与机械原理及机械工程历史.E-mail:ceccarelli@unicas.it

    余张国 北京理工大学机电学院智能机器人研究所副教授.1997年和2005年获得西南科技大学学士和硕士学位, 2009年获得北京理工大学博士学位.主要研究方向为仿生机器人.E-mail:yuzg@bit.edu.cn

    陈学超 北京理工大学机电学院讲师.2007年和2013年分别获得北京理工大学机械电子工程专业学士学位和博士学位.主要研究方向为仿生机器人和机器人动力学.E-mail:chenxuechao@bit.edu.cn

    孟非 北京理工大学机电学院博士后.2008年和2010年分别获得北京理工大学机械电子工程专业学士和硕士学位, 2016年获得北京理工大学机械工程专业博士学位.主要研究方向为电机驱动控制, 仿人机器人运动规划.E-mail:mfly0208@bit.edu.cn

    黄强 北京理工大学机电学院智能机器人研究所教授.1989年获得哈尔滨工业大学硕士学位, 1996年获日本早稻田大学博士学位.主要研究方向为仿人与仿生机器人, 康复机器人.E-mail:qhuang@bit.edu.cn

    通讯作者:

    张伟民 北京理工大学机电学院智能机器人研究所副教授.1999年获得北京理工大学学士学位, 2002年和2005年分别获得北京理工大学机电学院硕士学位和博士学位.主要研究方向为仿生机器人.本文通信作者.E-mail:zhwm@bit.edu.cn

Research of a New Rehabilitation and Assisting Robot

Funds: 

National Natural Science Foundation of China 61321002

Key Technologies Research and Development Program 2015BAK35B01

the National \111" Project B08043

Key Technologies Research and Development Program 2015BAF13B01

Beijing Municipal Science and Technology Project Z161100003116081

National Natural Science Foundation of China 61320106012

National Natural Science Foundation of China 61273348

National High Technology Research and Development Program of China (863 Program) 2014AA041602

National High Technology Research and Development Program of China (863 Program) 2015AA043202

Beijing Municipal Science and Technology Project v

National Natural Science Foundation of China 61533004

National High Technology Research and Development Program of China (863 Program) 2015AA042305

National Natural Science Foundation of China 61673069

National Natural Science Foundation of China 61375103

More Information
    Author Bio:

    Ph. D. candidate at the Intelligent Robotics Institute, School of Mechatronical Engineering, Beijing Institute of Technology, China. He received his bachelor degree from Wuhan Polytechnic University in 2010. His main research interest is rehabilitation robot system design technology

    Professor at University of Cassino and South Latium Via Di Biasio, Italy. He received mechanical engineering degree from the University La Sapienza of Rome, Italy, in 1982. He received his Ph. D. from the University La Sapienza of Rome, Italy in 1987. His research interest covers mechanism design, mechanics and design of robots, and history of mechanical engineering

    Associate professor at the Intelligent Robotics Institute, Beijing Institute of Technology, China. He received his bachelor and master degrees from Southwest University of Science and Technology, China in 1997 and 2005, respectively. He received his Ph. D. degree from Beijing Institute of Technology, China in 2009. His research interest covers bio-robots

    Lecturer at the School of Mechatronics Engineering, Beijing Institute of Technology, China. He received his bachelor and Ph. D. degrees in mechatronics engineering from the Beijing Institute of Technology, China in 2007 and 2013, respectively. His research interest covers humanoid robotics and robot dynamics

    Postdoctor at the Intelligent Robotics Institute, Beijing Institute of Technology, China. He received his bachelor, master, and Ph. D. degrees from Beijing Institute of Technology, China in 2008, 2010 and 2016, respectively. His research interest covers motor control and planning for biped robots

    Professor at the Intelligent Robotics Institute, Beijing Institute of Technology, China. He received his master degree from Harbin Institute of Technology, China in 1989 and Ph. D. degree from Waseda University in 1996. His research interest covers humanoid robot, bio-robots, and rehabilitation robot

    Corresponding author: ZHANG Wei-Min  Associate professor at the Intelligent Robotics Institute, School of Mechatronical Engineering, Beijing Institute of Technology, China. He received his bachelor, master and Ph. D. degrees from the School of Mechatronical Engineering, Beijing Institute of Technology, China in 1999, 2002 and 2005, respectively. His research interest covers bio-robots. Corresponding author of this paper
  • 摘要: 针对老年人及下肢障碍者康复训练与代步问题,本文提出一种新的康复与代步外骨骼机器人.本文首先详细介绍了机器人各部分组成及机构设计方案,通过下肢外骨骼与轮椅的有机结合,有效保持或恢复老年人、脑卒中患者下肢运动能力的同时,为患者提供一种方便的代步工具;运用脚蹬车运动制订康复训练策略,可保持下肢康复训练轨迹固定,保证患者安全;提出主从式操作方法及多模态康复训练控制流程提高使用者参与感.最后通过仿真与实验验证了所提康复系统的可行性与设计的正确性.
  • 三维城市场景模型在城市规划、虚拟旅游以及文化遗产保护等方面有着广泛的应用, 对城市场景进行精确的三维建模具有重要的研究意义.在实际中, 虽然利用激光扫描设备可获取精度较高的三维信息, 但由于其扫描代价的昂贵与扫描范围的局限导致其应用范围存在一定的限制.相对而言, 基于图像的三维场景重建方法由于造价低廉、数据获取方便等优点, 当前仍是城市场景建模中的常用方法.

    然而, 由于城市场景光照变化、透视畸变、弱纹理与重复纹理区域等因素的影响, 利用图像信息有效地获取完整的城市场景模型仍是一个具有挑战性的难题.在诸多相关算法中, 基于特定场景模型或区域 (如超像素) 级的重建算法尽管在一定程度上可以克服像素级重建算法难以获得完整场景结构的缺点, 但同时也存在以下几点问题导致其可靠性与效率较低: 1) 采用的场景模型过于简单 (如仅具有3个正交方向的Manhattan场景模型) 或对场景的结构过于限定 (如预先指定几个场景方向), 因而导致重建结果存在较大的偏差; 2) 用于场景完整结构推断的候选平面集缺乏完备性 (即仅包含场景中的部分平面), 进而影响推断结果的可靠性; 3) 对场景中非重建区域 (如天空、地面) 缺乏有效的检测与滤除机制, 整体重建效率因此受到较大的影响.

    为了解决以上问题, 本文针对城市场景重建完整性问题提出一种快速、鲁棒的分段平面重建算法.该算法根据城市场景的结构特点, 着重解决如何快速从噪声较大的初始空间点中抽取充分且可靠的候选平面以及如何有效地对场景完整的结构进行可靠推断的问题.本文主要贡献如下: 1) 提出一种鲁棒的基于连通域检测的空间平面拟合方法, 可以快速从噪声较大的空间点中抽取充分且可靠的空间平面; 2) 提出一种在MRF (Markov random field) 能量最小化框架下融合灰度一致性、空间几何约束与可见性等度量与约束的场景完整结构推断方法, 可以有效地解决场景中弱纹理、倾斜表面等区域的重建问题; 3) 针对城市场景重建中的常见干扰因素 (如天空、地面等), 提出了相关可行的滤除与屏蔽方法, 有效地提高了整体场景重建的效率.

    本文结构组织如下:第1节对相关工作进行概述; 第2节对所解决的问题进行描述并给出相应的算法流程; 第3节介绍本文算法的几个预处理步骤; 第4、5节分别介绍鲁棒的候选平面抽取与场景完整结构推断方法; 第6节进行实验分析; 第7节对本文进行总结.

    对于室外场景的重建, 基于特定场景模型与场景分段平面假设的重建算法通常可在一定程度上克服传统像素或空间点级的重建算法难以恢复完整场景结构的缺点.

    在双目立体视觉中, 基于场景分段平面假设的算法[1-2]通常先将图像过分割为相互不交迭的若干超像素, 由于每个超像素为颜色相似、位置相近像素的集合, 其对应的空间面片可近似为一个平面 (称为视差平面), 最终的重建问题则转化为为每个超像素分配最优视差平面的问题.为了求解该问题, 此类算法在初始视差图的基础上, 首先利用视差平面拟合的方法获取纹理丰富区域对应的视差平面集, 然后采用全局优化 (如Graph cuts[3]) 方法推断弱纹理、倾斜表面等区域对应的视差平面, 进而获得完整的视差图.此类算法的主要问题在于, 由于初始视差平面集通常缺乏完备性 (如弱纹理、倾斜表面等区域对应的视差平面并不一定包含于初始视差平面集内), 往往会导致视差平面推断产生较大的偏差.此外, 由于此类算法仅采用两幅图像对场景进行重建, 相关像素或区域之间的匹配多义性问题依然较为严重, 因而其可靠性在很多情况下也较低.

    由于较多的图像包含了更丰富的场景结构信息, 类似的多视场景重建算法往往更有利于解决场景重建的完整性问题.在相关算法中, 传统的空间平面扫描算法[4]通常在灰度一致性度量标准下采用究举方式确定每个超像素对应的空间平面.然而, 由于扫描空间不易确定, 因而其计算效率不但难以得到保证, 而且可靠性往往也较差.为了克服此问题, 许多算法趋于直接或间接地指定场景的主方向数量以简化场景的重建过程.如Furukawa等[5]假定场景中的空间点或空间平面总是沿3个正交的场景主方向分布 (即Manhattan场景模型), 进而在由PMVS (Patch-based multi-view stereo) 算法[6]获取的具有方向的初始空间点的基础上, 在MRF能量最小化框架下推断完整的场景结构, 进而较好地解决了弱纹理区域的重建问题.然而, 由于算法所依赖的场景模型过于简单, 在复杂场景的重建中往往会产生较大的错误, 如当场景中的空间面片对应的真实空间平面的法向量与所有场景主方向均不一致时, 该空间面片会被分配一个错误的空间平面.同样, Gallup等[7]采用的沿多个场景主方向进行空间平面扫描方法以及Mičušík等[8]在由消影点检测方式获得的3个场景主方向上进行场景结构推断的方法也面临着类似的问题.在实际中, 简单地对场景的结构 (如主方向数量) 进行限制或约束很难适于具有复杂结构的场景重建.

    在其他的分段平面重建算法中, Sinha等[9]首先采用传统的SfM (Structure from motion) 方法及直线重建方法获取初始空间点及线段, 然后以此构造场景结构推断时所采用的候选空间平面集.然而, 在复杂场景重建中, 由于初始空间点与直线比较稀疏, 该算法通常会遗漏较多的场景结构细节而重建出过于简单的场景结构; 此外, 该算法中的图像校正与穷举式的平面拟合等过程也会使得算法适应性与效率降低. Chauve等[10]通过在初始空间点云的基础上利用区域增长的方式获取候选平面, 然后根据场景中每个空间面片相对于空间平面的位置而采用类似体素重建的方式对其状态进行标注, 进而获取分段平面的重建结果.在实际中, 如果初始空间点云比较稀疏且噪声较大, 区域增长方法的可靠性往往不易得到保证, 算法的整体性能因此会受到较大的影响.在Kowdle等[11]提出的将图像与空间信息融合于能量优化框架下的物体分割算法中, 空间信息的获取与本文算法较为相关, 但其整体算法侧重于对特定物体的分割, 因而难以适于室外场景的重建. Bódis-Szomorú等[12]在初始稀疏空间点与图像过分割获得的超像素的基础上在MRF能量最小化框架下推断场景的完整结构.该算法虽然速度较快, 但其为了通过空间点拟合的方式获取每个超像素对应的初始空间平面而采用了较大尺寸的超像素, 这在实际中往往会导致算法的可靠性较差.事实上, 尺寸较大的超像素对应的空间点深度变化通常较大, 相应的空间面片并不能简单地近似为空间平面.此外, 如果场景中存在较多的难以获得空间点的区域 (如弱纹理、重复纹理等区域), 即使采用尺寸较大的超像素, 可能也难以满足算法所依赖的假设, 进而难以获得较好的结果.

    对于城市场景, 为了可靠地恢复其完整的结构, 通常需要在数据采集阶段捕获其丰富的结构细节.如图 1所示, 本文采用的图像采集设备由架设于摄影车顶部的6部摄像机构成, 其中的1号摄像机主要用于捕获高层建筑区域的上部结构信息, 其他摄像机彼此间保持相同的夹角以全方位地捕获场景其他结构信息.

    图 1  摄像机与图像示例
    Fig. 1  Cameras and sample images

    本文在初步实验中发现, 以上摄像机架设方式尽管可以对场景的结构进行充分地采集, 但由于光照变化、透视畸变、弱纹理区域等诸多因素的影响, 采用PMVS算法并没有获得较好的重建结果.如图 2所示, 不但场景中许多区域的结构未被可靠地重建 (如存在较大的孔洞), 而且对于距离摄像机较远的已重建区域, 相应的空间点与真值之间的偏差也较大.此外, 大量非重建的区域空间点 (如天空、地面等) 也极大地干扰着建筑区域空间点的可视化与进一步的处理 (如三角化网格).

    图 2  城市场景重建问题
    Fig. 2  Problems in reconstructing urban scenes

    因此, 当前需解决的问题可简要地描述为:已知城市场景相应的图像集$\left\{ {{I_k}} \right\}\left ({k = 1, \cdots, m} \right)$及对应的初始稀疏且带噪空间点集$\left\{ {{P_k}} \right\}\left ({k = 1, \cdots, m} \right)$ (即图像$I_k$对应的可见空间点为$P_k$), 如何快速、可靠地恢复其完整的结构?

    针对此问题, 本文提出一种有效的城市场景分段平面重建算法, 其基本流程如图 3所示.

    图 3  本文算法基本流程图
    Fig. 3  Flowchart of our proposed method

    下文对算法的各个环节进行详细介绍.

    为了根据场景分段平面假设对场景完整的结构进行推断, 本文采用Mean-shift算法[13]对当前图像进行了过分割以将场景结构完整推断问题转化为为每个分割区域 (即超像素) 分配空间平面的问题.需要注意的是, 由于大尺寸超像素对应的空间面片通常存在较大的深度变化而不能将其近似为空间平面, 因而, 本文算法采用小尺寸超像素 (如空间与颜色参数分别为2与1) 对场景结构进行推断.

    对于场景中的天空、地面等非重建区域中的空间点 (以下简称干扰空间点), 其不但对重建结果的可视化 (如图 2 (a)所示) 产生较大的干扰, 而且也对重建结果的后续处理 (如场景完整结构的推断、三角化网格等) 产生较大的影响, 因而需要被有效地滤除.因而, 本文也采用文献[14]中算法对图像中的天空、地面与建筑物等3个语义区域进行了标注, 并滤除了相应的干扰空间点 (如图 4 (a)所示).事实上, 此预处理步骤也使得场景完整结构的推断可以针对建筑区域进行, 不但可以提高整体算法的效率, 而且也可以增强采用分段平面假设对以平面为主的建筑结构进行推断的可靠性.

    图 4  候选平面的抽取
    Fig. 4  Extraction of candidate planes

    此外, 为了从初始空间点中抽取充分且可靠的空间平面 (参见第4节), 本文算法也采用消影点检测方法[8]确定了场景的垂直方向 (如图 4 (b)所示的根据场景垂直方向确定的水平面).

    为了对场景完整的结构进行可靠地推断, 抽取充分且可靠的候选平面是关键环节.在实际中, 对超像素相应的空间点进行拟合是获取候选平面最为直接的方法, 但同时也存在以下问题导致其实用性较差: 1) 当超像素对应空间点存在较大噪声时, 所获得的空间平面与真实空间平面之间往往存在较大的偏差, 特别当空间点较少时, 此问题尤其严重; 2) 当超像素数量较多时, 整体拟合效率较低.

    此外, 尽管当前许多经典的多模型 (如空间平面) 拟合方法 (如: J-linkage[15]、PEaRL [16]等) 也可以在一定程度上解决候选平面的抽取问题, 但当空间点数量较多且噪声较大时, 此类方法在初始模型的产生、模型优化等环节通常不易获得较好的效果, 而且效率较低.

    为了解决以上问题, 本文算法根据城市场景的结构特征与先验, 采用基于连通域检测的方法产生候选平面集, 如算法1所示.

    根据城市建筑垂直于地平面且以平面结构为主的特征 (如图 4 (c)所示), 空间点在地平面上的投影通常由于较高的聚集度而形成具有一定规则性 (如直线) 的连通区域, 尤其对于场景主平面区域, 此特征更加明显.在如图 4 (d)所示投影图中, 尽管单个投影点对应的空间点数量不尽相同且空间点有所偏差, 但投影点之间却相互聚集成连通区域, 因而可以利用连通域检测方法确定不同连通区域对应的空间点, 进而可通过整体拟合的方式确定相应空间平面.

    由于尺寸较小的连通区域对应空间点的分布问题 (如近似位于垂直方向同一直线上) 可能会导致不可靠的空间平面的抽取, 所以, 本文算法首先对尺寸大于指定阈值$\vartheta$ (实验设置为15) 的连通区域进行平面检测, 而对其他连通区域则根据场景结构先验 (参见第4.2节) 检测其中的潜在空间平面.此外, 为了增强连通域检测的可靠性, 本文算法采用了多级投影点阈值的方式对投影图进行过滤处理.如图 4 (e)所示, 采用较高的投影点阈值后, 投影图中的连通区域对应的空间点数量较多, 因而拟合生成的空间平面的可靠性较高 (如图 4 (f)中彼此间隔较小的两个空间平面均可被可靠地抽取).当投影点阈值降低后, 如图 4 (h)所示, 更多连通域可被检测, 因而更多潜在的空间平面可被抽取.在我们的实验中, 将每次投影点阈值$\zeta$ (缺省设置为25) 设置为当前投影图中投影点对应的最大空间点数量的0.05可获得较好的效果.

    由于空间点分布的不均匀性, 利用其投影特征通常仅能抽取场景中具有明显特征的主平面.在此过程中, 尺寸较小的连通区域虽未被检测, 但其对应的空间点往往位于潜在的场景平面上.对于城市建筑, 其主体结构除以平面为主外, 各个平面之间的夹角通常也是特定 (如$45^\circ $、$90^\circ $等) 的, 此场景结构先验对进一步抽取潜在的空间平面具有较好的指导作用.事实上, 在场景垂直方向已知且部分可靠场景主平面已确定的情况下, 潜在的场景平面更可能位于与当前已抽取的场景主平面具有特定夹角的位置.

    在本文算法中, 以当前已抽取的任意一个可靠场景主平面的法向量$n$作为参考, 以场景垂直方向为主轴并以指定角度 (实验采用$15^\circ $) 进行旋转可生成法向量集${n_i}$.显然, 其中的部分法向量相应的空间平面更可能为潜在的空间平面.此外, 考虑到一些特殊倾斜表面 (如与地平面夹角$60^\circ $) 的抽取, 本文算法也将$n$沿场景水平方向在指定可视度量范围内 (如[$0^\circ $, $60^\circ $]) 按指定角度间隔 (如$15^\circ $) 进行了旋转以生成更多可能的法向量,

    设小尺寸连通区域的集合为${c_j}$, 则根据法向量$n_i$与连通区域$c_j$对应空间点的重心可确定相应的空间平面$h_{i, j}$.为了验证空间平面$h_{i, j}$的可靠性, 本文算法采用了以下两个度量标准: 1) 剩余空间点 (即不在主平面上的空间点) 到空间平面$h_{i, j}$的距离小于指定阈值的数量$t_1$; 2) 到空间平面$h_{i, j}$的距离小于指定阈值的剩余空间点相关的连通区域数量$t_2$.显然, 如果$t_1$值与$t_2$值越大, 则空间平面$h_{i, j}$的可靠性也越高.在实际中, 由于相同的$t_2$值可能与多个不同的$t_1$值相对应, 因而, 本文算法首先选取$t_2$值大于指定阈值$\omega$的所有空间平面, 然后将其中$t_1$值最大者作为候选平面.由于阈值$\omega$设置过小可能会引入较多的干扰空间平面, 本文实验中将其设置为5.

    算法1.基于连通域检测的候选平面抽取

    输入.空间点集$P$;

    输出.候选空间平面集${\cal H}$;

    %初始主平面的抽取

    1) 根据$P$生成投影图$M$并根据阈值$\zeta$对其进行过滤处理;

    2) 检测连通区域, 如果其尺寸大于指定阈值$\vartheta$, 则拟合相应的空间点并将生成的空间平面保存至$H_1$, 同时从$M$与$P$中分别删除该连通区域与所有被拟合的空间点;

    3) 否则, 则将该连通区域添加到集合${c_j}$;

    4) 降低阈值$\zeta$并转到步骤2直至检测不到符合条件的连通区域;

    %潜在平面的抽取

    5) 根据平面$h \in {H_1}$生成场景方向${n_i}$;

    6) 根据${n_i}$与$c_j$生成候选平面集$h_{i, j}$;

    7) 计算$h_{i, j}$对应的平面可靠性度量$t_1$与$t_2$;

    8) 根据$t_1$与$t_2$从$h_{i, j}$中确定候选平面并将其保存至$H_2$;

    9) 合并$H_1$与$H_2$为${\cal H}$并从中剔除相似平面后输出.

    从算法1中不难发现, 连通域的检测在一定程度上可以全局地对大量空间点 (通常对应多个超像素) 是否属于相同空间平面进行度量与判断, 不但有效地避免了局部对单个超像素对应的空间点进行拟合的不可靠性, 而且也避免了对大量超像素对应的空间点进行拟合的计算复杂度, 整体上具有较高的可靠性与效率.此外, 为了获取场景更细致的结构以避免过拟合情况, 本文算法也在每个空间平面$h \in {\cal H}$附近对与其平行的空间平面进行采样, 并将得到的指定数量 (实验设置为10) 的空间平面也作为候选平面保存至${\cal H}$.

    虽然利用算法1可以抽取场景中充分且可靠的候选平面, 但场景的完整结构仍需要进一步的推断, 其主要原因在于: 1) 由于光照变化、弱纹理等因素的影响, 场景中许多区域并未包含任何空间点, 因而需要对这些区域对应的空间平面进行推断; 2) 从初始空间点中抽取的空间平面中往往也存在少量外点, 因而需要进行全局性的优化以获取更可靠的结果.

    针对以上两点问题, 本文采用MRF能量最小化方法进行解决.

    设${\cal L}$表示由空间平面集${\cal H}$的序号构成的标记集, ${\cal R}$表示当前图像过分割获得的建筑区域超像素集, 则用于场景完整结构推断的能量函数如下:

    $ \begin{align} &E\left( f \right)=\sum\limits_{s\in R}{{{E}_{data}}}\left( s,{{f}_{s}} \right)+{{\lambda }_{smo}}\times \\ &\sum\limits_{t\in N(s)}{{{E}_{smooth}}}\left( {{f}_{s}},{{f}_{t}} \right)+{{\lambda }_{lab}}\cdot \sum\limits_{L\in L}{{{E}_{label}}}\left( f \right) \\ \end{align} $

    (1)

    其中, $f$为所有超像素对应空间平面的标记组合, $N (s)$为所有与超像素$s$相邻的超像素集合, ${f_s} \in {\cal L}$与${f_t} \in {\cal L}$分别为相邻超像素$s$与$t$对应的空间平面标记, 常数${\lambda _{smo}}$与${\lambda _{lab}}$分别为平滑项${E_{smooth}}\left ({{f_s}, {f_t}} \right)$与标记项${E_{label}}\left (f \right)$相应的权重.在实际中, 较大的${\lambda _{smo}}$有利于增强相邻超像素对应空间平面之间的平滑性, 但设置过大则不利于恢复场景的结构细节 (如两相邻超像素对应空间平面相差较小时会被分配为一个空间平面).类似地, 较大的权重${\lambda _{lab}}$虽然有利于降低场景结构的复杂度, 但过大的取值也会导致场景结构细节的损失.本文实验中分别将${\lambda _{smo}}$与${\lambda _{lab}}$设置为0.6与0.2.

    5.1.1   数据项

    数据项${E_{data}}\left ({s, {f_s}} \right)$由灰度一致性度量${E_{pho}}\left ({s, {f_s}} \right)$与空间几何约束${E_{geo}}\left ({s, {f_s}} \right)$两部分构成, 即:

    $ {E_{data}}\left( {s, {f_s}} \right) = \alpha \cdot {E_{pho}}\left( {s, {f_s}} \right) + \left( {1 - \alpha } \right) \cdot {E_{geo}}\left( {s, {f_s}} \right) $

    (2)

    其中, 权重常数$\alpha$用于调整灰度一致性度量与空间几何约束的作用力度, 当空间点较少或噪声较大时, 可设置为较大的值以增强灰度一致性的作用力度 (实验中设置为0.6).

    5.1.1.1   灰度一致性度量

    设当前图像与其相邻图像分别表示为$I_r$与$\left\{ {{N_i}} \right\}\left ({i = 1, \cdots, k} \right)$, 灰度一致性度量${E_{pho}}\left ({s, {f_s}} \right)$定义为:

    $ {E_{pho}}\left( {s, {f_s}} \right) = \frac{1}{{k \cdot \left| s \right|}}\mathop \sum \limits_{i = 1}^k \mathop \sum \limits_{p \in s} {C_s}\left( {p, {H_s}, {N_i}} \right) $

    (3)

    其中, $\left| s \right|$为超像素$s$内部所有像素的总数, 而${C_s}\left ({p, {H_s}, {N_i}} \right)$定义为:

    $ \begin{align} &{{C}_{s}}\left( p,{{H}_{s}},{{N}_{i}} \right)= \\ &\left\{ \begin{array}{*{35}{l}} \min \left( \left\| {{I}_{r}}\left( p \right)-{{N}_{i}}\left( {{H}_{s}}(p) \right) \right\|,\delta \right),&{{H}_{s}}\left( p \right)\in M \\ {{\lambda }_{occ}},&\text{其他} \\ \end{array} \right. \\ \end{align} $

    (4)

    其中, $\left\| {{I_r}\left (p \right)-{N_i}\left ({{H_s}(p)} \right)} \right\|$表示图像${I_r}$中的像素$p$与相邻图像$N_i$中的像素${H_s}(p)$之间的规范化颜色 (即颜色值范围为0 $\sim$ 1) 差异, ${\lambda _{occ}}$为空间可见性冲突惩罚量 (实验设置为2), $\delta$为截断阈值以增强颜色度量的可靠性 (实验设置为0.5).由于${H_s}(p)$可能并非整数位置, 相应的颜色值需要进行插值运算 (本文采用双线性插值).

    在式 (4) 中, $M$为相邻图像$N_i$中待推断空间平面的区域, 通常不包含或仅包含较少数的空间点.因而, 如果图像$I_r$中的像素$p \in s$在空间平面$H_s$的诱导下投影在图像$N_i$中的区域$M$ (即${H_s}\left (p \right) \in M$), 则空间平面$H_s$更可能分配至超像素$s$, 其可靠性通过相应的颜色差异进行度量; 否则则可能导致空间点可见性的冲突, 因而需给予较大的惩罚量.需要注意的是, 此处将空间点遮挡也视为可见性冲突情况处理的主要原因在于: 1) 初始空间点本身存在偏差, 空间点遮挡判断的可靠性较低; 2) 单幅图像的遮挡问题可在多个图像的重建结果进行合并时得以缓解; 3) 降低能量函数的复杂性以提高求解效率与可靠性.

    5.1.1.2   空间点的约束

    在实际中, 如果超像素$s$对应的空间面片包含一定数量的空间点, 则距离这些空间点较近的空间平面更可能成为超像素$s$对应的空间平面.因而, 空间点的几何约束项${E_{geo}}\left ({s, {f_s}} \right)$可定义如下:

    $ {E_{geo}}\left( {s, {f_s}} \right) = \left\{ {\begin{array}{ll} {{\lambda _{dis}}},&{\left| {{P_s}} \right| = 0} \\ \displaystyle {\frac{1}{{1 + {{\rm e}^{ - d\left( {{P_s}, {H_s}} \right)}}}}},&{\left| {{P_s}} \right| > 0} \\ \end{array}} \right. $

    (5)

    其中, $P_s$为超像素$s$对应的空间点集, $d\left ({{P_s}, {H_s}} \right)$为集合$P_s$中的空间点到空间平面$H_s$的平均距离, ${\lambda _{dis}}$为距离惩罚量, 本文实验中根据式 (5) 中的距离度量将其设置为2.

    5.1.2   平滑项

    平滑项${E_{smooth}}\left ({{f_s}, {f_t}} \right)$采用Potts模型[3], 即:

    $ {E_{smooth}}\left( {{f_s}, {f_t}} \right) = {\omega _{st}} \cdot \delta \left( {{f_s} \ne {f_t}} \right) $

    (6)

    其中, $\delta \left (x \right)$为指示函数, 当$x$为真时取值为1, 否则为0. ${\omega _{st}}$为相邻超像素$s$与$t$对应空间平面不相似性惩罚量.

    为了鼓励相邻超像素具有相同的空间平面标记或者空间平面参数应当在颜色相近的超像素之间平滑变化, 式 (6) 中的${\omega _{st}}$定义为:

    $ {\omega _{st}} = {b_{st}} \cdot (1 - \left\| {c\left( s \right) - c\left( t \right)} \right\|) \cdot \left\| {n\left( s \right) - n\left( t \right)} \right\| $

    (7)

    其中, $c (s)$为超像素规范化平均颜色, $n (s)$为空间平面$H_s$ (空间平面标记为$f_s$) 的单位法向量. $\left\| \cdot \right\|$为$L_2$范数度量, $b_{st}$为超像素$s$与$t$之间规范化的共享边界长度 (即共享边界长度除以超像素$s$与$t$中最小周长).

    式 (7) 表明, 如果两超像素之间的颜色越相似, 共享边界越长, 则相应的平滑力度越强, 当两者被分配不同的空间平面时所给予的惩罚力度也越大.

    5.1.3   标记项

    不同于平滑项, 标记项${E_{label}}\left (f \right)$用于约束最终解$f$中不同空间平面标记的数量, 使得位置不相邻而对应空间平面相同的超像素趋于取相同的空间平面标记, 整体上可获取能表达完整场景结构的最小空间平面集, 其定义为:

    $ {E_{label}}\left( f \right) = \mathop \sum \limits_{L \in {\cal L}} {{\rm e}^{ - {\lambda _0} \cdot \left| L \right|}} \cdot {\delta _L}\left( f \right) $

    (8)

    其中, $\left| L \right|$为分配给标记$L$的超像素的数量, ${\lambda _0}$为经验常数 (实验设置为50), 函数${\delta _L}\left (\cdot \right)$定义为:

    $ {\delta _L}\left( f \right) = \left\{ {\begin{array}{*{20}{l}} 1, ~~~ {\exists s:{f_s} = L, {f_s} \in f} \\ 0, ~~~ \mbox{其他} \\ \end{array}} \right. $

    (9)

    通常情况下, 式 (1) 所示的能量函数的求解属于NP-hard问题, 本文算法采用Graph-cuts方法获取其近似解.在实际中, 由于能量函数有效地融合了灰度一致性、空间几何与可见性等度量与约束, 因而其求解可靠性较高.如图 5所示的场景区域 (即矩形区域内部), 尽管由于距离摄像机较远而导致初始空间点偏差较大, 但通过场景结构推断后其对应的平面结构仍得以可靠的恢复.

    图 5  场景结构的推断
    Fig. 5  Inference of scene structures

    为了检测并剔除场景结构推断结果中的不可靠空间平面 (如非刚体物体对应的空间平面), 对于当前图像$I_r$中的超像素$s$已分配的空间平面$H_s$, 本文采用以下标准度量其可靠性:

    $ T\left( {{H_s}} \right) = \sum\limits_{i = 1}^k {\delta \left( {{d_m}\left( {{P_{{H_s}}}, {H_{{N_i}}}} \right) \le \mu } \right)} $

    (10)

    其中, ${P_{{H_s}}}$为超像素$s$中的所有像素在空间平面$H_s$上的反投影空间点, ${H_{{N_i}}}$为相邻图像$N_i$通过空间平面推断后获得空间平面集, ${d_m}\left ({{P_{{H_s}}}, {H_{{N_i}}}} \right)$为${P_{{H_s}}}$到${H_{{N_i}}}$中的空间平面平均距离中的最小者; $\delta \left (\cdot \right)$则为式 (6) 中的指示函数, $\mu$为距离阈值 (实验设置为0.05), $k$为相邻图像的数量.

    式 (10) 表明, 对于空间平面$H_s$, 较高的$T (H_s)$值意味着在多幅图像的平面推断结果中存在与其相近的空间平面, 因而其可靠性也就越高.

    为了验证本文算法的可行性与有效性, 如图 6所示, 本文利用标准数据集中以平面结构为主的建筑场景[17] (图像分辨率为3 072像素$\times$ 2 048像素的Herz-Jesu与Castle场景) 与图 1所示采集设备获取的类似结构的城市建筑场景数据集 (图像分辨率为1 224像素$\times$ 1 848像素) 分别对其进行测试.其中, 相对于标准数据集, 真实数据集对应的场景深度较大, 而且存在较大光照变化的干扰, 因而利用SfM方法获取的初始空间点的精度较低, 在此基础上的场景分段平面重建的鲁棒性与效率将面临更大的挑战.

    图 6  数据集例图 (上:标准数据; 下:真实数据)
    Fig. 6  Sample images (Up: standard data; Down: real-world data)

    此外, 在场景结构推断时, 对于标准数据集, 本文选择当前图像的左、右相邻图像对相应的场景结构进行推断; 而对于真实数据集, 本文主要对2号摄像机获取的图像对应的场景结构进行推断, 其相邻车的前后位置所拍摄的图像; 2) 序号为1的摄像机在当前位置所拍摄的图像.当然, 当考虑更多相邻图像时, 算法的可靠性可得以增强, 但其效率往往也将受到较大的影响.

    本文实验环境为64位Win 7系统, 处理器为Intel 3.2 GHz双核CPU、内存为16 GB, 算法采用C++实现.

    为了较好地评价本文算法的性能以及与其他算法之间的差异, 本文仅对建筑区域进行重建, 同时采用$T\left ({{H_s}} \right) > 2$时的空间平面数量度量场景分段平面结构推断的可靠性; 此外, 对于存在真值的标准数据集, 本文采用文献[18]中的相对深度差异度量相应的空间点精度 (相关阈值设置为0.02).对于真实数据集, 由于缺少真值, 本文采用文献[19]中的场景重建精度度量标准对相应的空间点精度进行度量.该度量标准通过对在多幅视图中的相对深度偏差均小于指定阈值 (本文中设置为0.02) 的空间点所占百分比进行统计, 可以较好地衡量场景重建精度或完整性.

    对于标准数据集, 如图 7 (a)所示, 由于场景中弱纹理、倾斜区域的存在, 利用传统SfM方法获取的初始空间点尽管精度较高, 但整体上较为稀疏且分布不均匀. 表 1列出了初始空间点数量以及过分割后的超像素数量.

    图 7  标准数据集实验结果
    Fig. 7  Results for standard data sets
    表 1  在标准数据集上的算法性能比较
    Table 1  Performance comparisons on standard data sets
    图像 初始空间点数量 本文算法 文献[12]
    超像素数量 平面数量 重建精度 时间 (s) 超像素数量 平面数量 重建精度 时间 (s)
    抽取 推断 合计 抽取 推断 合计
    Herz-Jesu 29 541 49 326 12 0.8043 73.15 138.81 211.96 3 096 7 0.3296 136.72 124.50 258.22
    Castle 12 337 26 825 9 0.7452 57.96 218.06 276.01 4 127 5 0.2701 107.40 196.80 304.21
    下载: 导出CSV 
    | 显示表格

    图 7表 1所示的实验结果可以发现, 尽管标准数据集初始空间点较为稀疏, 但根据建筑结构特征与先验, 其在地平面的投影仍呈现出具有一定规则性 (如直线) 的连通区域 (如图 7 (b)所示).在此基础上, 采用连通域检测算法可以有效地抽取较为完备的候选平面集 (参见第4.2节), 进而使得场景结构推断的可靠性得以极大地增强.需要注意的是, 候选平面集的完备性是场景结构推断可靠性的基础, 这也是本文算法可以恢复更多场景结构细节 (如Herz-Jesu场景台阶) 与完整场景结构的主要原因.另一方面, 本文算法中的场景结构推断模型由于融合了空间几何约束与灰度一致性度量, 因而可以对场景中不包括或包括较少空间点的弱纹理、倾斜表面等区域对应的空间平面进行有效的推断, 这则是获取完整场景结构的关键.

    相对地, 文献[12]由于需要拟合超像素对应空间点以获取用于空间平面全局优化的候选平面集, 因而采用了大尺寸的超像素以包含足够的空间点, 这在分段平面假设不可靠的区域 (如超像素对应的空间面片存大较大的深度变化) 往往会产生错误的结果.此外, 由于初始空间点分布的不均匀性, 弱纹理区域对应的超像素通常难以包含足够的空间点, 而文献[12]中的空间平面优化模型为了提高整体优化效率而未采用灰度一致度量, 因而难以对这些超像素对应的空间平面进行推断 (如Castle场景存在大量未被重建的区域).

    在算法效率上, 如表 1所示, 相对于文献[12], 尽管本文算法在场景结构推断中计算灰度一致性度量耗时较多, 但在生成候选平面阶段耗时较少, 因而, 整体上仍表现出相对较高的效率.

    对于真实数据集, 利用传统SfM方法获得的初始空间点更加稀疏, 本文虽然采用PMVS算法对其进行了扩散处理 (如图 8 (a)所示), 但效果并不理想, 而且空间点精度也较低.

    图 8可以发现, 本文算法可以可靠地去除天空、地平面等非重建区域的干扰, 有效地恢复建筑区域完整的平面结构, 尤其对于一些结构细节 (如图#1、#2中的矩形区域), 仍然表现出较好的性能.相对地, 文献[12]为了保证每个超像素可以包含足够的空间点以拟合相应的候选平面而采用了大尺寸的超像素, 这往往会强制地将实际不能近似为空间平面的空间面片视为空间平面处理, 从而导致空间平面拟合或推断的错误.实际中, 对于图像中对比度较低且纹理单一的区域, 采用大尺度的过分割参数通常会导致相应的超像素与多个空间平面相对应.如图#2中对应多个空间平面的窄矩形区域被分配了一个空间平面, 进而根据$T (H_s)$值而被滤除.此外, 对于不包含空间点或包含较少空间点的超像素, 由于文献[12]未在空间平面推断模型中考虑灰度一致性度量, 因而也难以对相应的空间平面进行可靠的推断 (如图#3中的矩形区域).

    图 8  真实数据集实验结果 (图像从上而下为: #1, #2, #3和#4)
    Fig. 8  Results for real-world data sets (Images from top to bottom are #1, #2, #3 and #4.)

    在本文算法中, 通过融入场景结构先验并采用连通域检测方法获取候选平面集, 不但可有效提高对带噪空间点进行空间平面拟合的可靠性, 而且具有较高的效率; 而对于不包括空间点的超像素对应空间平面的推断, 由于综合考虑了空间几何约束与灰度一致性度量, 因而可以获得较好的结果.需要注意的是, 对于图#2中的宽矩形区域, 本文算法与文献[12]重建出了不同的结果, 其主要原因是由该区域中两个空间平面相距较近而$T (H_s)$中的阈值$\mu$设置相对偏大所致, 这在一定程度上也反映出本文算法在获取候选平面集与场景完整结构推断的可靠性.

    表 2给出了两种算法的重建结果与效率.从表 2中不难发现, 相对于文献[12], 本文算法不但在重建可靠性表现出了较好的性能, 而且也具有较高的效率.事实上, 尽管文献[12]为了提高效率而未在空间平面优化阶段考虑灰度一致性度量, 但在获取候选平面集时却消耗了大量的时间, 因而效率相对较低.需要注意的是, 表 2中两种算法的运算时间均为对建筑区域的重建时间.此外, 文献[12]尽管在一些情况下也获得了较多的可靠空间平面 (如图#3), 但其未对弱纹理、倾斜表面等区域进行可靠的重建.

    表 2  在真实数据集上的算法性能比较
    Table 2  Performance comparisons on real-world data sets
    图像序号 初始空间点 本文算法 文献[12]
    超像素 平面 精度 时间 (s) 超像素 平面 精度 时间 (s)
    #1 16 520 13 907 6 0.7554 58.22 1 996 4 0.3187 78.13
    #2 20 468 9 562 7 0.7852 49.36 1 768 6 0.4165 60.98
    #3 13 710 23 955 6 0.6486 70.01 2 341 6 0.3547 76.39
    #4 10 694 18 933 7 0.5713 64.52 3 011 5 0.2310 72.67
    下载: 导出CSV 
    | 显示表格

    图 9为本文算法对多幅图像重建后的分段平面结果.由于单幅图像对应的结果具有较高的可靠性, 合并后场景模型整体上也是完整、可靠的.

    图 9  多幅图像对应的初始空间点与本文算法重建结果(左:场景#1;右:场景#2)
    Fig. 9  Initial 3D points and reconstruction results of multiple images (Left: scene #1; Right: scene #2)

    总体上, 本文算法通过基于连通域检测的空间平面拟合方法获取可靠的候选平面集与融合多种度量与约束的场景结构推断, 可以较好地克服场景中诸多干扰因素的影响, 进而可以快速、可靠地恢复场景完整的结构.

    本文提出一种快速、鲁棒的城市场景分段平面重建算法.根据城市场景结构特征, 本文算法利用基于空间点投影的连通域检测方法可以快速从初始带噪空间点中抽取充分且可靠的候选空间平面, 克服了传统相关算法复杂度高与易于遗漏空间平面的缺点.在此基础上, 本文算法进一步在融合灰度一致性度量、空间几何与可见性约束的MRF能量最小化框架下对场景的完整结构进行了推断, 有效地解决了弱纹理、倾斜表面等区域的重建问题.目前, 本文算法的主要缺点在于: 1) 过于稀疏的初始空间点 (如几十个) 不利于抽取足够多的候选平面与构造较强的约束条件, 进而会影响场景完整性推断的可靠性; 2) 算法所依赖的分段平面假设不利于场景中曲面结构 (如柱面) 的重建, 可能会导致较大的重建偏差.在实际中, 此两方面的缺点可通过采用空间点扩散的方式稠密化初始空间点以及在重建过程中融合更丰富的场景先验进行解决, 这也是本文下一步的研究工作.


  • 本文责任编委 王启宁
  • 图  1  脚蹬车运动一个周期中三阶段分布

    Fig.  1  Three phases of the crank cycle during the cycling action

    图  2  外骨骼康复机器人运动简图及设计参数

    Fig.  2  A kinematic sketch of proposed leg-exoskeleton assisted wheelchair system and its main design parameters

    图  3  康复机器人自由度分布

    Fig.  3  The distribution of the robot$'$s degrees of freedom (DOFs)

    图  4  机器人机构设计方案

    Fig.  4  The mechanical design of the robot

    图  5  外骨骼长度调节连杆

    Fig.  5  The length adjustment of the exoskeleton rod

    图  6  同步带轮关节机构设计

    Fig.  6  The mechanical design of synchronous pulley

    图  7  脚踏板关节机构设计

    Fig.  7  The mechanical design of pedal

    图  8  康复轮椅主从式操作方法示意图

    Fig.  8  A scheme for the slave-master actuation for the robot

    图  9  主从式控制器组成

    Fig.  9  The components of slave-master controller

    图  10  机器人康复训练控制流程

    Fig.  10  The robot$'$s control flow for the rehabilitation training

    图  11  ADAMS环境中机器人与人的模型及各旋转关节示意

    Fig.  11  An ADAMS model of the design in Fig. 4 with indication of parameters

    图  12  左右腿髋关节、膝关节、踝关节角度曲线(实线为左腿, 虚线为右腿)

    Fig.  12  Angle curves of left and right legs at hip, knee, ankle (continuous line is for left foot and dot line is for right foot)

    图  13  左右腿髋关节、膝关节、踝关节角速度曲线(实线为左腿, 虚线为右腿)

    Fig.  13  Angular velocities of left and right legs at hip, knee, ankle (continuous line is for left foot and dot line is for right foot)

    图  14  左右腿髋关节、膝关节、踝关节接触力曲线(实线为左腿, 虚线为右腿)

    Fig.  14  Joint reaction forces at left and right legs at hip, knee, ankle (continuous line is for left foot and dot line is for right foot)

    图  15  康复机器人原理样机

    Fig.  15  A prototype of the rehabilitation robot

    图  16  实验过程中一周期内康复运动序列图及实验场景照片

    Fig.  16  Experimental scene photos with one cycle rehabilitation movement sequence diagram in the experimental process

    图  17  外骨骼运动特征分析实验

    Fig.  17  The experiment for characteristics analysis of the exoskeleton motion

    图  18  主从式运动速度曲线

    Fig.  18  The plots of master-slave motion

    表  1  外骨骼机器人机构设计参数

    Table  1  Speciflcations of the new leg-exoskeleton assisted wheelchair

    设计参数 数值
    自由度 2
    机器人重量(kg) 55
    高度(mm) 800
    长度(mm) 780
    宽度(mm) 609
    轮椅运行速度(m/s) 1~3
    θ2(°) -15~15
    θ3(°) -5~35
    θ4(°) 0~35
    L2 (mm) 380~430
    L3 (mm) 370~420
    下载: 导出CSV
  • [1] 吴玉韶, 党俊武.老龄蓝皮书:中国老龄产业发展报告(2014).北京:社会科学文献出版社, 2014. 70-88

    Wu Yu-Shao, Dang Jun-Wu. Blue Book for Aging:China Report of the Development on Siliver Industry (2014). Beijing:Social Sciences Academic Press, 2014. 70-88
    [2] 王陇德.中国脑卒中防治报告(2015).北京:中国协和医科大学出版社, 2015. 10-22

    Wang Long-De. Report on the Chinese Stroke Prevention (2015). Beijing:China Union Medical University Press, 2015. 10-22
    [3] 谭民, 王硕.机器人技术研究进展.自动化学报, 2013, 39(7):963-972 http://www.aas.net.cn/CN/abstract/abstract18124.shtml

    Tan Min, Wang Shuo. Research progress on robotics. Acta Automatica Sinica, 2013, 39(7):963-972 http://www.aas.net.cn/CN/abstract/abstract18124.shtml
    [4] 周媛, 王宁华.康复机器人概述.中国康复医学杂志, 2015, 30(4):400-403 http://www.cnki.com.cn/Article/CJFDTOTAL-ZGKF201504025.htm

    Zhou Yuan, Wang Ning-Hua. Rehabilitation robot:review. Chinese Journal of Rehabilitation Medicine, 2015, 30(4):400-403 http://www.cnki.com.cn/Article/CJFDTOTAL-ZGKF201504025.htm
    [5] Volpe B T, Krebs H I, Hogan N, Edelstein O T R L, Diels C, Aisen M. A novel approach to stroke rehabilitation:robot-aided sensorimotor stimulation. Neurology, 2000, 54(10):1938-1944 doi: 10.1212/WNL.54.10.1938
    [6] Ju M S, Lin C C K, Lin D H, Hwang I S, Chen S M. A rehabilitation robot with force-position hybrid fuzzy controller:hybrid fuzzy control of rehabilitation robot. IEEE Transactions on Neural Systems and Rehabilitation Engineering, 2005, 13(3):349-358 doi: 10.1109/TNSRE.2005.847354
    [7] 胡进, 侯增广, 陈翼雄, 张峰, 王卫群.下肢康复机器人及其交互控制方法.自动化学报, 2014, 40(11):2377-2390 http://www.aas.net.cn/CN/abstract/abstract18514.shtml

    Hu Jin, Hou Zeng-Guang, Chen Yi-Xiong, Zhang Feng, Wang Wei-Qun. Lower limb rehabilitation robots and interactive control methods. Acta Automatica Sinica, 2014, 40(11):2377-2390 http://www.aas.net.cn/CN/abstract/abstract18514.shtml
    [8] Ueda Y, Misu S, Sawa R, Nakatsu N, Sugimoto T, Sugiyama K, Takamori K, Ono K, Seki K, Handa Y, Ono R. Cycling wheelchair provides enjoyable pedaling exercises with increased physiological indexes. Tohoku Journal of Experimental Medicine, 2016, 238(1):33-38 doi: 10.1620/tjem.238.33
    [9] Restorative Therapies. RT300 leg[Online], available:http://www.restorative-therapies.com/rt300leg, July 24, 2014
    [10] RECK-Technical GmbH & Co KG. MOTOmed[Online], available:http://www.motomed.com/en/models.html, July 24, 2014
    [11] Best K L, Routhier F, Miller W C. A description of manual wheelchair skills training:current practices in Canadian rehabilitation centers. Disability and Rehabilitation:Assistive Technology, 2015, 10(5):393-400 doi: 10.3109/17483107.2014.907367
    [12] Toro M L, Garcia Y, Ojeda A M, Dausey D J, Pearlman J. Quantitative exploratory evaluation of the frequency, causes and consequences of rehabilitation wheelchair breakdowns delivered at a paediatric clinic in Mexico. Disability, CBR & Inclusive Development, 2012, 23(3):48-64
    [13] 金文宇.基于UG的康复轮椅设计与仿真分析.机械, 2013, 40(12):67-69 http://www.cnki.com.cn/Article/CJFDTOTAL-MECH201312018.htm

    Jin Wen-Yu. Design and simulation analysis of rehabilitation wheelchair based on UG. Machinery, 2013, 40(12):67-69 http://www.cnki.com.cn/Article/CJFDTOTAL-MECH201312018.htm
    [14] Kim K, Payne K, Oh S, Hori Y. One-handed propulsion control of power-assisted wheelchair with advanced turning mode. In:Proceedings of the 13th International Workshop on Advanced Motion Control (AMC). Yokohama, Japan:IEEE, 2014. 633-638
    [15] Watanabe T, Murakami T, Handa Y. Preliminary tests of a prototype FES control system for cycling wheelchair rehabilitation. In:Proceedings of the 2013 International Conference on Rehabilitation Robotics (ICORR). Seattle, WA, USA:IEEE, 2013. 1-6
    [16] Watanabe T, Karasawa Y, Handa Y. A test of controlling different muscles in FES cycling with cycling wheelchair "Profhand". In:Proceedings of the 19th International Functional Electrical Stimulation Society Annual Conference (IFESS). Kuala Lumpur, Malaysia:IEEE, 2014:1-4
    [17] Karasawa Y, Watanabe T, Handa Y. A basic study on analyzing acceleration of crank rotation for evaluation of FES cycling with cycling wheelchair. Transactions of Japanese Society for Medical and Biological Engineering, 2014, 52(S):O-27-O-28 https://www.researchgate.net/publication/289722606_A_basic_study_on_analyzing_acceleration_of_crank_rotation_for_evaluation_of_FES_cycling_with_cycling_wheelchair
    [18] Esquenazi A, Talaty M, Packel A, Saulino M. The ReWalk powered exoskeleton to restore ambulatory function to individuals with thoracic-level motor-complete spinal cord injury. American Journal of Physical Medicine & Rehabilitation, 2012, 91(11):911-921 https://www.researchgate.net/publication/232532271_The_ReWalk_Powered_Exoskeleton_to_Restore_Ambulatory_Function_to_Individuals_with_Thoracic-Level_Motor-Complete_Spinal_Cord_Injury
    [19] Zeilig G, Weingarden H, Zwecker M. Safety and tolerance of the ReWalk exoskeleton suit for ambulation by people with complete spinal cord injury:a pilot study. The Journal of Spinal Cord Medicine, 2012, 35(2):96-101 doi: 10.1179/2045772312Y.0000000003
    [20] Talaty M, Esquenazi A, Briceno J E. Differentiating ability in users of the ReWalk powered exoskeleton:an analysis of walking kinematics. In:Proceedings of the 2013 IEEE International Conference on Rehabilitation Robotics (ICORR). Seattle, WA, USA:IEEE, 2013. 1-5
    [21] Ueba T, Hamada O, Ogata T, Inoue T, Shiota E, Sankai Y. Feasibility and safety of acute phase rehabilitation after stroke using the hybrid assistive limb robot suit. Neurologia Medico-Chirurgica, 2013, 53(5):287-290 doi: 10.2176/nmc.53.287
    [22] Nilsson A, Vreede K S, Häglund V, Kawamoto H, Sankai Y, Borg J. Gait training early after stroke with a new exoskeleton-the hybrid assistive limb:a study of safety and feasibility. Journal of Neuroengineering and Rehabilitation, 2014, 11(1):1-11 doi: 10.1186/1743-0003-11-1
    [23] 佟丽娜, 侯增广, 彭亮, 王卫群, 陈翼雄, 谭民.基于多路sEMG时序分析的人体运动模式识别方法.自动化学报, 2014, 40(5):810-821 http://www.aas.net.cn/CN/abstract/abstract18349.shtml

    Tong Li-Na, Hou Zeng-Guang, Peng Liang, Wang Wei-Qun, Chen Yi-Xiong, Tan Min. Multi-channel sEMG time series analysis based human motion recognition method. Acta Automatica Sinica, 2014, 40(5):810-821 http://www.aas.net.cn/CN/abstract/abstract18349.shtml
    [24] 彭亮, 侯增广, 王卫群.康复机器人的同步主动交互控制与实现.自动化学报, 2015, 41(11):1837-1846 http://www.aas.net.cn/CN/abstract/abstract18759.shtml

    Peng Liang, Hou Zeng-Guang, Wang Wei-Qun. Synchronous active interaction control and its implementation for a rehabilitation robot. Acta Automatica Sinica, 2015, 41(11):1837-1846 http://www.aas.net.cn/CN/abstract/abstract18759.shtml
    [25] Wang H B, Shi X H, Liu H T, Li L, Hou Z G, Yu H N. Design, kinematics, simulation, and experiment for a lower-limb rehabilitation robot. Proceedings of the Institution of Mechanical Engineers, Part I:Journal of Systems and Control Engineering, 2011, 225(6):860-872 doi: 10.1177/0959651811408978
    [26] Yang C J, Niu B, Chen Y. Adaptive neuro-fuzzy control based development of a wearable exoskeleton leg for human walking power augmentation. In:Proceedings of the 2005 IEEE/ASME International Conference on Advanced Intelligent Mechatronics. Monterey, CA, USA:IEEE, 2005. 467-472
    [27] 姜洪源, 马长波, 陆念力, 敖宏瑞.功能性电刺激脚踏车训练系统建模及仿真分析.系统仿真学报, 2010, 22(10):2459-2463 http://www.cnki.com.cn/Article/CJFDTOTAL-XTFZ201010047.htm

    Jiang Hong-Yuan, Ma Chang-Bo, Lu Nian-Li, Ao Hong-Rui. Modeling and simulation on FES cycling training system. Journal of System Simulation, 2010, 22(10):2459-2463 http://www.cnki.com.cn/Article/CJFDTOTAL-XTFZ201010047.htm
    [28] 边辉, 赵铁石, 田行斌, 李丹, 潘旺.生物融合式康复机构及其应用.机器人, 2010, 32(4):470-477 doi: 10.3724/SP.J.1218.2010.00470

    Bian Hui, Zhao Tie-Shi, Tian Xing-Bin, Li Dan, Pan Wang. Rehabilitation facility with biological integration and application. Robot, 2010, 32(4):470-477 doi: 10.3724/SP.J.1218.2010.00470
    [29] Huang G, Ceccarelli M, Zhang W M, Liu H X, Tian Y, She H T, Fukuda T, Huang Q. A pedal-actuated wheelchair with a leg exoskeleton. In:Proceedings of the 14th IFToMM World Congress. Taipei, China:IFToMM, 2015. http://www.iftomm2015.tw/IFToMM2015CD/PDF/OS13-127.pdf
    [30] So R C H, Ng J K F, Ng G Y F. Muscle recruitment pattern in cycling:a review. Physical Therapy in Sport, 2005, 6(2):89-96 doi: 10.1016/j.ptsp.2005.02.004
    [31] Feland J B, Myrer J W, Schulthies S S, Fellingham G W, Measom G W. The effect of duration of stretching of the hamstring muscle group for increasing range of motion in people aged 65 years or older. Physical Therapy, 2001, 81(5):1110-1117
    [32] Ziegler R G, Hoover R N, Nomura A M Y, West D W, Wu A H, Pike M C, Lake A J, Horn-Ross P L, Kolonel L N, Siiteri P K, Fraumeni J F Jr. Relative weight, weight change, height, and breast cancer risk in Asian-American women. Journal of the National Cancer Institute, 1996, 88(10):650-660 doi: 10.1093/jnci/88.10.650
    [33] Hawkins D, Hull M L. A method for determining lower extremity muscle-tendon lengths during flexion/extension movements. Journal of Biomechanics, 1990, 23(5):487-494 doi: 10.1016/0021-9290(90)90304-L
  • 期刊类型引用(4)

    1. 郁钱,路金晓,柏基权,范洪辉. 基于深度学习的三维物体重建方法研究综述. 江苏理工学院学报. 2022(04): 31-41 . 百度学术
    2. 陈占军,林姚宇,龚咏喜,王耀武,顾照鹏. 古建筑视觉三维重建系统设计与实现. 计算机应用与软件. 2021(08): 17-22+32 . 百度学术
    3. 薛俊诗,易辉,吴止锾,陈向宁. 一种基于场景图分割的混合式多视图三维重建方法. 自动化学报. 2020(04): 782-795 . 本站查看
    4. 陈加,张玉麒,宋鹏,魏艳涛,王煜. 深度学习在基于单幅图像的物体三维重建中的应用. 自动化学报. 2019(04): 657-668 . 本站查看

    其他类型引用(4)

  • 加载中
  • 图(18) / 表(1)
    计量
    • 文章访问数:  2764
    • HTML全文浏览量:  713
    • PDF下载量:  1201
    • 被引次数: 8
    出版历程
    • 收稿日期:  2016-03-03
    • 录用日期:  2016-10-14
    • 刊出日期:  2016-12-01

    目录

    /

    返回文章
    返回