2.845

2023影响因子

(CJCR)

  • 中文核心
  • EI
  • 中国科技核心
  • Scopus
  • CSCD
  • 英国科学文摘

留言板

尊敬的读者、作者、审稿人, 关于本刊的投稿、审稿、编辑和出版的任何问题, 您可以本页添加留言。我们将尽快给您答复。谢谢您的支持!

姓名
邮箱
手机号码
标题
留言内容
验证码

重大装备制造多机器人任务分配与运动规划技术研究综述

张振国 毛建旭 谭浩然 王耀南 张雪波 江一鸣

张振国, 毛建旭, 谭浩然, 王耀南, 张雪波, 江一鸣. 重大装备制造多机器人任务分配与运动规划技术研究综述. 自动化学报, 2024, 50(1): 21−41 doi: 10.16383/j.aas.c220957
引用本文: 张振国, 毛建旭, 谭浩然, 王耀南, 张雪波, 江一鸣. 重大装备制造多机器人任务分配与运动规划技术研究综述. 自动化学报, 2024, 50(1): 21−41 doi: 10.16383/j.aas.c220957
Zhang Zhen-Guo, Mao Jian-Xu, Tan Hao-Ran, Wang Yao-Nan, Zhang Xue-Bo, Jiang Yi-Ming. A review of task allocation and motion planning for multi-robot in major equipment manufacturing. Acta Automatica Sinica, 2024, 50(1): 21−41 doi: 10.16383/j.aas.c220957
Citation: Zhang Zhen-Guo, Mao Jian-Xu, Tan Hao-Ran, Wang Yao-Nan, Zhang Xue-Bo, Jiang Yi-Ming. A review of task allocation and motion planning for multi-robot in major equipment manufacturing. Acta Automatica Sinica, 2024, 50(1): 21−41 doi: 10.16383/j.aas.c220957

重大装备制造多机器人任务分配与运动规划技术研究综述

doi: 10.16383/j.aas.c220957
基金项目: 国家自然科学基金 (62133005, 62293510, 62293513, 62103138, 62203161), 湖南省科技重大专项 (2021GK1010), 湖南省杰出青年科学基金(2023JJ10015), 湘江实验室重大项目(22xj01006), 湘江实验室一般项目(22xj03002)资助
详细信息
    作者简介:

    张振国:湖南大学电气与信息工程学院博士研究生. 2022年获得福州大学硕士学位. 主要研究方向为多机器人运动规划与协同控制. E-mail: zhangzhenguo@hnu.edu.cn

    毛建旭:湖南大学电气与信息工程学院教授. 主要研究方向为智能机器人系统, 机器人视觉与图像处理. E-mail: maojianxu@hnu.edu.cn

    谭浩然:湖南大学电气与信息工程学院副教授, 机器人视觉感知与控制技术国家工程研究中心研究员. 主要研究方向为机器人智能控制与网络化控制系统. 本文通信作者. E-mail: tanhaoran@hnu.edu.cn

    王耀南:中国工程院院士, 湖南大学电气与信息工程学院教授. 1995年获湖南大学博士学位. 主要研究方向为机器人学, 智能控制和图像处理. E-mail: yaonan@hnu.edu.cn

    张雪波:南开大学人工智能学院机器人与信息自动化研究所教授. 主要研究方向为智能机器人, 包括建图定位、运动规划、视觉伺服、人智协同. E-mail: zhangxuebo@nankai.edu.cn

    江一鸣:湖南大学机器人学院副教授, 机器人视觉感知与控制技术国家工程研究中心副研究员. 主要研究方向为多机器人协同控制及应用. E-mail: ymjiang@hnu.edu.cn

  • 中图分类号: Y

A Review of Task Allocation and Motion Planning for Multi-robot in Major Equipment Manufacturing

Funds: Supported by National Natural Science Foundation of China (62133005, 62293510, 62293513, 62103138, 62203161), Construction of Innovative Provinces in Hunan Province (2021GK1010), Natural Science Foundation of Hunan Province (2023JJ10015), Major Project of Xiangjiang Laboratory (22xj01006), and Open Project of Xiangjiang Laboratory (22xj03002)
More Information
    Author Bio:

    ZHANG Zhen-Guo Ph.D. candidate at the College of Electrical and Information Engineering, Hunan University. He received his master degree from Fuzhou University in 2022. His research interest covers multi-robot motion planning and cooperative control

    MAO Jian-Xu Professor at the College of Electrical and Information Engineering, Hunan University. His research interest covers intelligent robot system, machine vision and image processing

    TAN Hao-Ran Associate professor at the College of Electrical and Information Engineering, Hunan University, research fellow at the National Engineering Research Center of Robot Visual Perception and Control Technology. His research interest covers robot intelligent control and networked control systems. Corresponding author of this paper

    WANG Yao-Nan Academician at Chinese Academy of Engineering, professor at the College of Electrical and Information Engineering, Hunan University. He received his Ph.D. degree from Hunan University in 1995. His research interest covers robotics, intelligent control, and image processing

    ZHANG Xue-Bo Professor at the Institute of Robotics and Automatic Information System, College of Artificial Intelligence, Nankai University. His research interest covers intelligent robotics, including mapping and localization, motion planning, visual servoing and human-AI collaboration

    JIANG Yi-Ming Associate professor at the School of Robotics, Hunan University, associate research fellow at the National Engineering Research Center of Robot Visual Perception and Control Technology. His research interest covers multiple robots cooperative control and their application

  • 摘要: 飞机蒙皮、船舶舱体、高铁车身等大型复杂部件高效高品质制造是航空航天、海洋舰船、轨道交通等领域重大装备发展的根基. 大型复杂部件具有尺寸超大、型面复杂等特点, 传统的人工、单机制造面临着效率低、一致性差、空间有限等问题, 多机器人具有高鲁棒性、高效性等优点, 为大型复杂部件制造提供了良好的制造基础. 任务分配与运动规划是多机器人制造系统的决策中枢, 其性能影响整个系统的运行效率. 考虑到重大装备部件制造任务分配与运动规划过程中任务工序多、冲突干涉多、精度需求高等挑战, 本文首先对复杂环境下多机器人任务分配与运动规划的重要性进行了说明; 然后阐述了目前主要的任务分配与运动规划方法, 包括其在智能制造领域下的应用; 在此基础上, 对现阶段复杂场景下任务分配和运动规划存在的问题进行了分析, 并使用强化学习与混合优化算法等方法提出了解决思路; 最后对重大装备大型复杂部件制造过程多机器人任务分配和动态规划技术及应用的发展进行了总结与展望.
  • 飞机蒙皮、船舶舱体、高铁车身等大型复杂部件高效高品质制造是航空航天、海洋舰船、轨道交通等领域重大装备发展的根基, 是国家加快培育及发展的战略性新兴产业, 在引领国民经济发展、服务国家重大需求等过程中发挥着至关重要的作用[1].

    图1所示, 大型复杂部件具有尺寸超大、工序繁多、结构弱刚性、型面复杂等特点[2], 其制造面临规模大、任务多、精度高等难点. 近些年来, 大型复杂部件制造已经进入初步发展阶段, 现有大型复杂部件制造模式主要依赖大量人工、专机设备、多机器人产线. 人工加工存在一致性差、效率低下等问题, 单机加工存在柔性不足、空间有限等问题, 已经成为大型复杂部件制造中迫切需要解决的难点. 而由多个单体机器人组成的多机器人制造系统能够增加机器人作业的适应能力与柔顺程度, 因此被广泛应用于加工、装配等关键制造过程中.

    图 1  重大装备加工需求
    Fig. 1  Major equipment processing needs

    多机器人系统是机器人技术最广泛的研究领域之一, 相比于数控机床与单机器人, 多机器人系统具有高效、灵活、鲁棒性强、并行协调作业能力强等优点, 能够适应复杂的制造环境[3]:

    1) 高灵活性: 多机器人可以通过灵活协同作业解决复杂问题;

    2) 高效性: 通过多机器人协同完成任务以提高作业效率;

    3) 高鲁棒性: 当多个机器人完成一项任务, 其中一个机器人出现故障, 其他机器人仍然可以完成这项任务.

    这些优势吸引了许多学术界和工业界的研究人员来调查多机器人在工业和商业重要领域的适用性, 近年来多机器人系统一直出现在机器人领域的议程上. 2011年, 哈佛大学研究出了一种低成本、适合大规模实验的多机器人系统Kilobot, 并开展了多机器人组队实验[4]. Nature发文报导了一种自组织仿生多机器人, 具有更强的可扩展性和鲁棒性[5]. Science 杂志上发表了多机器人智能强化学习的研究, 可以在动态约束的环境下进行强化学习[6].

    但简单地把多个机器人堆砌在一起, 不但不能实现多机器人系统的优势, 反而有可能由于其行为上的并行性和突发性、位置上的冲突性等, 引起机器人之间的冲突与对抗, 使得整体性能降低, 导致大规模多机器人系统的整体优势无法充分发挥[7]. 因此需要研究多机器人在什么时刻、应采取什么动作、调用多少机器人去实现多机器人之间的协作合作, 即复杂环境下的多机器人任务分配与运动规划是决定多机器人良好合作基础的决策中枢.

    图2所示, 多机器人任务分配和运动规划以环境地图信息为基础, 为重大装备大型复杂部件制造提供任务序列及运动轨迹, 在制造过程中占据着重要的作用, 其与机器人数量、种类以及复杂的动态环境息息相关, 而分配和规划过程中的计算量以及效率、安全性都十分重要. 随着科技的发展, 多机器人任务分配与运动规划也逐步应用到各行各业. 在增材制造领域, Zhang等[8]建立可扩展多机器人三维打印任务分配和路径规划框架, 使机器人群能够在整个建筑任务中打印任意的几何图形. 在森林搜救领域, Foehn等[9]通过引入沿轨迹公式优化时间分配和轨迹规划, 完成飞行机器人群检测、搜索和救援等任务. 在人机交互领域, Ali等[10]提出了一种基于机器人−人体信任的异构人机团队任务分配方法, 以提高人机团队任务分配效率. 协同加工领域, Suárez-Ruiz等[11]使用Bi-RRT轨迹规划方法, 完成对椅子完整的组装. Li等[12]通过使用基于强化学习的运动规划策略, 完成机器人智能化烹饪任务.

    图 2  任务分配与运动规划在多机器人制造过程中的重要性
    Fig. 2  The importance of task allocation and motion planning in multi-robot manufacturing

    综上所述, 在大型制造场景下为提高多机器人制造效率, 通常对多任务多工序同时进行, 然而多机器人同时段完成多个任务带来严重的协同干涉问题, 同时大型复杂部件高的精度需求为目前亟待解决的难题之一. 因此面对大型复杂部件制造规模大、任务工序多、冲突干涉多、精度需求高等挑战, 如何使用适合的任务分配和动态规划方法, 以提高多机器人制造过程中的作业效率、安全性、鲁棒性是亟待解决的关键性问题. 因此本文在多机器人大型复杂部件制造的背景下, 首先对多机器人任务分配和动态规划方法的重要性进行分析, 然后阐述了近些年来任务分配和动态规划的方法, 其次对复杂作业场景下大型部件多机器人制造任务分配和运动规划进行了展望, 在此基础上给出了解决问题的新思路, 最后对所研究内容进行总结.

    图3所示, 多机器人任务分配过程可以表述为最优分配问题, 其目标是给机器人分配任务, 同时在约束条件下优化整体系统性能, 实现整体执行效果最佳, 多机器人任务分配是协同作业最具挑战性的问题之一[13]. 一方面, 任务分配会直接影响到整个系统的效率; 另一方面, 当其中一个机器人没有完成任务时, 通过有效的协商分配使多机器人协作完成任务成为更多学者关注的问题[14]. 尽管现有研究存在大量的任务分配方法, 但一些重要的方面至今仍很少受到关注, 主要包括复杂动态环境下的任务分配、大范围制造环境下区域划分任务分配、跨区域任务分配和异构机器人任务分配. 本节的主要目的是全面回顾任务分配问题, 以及解决这些问题的最新方法和未来的主要发展方向. 目前, 多机器人任务分配方法按照执行模式可以分为集中式任务分配和分布式任务分配, 按照方法分类包含基于线性规划的任务分配、基于市场的任务分配、基于启发式的任务分配及基于人工智能强化学习的任务分配等.

    图 3  多机器人任务分配问题
    Fig. 3  Task allocation problem of multi-robot
    1.1.1   集中式任务分配

    集中式方法是研究较多的一类方法, 主要思想是采用一个中央处理中心进行分配, 并与所有其他服务器有通信渠道. 如图4所示, 该处理中心掌握全局信息, 决定必须分配给其他服务器的任务. 在这些情况下, 通常会考虑全局效用函数来与其他服务器进行通信[15]. 如使用集中式任务分配方法进行多机器人汽车制造与装配工作[16]、多无人机环境检测任务[17], 降低任务交付与执行过程中的延时等[18].

    图 4  集中式任务分配系统
    Fig. 4  Centralized task allocation system

    集中式任务分配方法的优点是使用较少的系统资源并具有较低的实现成本, 同时避免了任务分配上的冲突, 不需要共识阶段, 也可以找到分配问题的最佳解决方案. 但是任务分配的计算复杂度会随着问题规模增大而呈现指数上升, 中央处理中心容易出现过载, 其次集中式任务分配不能适应动态环境, 主要用于静态任务分配, 缺乏鲁棒性, 一旦中央处理中心出现故障, 将导致整体性能恶化[19-20]. 常用的集中式任务分配方法包括线性规划方法、启发式方法、强化学习方法等.

    1.1.2   分布式任务分配

    分布式任务分配方法克服了集中式任务分配的缺点, 在过去几年引起了研究人员的关注. 如图5所示, 分布式任务分配没有中央处理中心, 各个机器人对环境有本地感知, 可以彼此相互交流和协商完成任务, 因此任务分配的决定在本地以分布式方式通过每个机器人本身的效用函数进行[21]. 如使用分布式任务分配方法降低多机器人的任务消耗、减小分配时间[22-23], 提高制造过程的可扩展性、有效性[24].

    图 5  分布式任务分配系统
    Fig. 5  Distributed task allocation system

    分布式任务分配方法具有强鲁棒性的优点, 部分机器人故障对整体性能的影响很小, 且机器人之间的通信弱, 多机器人呈现强可扩展性. 但是分布式任务分配缺乏全局信息, 容易陷入局部最优; 其次, 任务分配决策过程中需要个体之间不断交换信息, 当机器人规模较大时算法收敛速度较慢. 现有的分布式任务分配方法主要包括启发式方法、市场法等.

    1.2.1   基于线性规划的任务分配方法

    优化是应用数学的一个分支, 目的是从一组可行解中找到问题的最优解, 这组可行解受到约束的限制, 利用约束的限制定义问题的目标函数, 定量描述了系统的目标[25]. 基于优化算法提高了在处理有噪声输入数据时的适应性能, 在未知空间中探索新区域方面具有更高的潜力[26]. 基于优化的方法可以按照目标类别分为确定性优化和随机优化, 线性规划方法是确定性优化之一, 其思想是通过将实际的任务分配问题转化为求解数学模型的问题, 并利用线性规划技术进行求解. 近些年来混合整数线性规划(Mixed integer linear programming, MILP)由于其严谨性、灵活性和广泛的建模能力, 已成为分配问题最广泛的方法之一[27].

    基于MILP的分配方法最初应用于化学工程和运筹学中, Reklaitis等回顾了对于批处理操作的分配和规划, 重点关注任务分配的基本组成部分和可用的解决方法[28]. 在多机器人任务分配领域, Bererton等采用线性规划方法解决了多机器人协作探索中的任务分配问题[29]. Schumacher等为保证多机器人在有限时间内解的存在, 采用MILP开发了一种最优任务分配和定时方法, 可用于以最优方式将所有任务分配给具有涉及时间和任务顺序约束的耦合任务的飞行器组[30]. 为解决任务分配极大极小问题, 聂明泓等基于MILP模型, 提出一种矩阵算法, 并与穷举解及传统MILP解的计算复杂度进行了比较, 理论分析和数值试验表明矩阵作业法对极大极小和总体极小任务分配问题, 都能有效地提供最优解[31]. 为完成任务分配的周期时间最小化, Åblad等设计了一种时空负载均衡与协调方案, 使用MILP模型指导任务分配、序列和机器人运动(路径和速度)来防止机器人与机器人碰撞[32].

    尽管基于线性规划的任务分配方法可以获得全局最优解, 但由于多机器人数量和任务众多, 求解时间随着问题规模的增加呈指数增长, 导致计算量增大、实时性差, 在此情况下计算全局任务分配的最优解比较困难. 因此, 近几年来在多机制造领域常与其他方法一起使用. Spensieri等结合混合整数线性规划方法与基于市场广义旅行推销员问题方法, 解决汽车制造站多个工业机器人协作任务分配问题, 避免了多机器人任务冲突[16]. 针对外界威胁下的任务分配和操作顺序规划会降低性能和成功率问题, An等通过采用MILP和势场法结合, 提出了具有实时路径规划的任务分配方法, 同时设计了任务选择算法来补偿修改后的次优MILP问题[33]. 考虑多个无人机环境检测之间的任务分配问题, Hu等针对一组预定的地面目标执行攻击任务, 将原始问题分解为三个级别的子问题: 目标聚类、聚类分配和目标分配, 前两个子问题分别采用聚类算法和整数线性规划集中求解, 第三个子问题采用混合整数线性规划模型和改进蚁群算法, 以分布式和并行方式求解, 仿真实验证明所提出的分层方法可以大大降低任务分配问题的计算复杂度[17].

    图6所示, 基于MILP的方法具有很高的严谨性, 且可以获得全局最优解, 但尽管如此, 如何解决线性规划算法计算量大、计算时间长仍是具有挑战性的问题.

    图 6  基于线性规划的任务分配方法[16-17, 33]
    Fig. 6  Task allocation method based on linear programming[16-17, 33]
    1.2.2   基于启发式的任务分配方法

    启发式方法是随机优化算法的一种, 利用系统已有的经验启发选择, 保证空间搜索有效性, 加快了算法收敛速度, 可以快速找到近似最优解. 相比于线性规划而言, 启发式搜索方法更适合大规模动态的应用场景, 按照优化方法分为模拟退火算法、进化算法以及群体智能算法等.

    模拟退火算法是由Kirkpatrick等提出的一种通用概率演算法, 用来在一个大的搜寻空间内找寻命题的最优解[34]. Wang等采用多旅行商方法(Multiple travelling salesman problem, MTSP)优化系统模型, 在每个机器人搜索任务区域数量均衡的前提下建立目标函数, 并使用分布式模拟退火方法来解决大场景下多机器人系统的分配问题[35]. 针对异构分布式系统的任务分配问题, Attiya等提出了一种新型模拟退火启发式算法, 建立了一个成本函数的可靠性分配模型, 提高了系统可靠性[36]. 但是模拟退火法存在收敛速度慢, 执行时间长, 算法性能与初始值有关及参数敏感等缺点, 在降温时间设置过快的情况下, 无法确保得出全局最优解.

    群体智能算法是一种生物启发式算法, 在自然界中, 生物个体能从成群的行动中获益. 个体和集体行为模型表明, 相互作用可以呈现出群体形态, 组成了能够集体处理信息和提供决策的团体. 通过共享信息, 群体可以比个体做出更好的决定, 被称为“群体智慧”[37]. 群体智能算法是一种新兴的演化计算技术, 已引起越来越多研究者的关注, 它与人工生命特别是进化策略以及遗传算法有着极为特殊的联系. Li等考虑智能仓库系统任务分配问题, 通过最小化最大完成时间来降低机器人的总成本, 考虑聚合程度最小化所有订单的运输协同效应总和, 提出了改进的粒子群算法, 有效解决订单和任务的积压, 从而提高存储系统的效率[38]. Panerati等提出了一种蜂群启发式算法, 其中分布式机器人导航控制器负责保证连接性和对多个任务的追求, 全局任务分配控制器以最小的计算负载逼近最优策略, 解决多机器人多任务的空间覆盖问题[39]. 利用机器人在空间中移动时交互过程将任务分配给每个机器人, Mayya等基于蚁群算法建立一个分析模型来描述在密集的机器人群中发生的相遇, 允许多机器人根据当前分配与期望值的距离来调整任务之间的传递速度, 最终促进机器人不间断地执行任务[22]. 在车轮装配过程中, Geetha等为完成最佳公差分配, 通过最小化制造成本(公差和质量损失成本的总和)和机器闲置时间成本来分配组件公差, 并开发了一种遗传算法, 用于分配组件的公差并确定分配的最佳产品序列[40].

    图7所示, 启发式算法保证了空间搜索的有效性, 提升了算法的收敛速度, 可以快速找到任务分配的近似最优解. 然而, 启发式算法在面临复杂的搜索空间时, 无法保证搜索效率以及解的全局最优性. 同时, 群体智能方法利用个体之间的相互协作和信息分享求解优化问题, 具体阈值设置依赖具体任务, 通用性受到限制.

    图 7  基于启发式算法的任务分配[34, 40]
    Fig. 7  Task assignment based on heuristic algorithm[34, 40]
    1.2.3   基于市场的任务分配方法

    在经济理论中, 拍卖是由交易所的交易规则机制来定义、根据投标人的出价和拍卖标准分配一组商品或服务的过程. 基于拍卖的概念提出了一种协调机器人/代理之间活动的方法, 即基于市场的任务分配方法. 由于基于市场的分配方法满足目标函数的高效性、高鲁棒性和可扩展性, 在机器人领域获得了较大的关注. 机器人团体会根据自己的能力竞标任务, 寻求机器人效用优化的目标函数, 以执行特定的任务[41].

    为解决自动驾驶汽车的协调任务分配问题, Choi等利用基于市场的分布式决策策略作为任务选择的机制, 并使用本地通信的共识例程作为冲突解决机制, 使中标值达成一致. 在评分方案的合理假设下, 所设计方法被证明能够收敛到无冲突赋值, 与现有的基于拍卖的任务分配算法相比, 具有更好的收敛特性[42]. 考虑到机器人协作过程中能量消耗过快的因素, Wu等设计一种基于基尼系数的任务分配方法, 将市场分配机制融入到基于基尼系数的方法中, 可以根据应用环境减少同等任务完成次数时的资源消耗[43]. 针对通信范围受限的动态环境中多无人机的任务分配问题, Oh等提出了一种新型市场分布式任务分配方法, 所提算法具有多项式时间复杂度, 数值仿真结果表明在通信受限情况有效提高了算法的可扩展性和有效性[24]. 为保证飞机装配任务下有效使用协作机器人及无碰撞分配任务, Tereshchuk等利用工件几何形状和问题结构, 在标称条件下生成平衡且无冲突的机器人分配计划, 随后使用基于市场的优化器来分配处理任务故障, 以减小任务分配计算时间[23]. 为解决集装箱的协同搬运问题, Chen等基于轨道式堆场起重机和AGV分配一体化问题, 提出了市场驱动方法, 通过迭代调整每个子任务的原始成本和双重成本, 获得具有成本效益的解决方案[44].

    综上所述, 基于市场的任务分配方法具有良好的可靠性、可扩展性, 但在设计成本函数和收入函数时缺乏形式化. 此外, 谈判协议、成本函数及引入相关的惩罚方案可能会使任务分配方法设计复杂化, 从而导致过度的通信和计算, 产生较差的解决方案.

    1.2.4   基于学习的任务分配方法

    在大型复杂部件制造过程中机器人种类多样、任务繁琐, 难以预测机器人需要处理的未来干扰, 尤其当无法获取环境的数学模型时, 实际应用动态多变. 为了解决该问题, 机器人采用自身和其他机器人过去的信息, 学习面对这种干扰, 从而提高系统的鲁棒性[45]. 近些年, 随着以深度学习、强化学习为代表的人工智能技术在越来越多领域取得突破, 研究者尝试将人工智能方法引入至多机器人任务分配问题.

    强化学习是一种典型的机器学习技术, 中央处理中心利用过去的信息学习如何在不同的环境下行动. 外部环境通常被描述为马尔科夫决策过程(Markov decision processes, MDP), 被中央处理中心优化为成本函数或奖励函数, 从而让机器人在环境中进行学习. Wilson等将强化学习方法应用到多任务分配问题中, 使用分层贝叶斯无限混合模型对MDP的分布进行建模, 分层贝叶斯框架提供了强大的先验条件, 能够根据过去的环境快速推断新环境的特征, 同时使用非参数模型快速适应遇到的未知环境. 在仅观察少量任务时, 所提出方法可以显著加快收敛到最优任务分配策略的速度[46]. 为降低任务交付和执行阶段的延迟, Mai等提出了一种进化策略的强化学习方法, 在云服务器之间进行实时任务分配, 以减少长期内的总计算延迟, 实验结果表明所提出的方法将延迟降低了约16.1%[18]. 为了将任务安排给合适的机器人以实现不同的目标, Sun等首先通过深度学习模型门控循环单元预测即将到来的任务和机器人的种类、数量, 然后研究了基于深度Q网络 (Deep Q-network, DQN) 和双DQN (Double deep Q-networks, DDQN) 的自适应批处理策略, 以解决任务分配的环境适应和动态批处理问题[47]. 针对大规模、动态任务分配过程启发式方法计算困难问题, Wang等提出基于图神经网络的分配方法, 自动学习分配过程问题的特征, 克服大规模任务分配的局限性, 完成高质量任务分配[48]. Choudhury等考虑在时间窗口约束和任务完成不确定性下将任务动态分配给多个机器人, 提出了一种多机器人随机冲突深度学习分配算法, 提高了机器人数量的可扩展性, 并通过多臂传送带拾取和放置等任务验证了所提出方法的有效性[49].

    图8所示, 机器学习模型具有泛化性和高鲁棒性, 可以很好地适应高度动态的环境. 但奖励函数设计困难、采样效率堪忧等仍然是机器学习方法亟待解决的问题. 因此, 如何针对复杂作业场景多机器人任务分配设计高效的机器学习模型仍处在探索阶段.

    图 8  基于学习的任务分配方法[46-49]
    Fig. 8  Task allocation method based on learning[46-49]
    1.2.5   混合式任务分配算法

    通常情况下, 仅使用一种任务分配算法难以满足复杂制造场景下多机器人任务分配的需求, 因此需要两种或以上的方法进行结合使用. 利用线性规划算法高严谨性的优势, Spensieri等与市场法结合完成汽车制造问题[16], An等与势场法结合补偿陷入局部最优问题[33], Hu等与蚁群算法结合降低计算的复杂度[17].

    Zhou等考虑多机器人多工位协同点焊任务分配问题, 构建了一个通用优化模型, 以提高相关算法在实际应用中的适应性和可行性, 使用通过迭代梯形加速和减速运动的求解器来解决单机器人任务分配, 在此基础上采用针对机器人之间具有众多约束条件的焊接任务分配问题, 并结合遗传算法迭代求解多任务焊接问题[50]. Tereshchuk等考虑多个协作的机器人机械手来组装大型飞机结构需要离散的如钻孔和安装紧固件的任务, 减少工具更换产生的大量时间成本, 提出了一种混合式任务分配算法, 首先调整基于迭代拍卖的方法, 使用启发式方法对优先级关系进行编码, 其次开发一种机器学习方法, 根据问题特征自动选择有效的分配启发方法[51]. 考虑大型航天器复杂的内部结构问题, Liu等提出一个冲突模型来描述特定任务的冲突约束, 在每个工作区域中定义了干扰区域, 开发一种结合启发式与迭代本地搜索的快速施工启发式方法, 以最佳效率搜索任务进度[52]. Paiva等提出了一种使用图搜索算法、启发式方法和机器学习方法结合来解决作业排序和工具切换问题[53].

    图9所示, 混合式任务分配算法可以结合两种方法的优点, 完成更优的任务分配效果, 但是如何在不产生额外的损耗下体现两种方法的优势还需要更多的研究.

    图 9  基于混合算法的任务分配方法[50-53]
    Fig. 9  Task allocation method based on hybrid algorithm[50-53]

    大型复杂部件制造场景具有制造规模大、任务工序多、冲突干涉多等难点, 需要将复杂作业场景进行区域划分避免多任务之间的干涉冲突. 同时对每个区域内的任务与多机器人进行作业分配. 当所在区域需要其他区域协作时, 采用跨区域分配方法.

    1.3.1   作业场景区域划分方法

    为了防止复杂制造场景下多机器人及多任务之间的干涉冲突, 对作业区域进行划分, 以保证高鲁棒性的任务分配过程. 如图10所示, Fung等[54]为减少重复工作并减少每个机器人之间的干扰, 提出了一种信息速率自适应采样方法, 用于在环境中采集机器人任务与传感器测量值, 并根据探索区域所需的工作量划分为不同的子区域.

    图 10  不同数量机器人情况下区域划分[54]
    Fig. 10  Area division under different number of robots[54]

    Shi等[55]考虑了异构机器人群对环境特征采样和建模的影响, 提出了一种环境分区方法, 结合高斯过程模型学习框架, 以高效和可扩展的方式对环境进行自适应采样和区域划分建模, 在空地协同下验证了所提方法的有效性.

    1.3.2   基于复杂场景制造的任务分配方法

    针对复杂制造场景任务工序多的特点, 为了将多任务工序准确地分配给每一组机器人, 以提高系统的可靠性和效率, 完成多机器人高效高质量作业. 如图11所示, Lopes等[56]将焊接生产线任务分配问题建模成混合整数规划模型, 并使用求解器求解, 此方法简单精确、获得了任务分配的全局最优解.

    图 11  复杂作业场景下多机器人任务分配[56, 58]
    Fig. 11  Multi-robot task allocation in complex operation scenarios[56, 58]

    Mitiche等[57]提出了一种基于插入式的启发式算法, 解决了静态时间扩展多机器人的任务分配问题. Ham等[58]使用大邻域搜索算法解决了波音777飞机装配中的多机器人任务工作顺序分配问题. Huang等[59]采用基于Distributed-Q算法的强化学习模型, 解决了多机器人协同加工过程任务分配问题. Gil等[60]采用分层强化学习解决了大规模复杂环境下的多机器人任务分配问题.

    1.3.3   跨区域任务分配方法

    复杂场景下多机器人协同作业过程中, 当本区域机器人无法满足作业条件时, 采用跨区域任务分配策略.

    图12所示, Yu等[61]考虑多机器人分配在空间和时间上的复杂性问题, 基于新型染色体的编码格式, 提出了一种新型改进遗传算法, 不仅可以完成多异构无人机跨区域协调任务分配, 而且考虑任务需求, 将完成任务的机器人返回至适合的基地而不是必须返回至初始基地. Zhang等[62]基于改进贪婪算法, 提出了一种基于在线分配模型的跨区域任务分配方法, 并通过离线指导和在线分配策略来优化任务分配流程, 可以在同样时间内完成更多的任务以提高效率.

    图 12  多机器人跨区域任务分配[61-62]
    Fig. 12  Multi-robot cross-region task allocation[61-62]

    表1所示, 目前多机器人任务分配在制造领域得到了一定的研究进展, 在严谨性、鲁棒性、收敛速度等方面取得了研究成果, 但在模型设计复杂化、环境规模增大导致求解空间的复杂性、最优性等方面还有待提高. 对于复杂场景下多机器人制造任务分配还有一定程度的欠缺, 尤其是作业场景区域划分方法及跨区域任务分配方法, 还需要进一步的研究.

    表 1  任务分配方法分析
    Table 1  The analysis of task allocation
    使用方法执行模式优点缺点应用
    混合线性规划[2833]集中式高严谨性、可获得全局最优解随着问题规模复杂度呈指数增长时间最优问题
    模拟退火法[3436]分布式计算简单、鲁棒性高对初始值和参数过于敏感异构任务分配
    群体智能算法[3740]分布式加快收敛速度、快速找到近似最优解非常大的解空间时无法保证最优性提高空间覆盖率
    基于市场的方法[4144]分布式高鲁棒性、可扩展性和灵活性成本函数缺乏形式化、设计复杂化飞机装配任务
    基于学习的方法[4648]集中式高适应性、鲁棒性奖励函数设计困难、采样效率低未知环境分配
    线性规划+市场法[16]集中/分布高严谨性、提高速度成本函数设计复杂汽车制造
    市场法+启发式[51]分布式高鲁棒性、快速性无法保证全局最优焊接制造
    启发式+机器学习[53]集中/分布快速性、高适应性奖励函数设计复杂工具切换
    下载: 导出CSV 
    | 显示表格

    在多机器人大型复杂部件制造过程中, 需要不断通过中央处理中心将机器人从起始位置移动到目标位置, 在此过程中, 机器人必须始终能够避开障碍物与其他机器人, 以保持安全[63].

    运动规划是指根据任务给定的起始状态和目标状态机器人的运动方程, 建立满足特定约束条件的数学函数路径表达式, 约束条件主要包括运动学约束、动力学约束、路径约束、障碍约束或能量约束等. 运动规划包含路径规划和轨迹规划, 是机器人领域的研究热点之一[64]. 路径规划的目的是寻找连接起始状态和目标状态序列点的策略, 使寻找到的序列点与障碍物之间的距离尽可能远, 同时到达目的地的路径尽可能短. 轨迹规划是在路径规划的基础上加入时间信息, 使用时间二次积分多项式形式表示, 通过对时间求一阶与二阶导数获取机器人从初始状态到目标状态的速度与加速度, 使机器人的运动曲线尽可能平滑、运动时间尽可能短、运动代价尽可能小. 当路径规划满足机器人时间约束条件时, 路径规划即为轨迹规划[65].

    现有的研究在水下机器人[66-67]、爬壁机器人[68]及微型飞行器[69-70]等方面进行了运动规划方法设计和验证, 同时也采用不同的方法进行呈现, 对机器人运动规划发展做出了很大的贡献. 但是, 上述研究仅对不同种类的单机器人进行路径规划分析. 如图13所示, 大型复杂部件制造存在场景大、任务多、作业空间受限等特点, 运动规划在多机器人领域仍然具有较大的挑战, 每个新机器人的增加引起的搜索空间指数增长为亟待解决的问题之一. 目前, 多机器人运动规划方法主要分为基于搜索的运动规划、基于势场的运动规划、基于采样的运动规划及基于人工智能的运动规划方法.

    图 13  复杂场景下多机器人运动规划
    Fig. 13  Motion planning of multi-robot in complex scenarios
    2.1.1   基于搜索的规划算法

    基于搜索的运动规划方法具有良好的稳定性和精确性, 是目前较为成熟且在移动机器人、游戏领域中广泛应用的一类运动规划方法. 广度优先搜索算法、Dijkstra算法、A* 算法、D* 算法(Dynamic A*)及冲突搜索算法等都是基于搜索法的优秀代表.

    广度优先搜索[71]能够求得运动规划问题的最优解, 该算法采用以起始状态为中心, 逐步向外层层探索的策略, 算法耗费大量时间在探索无用区域, 寻路效率较低. 1995年计算机学家Ng等提出的Dijkstra算法[72]是一种广度优先搜索与启发式搜索相结合的贪心算法, 首先计算出从初始位置到环境中每个位置的最短距离, 然后将距离初始位置最近的点作为中继点, 其次更新从初始位置到各个位置的最短距离, 而后重复上述步骤直至遍历环境中所有位置为中继点, Dijkstra算法能获得从初始位置到环境中任意位置的最短距离. 但Dijkstra算法保留了广度优先搜索需要通过大量计算才能寻得可行解的问题, 效率较低. Hart等提出的A* 算法[73]是一种基于Dijkstra算法改进优先级排序的启发式算法, 算法将节点权重与到达目标点的距离二者结合作为优先级的排序规则, 使得算法只需访问较少的节点就能求得运动规划问题的最优解. 针对Dijkstra算法及A* 算法仅适于环境已知的场景, Stentz提出的D* 算法[74]可以适用于未知或动态变化的环境. D* 算法与A* 算法相反, 从目标位置开始进行搜索, 直至搜索到机器人初始位置为止. D* 算法的核心是计算最优路径的过程状态函数与应对环境信息变化的代价修正函数. 当计算的可行路径出现新障碍物时, D* 算法仅需处理其附近的节点并将产生的影响向机器人所在位置传播, 从而减少重规划的计算量. 基于D* 算法, Koenig等提出的D* Lite算法提升了运动规划的寻路效率[75-76], Ferguson等提出的Field D* 算法能够不受搜索方向的限制, 使规划路径更加平滑[77].

    近些年来, 基于搜索的运动规划方法在多机器人作业过程中也得到了一定程度的发展, Ali等使用A* 算法引入中央处理中心检查全局路径规划器生成的所有路径以避免碰撞, 中央处理中心分析每个机器人的路径数据及对其他机器人轨迹的影响, 得出全局轨迹. 当机器人开始向目的地移动时, 中央处理中心会实时检查其轨迹是否与其他机器人冲突, 从而达到多机协同避障的目的[78]. 为了得到多机器人的高质量无碰撞路径, 陈光友等提出一种基于改进A* 算法和冲突协调策略的多机器人双层规划算法, 在二维路径基础上引入时间维度, 建立机器人路径时间图, 预测机器人时间维度的冲突. 通过冲突协调策略对机器人与机器人之间、机器人与动态障碍物之间产生的冲突进行协调[79]. Ren等提出了一种基于多目标路径的D* 算法 (Multi-objective path-based D* lite, MOPBD*), 利用基于路径的扩展策略计算主导解, 并引入了MOPBD* 的次优变体, 提高了动态环境下的搜索效率[80]. 为解决多机器人运动规划过程中的冲突碰撞及A* 算法寻路效率低的问题, Sharon等提出了一种基于冲突的搜索算法(Conflict based search, CBS), 是一种两级算法, 其中在高层对基于个体之间的冲突树执行搜索, 冲突树中每一个节点代表了一组运动过程的约束, 在低层执行快速的单机搜索以满足高层冲突树节点施加的约束. 通过两级算法可以使CBS算法比A* 算法具有更少的计算量, 同时保持最优性[81]. 但是其对节点判断是否发生冲突时, 节点的分裂和重新规划耗费大量时间, Zhang等提出了一种基于冲突的并行搜索算法, 设计了与人脑、眼、腿对应的全局路径规划、传感器级路径规划和动作级路径规划, 加快节点的展开速度[82]. 为完成顺序装配操作的多机器人抓取规划, Dogar等使用冲突搜索算法, 将搜索表述为约束满足问题(Constraint satisfaction problem, CSP), 将CSP划分为独立的较小问题以指数级的速度进行解决[83].

    图14所示, 基于搜索的运动规划方法的寻路效率依赖于环境地图网格的划分, 但网格越多算法所需访问的节点越多, 算法寻路效率越低. 基于搜索的运动规划方法的计算复杂度与运动规划问题所在空间维度呈指数相关, 因此, 该类方法仅适用于低维空间的运动规划问题.

    图 14  基于搜索的运动规划[78-82]
    Fig. 14  Search-based motion planning[78-82]
    2.1.2   基于势场的规划算法

    基于势场的运动规划方法通过构建势函数引导算法搜索可行路径, 无需对环境信息进行精确探索. 最早基于势场的规划算法可以追溯到1985年Khatib提出的人工势场法, 机器人在空间环境中的运动受到虚拟人工力场的作用, 目标位置对机器人产生引力作用, 障碍物对机器人产生斥力作用, 在引力和斥力的共同作用下通过算法控制机器人的运动从而到达目标位置.

    Liu等提出一种与虚拟障碍物概念相结合[84]的势场法, 该算法通过计算中途点作为临时目标点, 以克服传统人工势场法容易陷入局部最优的问题. 石鸿雁等将混沌优化算法与人工势场法相结合, 提出混沌人工势场法, 使机器人在动态环境中实时避障的同时不陷入局部最优解, 在距离较近但不相连的障碍物之间找到可行路径[85]. Scott等提出一种新型势函数形式[86], 此势函数包括用于避免关节限制的弹性势、引导机械臂远离障碍物的排斥势及防止机械臂陷入奇异状态的位形势, 三个分量联合建立机械臂避障的势函数, 在此基础上将相机视线遮挡部分视为虚拟障碍物, 有效降低了机械臂在动态环境中因相机遮挡而导致的碰撞问题. Lee等提出了一种NP-APF (New point-artificial potential field)运动规划算法[87], 在机器人遇到障碍物时该算法首先选取一个合适的位置生成对机器人的吸引力, 然后根据选取的位置优化机器人所受合力的大小和方向, 帮助机器人快速摆脱障碍物的约束, 提高传统人工势场算法的规划能力. 韩伟等提出一种与模糊决策相结合的人工势场法, 可以自适应调整机器人在虚拟人工势场中所受到的合力大小和方向[88]. Mamani等将势场法应用在多移动差速式机器人中, 提出了编队控制要求清单, 在此基础上建立了基于势场法的多机器人编队控制模型[89]. 为完成从初始位置到目标点的最佳路径规划, Pan等提出了一种改进人工势函数的多机器人路径规划方法, 通过引入旋转势场, 可以使机器人有效逃离公共最小值和振荡[90]. Matoui等使用改进人工势场方法, 使用非最小速度算法处理最小局部问题, 并且通过机器人之间的优先级分配方法, 解决了机器人在同一点通过的交叉问题. 其次使用邻域检测技术来减少每个机器人的影响区域并优化规划计算时间[91]. Wu等引入增益约束和随机因子来改进人工势场法, 抑制路径振荡同时避免局部最小值, 并采用B样条曲线优化对规划路径进行平滑处理[92].

    图15所示, 人工势场法仅需计算机器人受到的合力大小和方向, 减少了运动规划问题求解过程中产生的计算量. 但该方法容易陷入局部最优解及无法找到可行解, 且基于势场的运动规划方法仍面临着最优性与高维空间可拓展性之间的矛盾, 仅适用于简单二维平面环境中的运动规划问题.

    图 15  基于人工势场法的运动规划[88, 91]
    Fig. 15  Motion planning based on artificial potential field[88, 91]
    2.1.3   基于采样的规划算法

    基于采样的运动规划方法因其在多维空间中具有的显著优势在运动规划领域得到了广泛的关注[93], 目前基于采样的运动规划方法主要分为基于随机搜索 (Probabilistic road maps, PRM) 算法的改进型和基于快速探索随机树 (Rapidly-exploring random trees, RRT) 算法的改进型等.

    1996年Kavraki等提出的PRM算法[94]被认为是当时最成功的解决高维空间复杂运动规划问题的方法, 该算法的复杂度首先与寻找可行路径的难易有关, 其次是空间大小和维度的影响. PRM算法分为采样和查询两个步骤, 采样过程通过在自由环境中进行随机均匀采样, 为每个采样点搜索邻居节点, 在此基础上建立无碰撞连接概率路线图, 查询过程通过使用搜索算法从路线图中找到一条可行路径. 1998年LaValle等提出的RRT算法是一种树状结构的随机采样方法[95], 该算法以运动规划问题的起始位置作为根节点, 通过随机采样增加节点分支, 在自由环境中生成随机搜索树, 当随机搜索树分支拓展至目标位置即可获得从起始位置到目标位置的运动路径. 基于RRT算法, 王乐乐等提出一种改进快速扩展随机树的多机器人编队路径规划算法, 用于解决多机器人在复杂环境下的编队路径规划问题. 同时定义机器人之间的领航−跟随结构, 建立搜索树扩展方向与队形方向之间的联系解决规划过程中编队朝向变化问题[96]. 针对RRT算法搜索区域受限、耗时较长、结果可行性较差等问题, 陈锦涛等提出了一种RRT森林算法, 通过随机选取根节点、生成随机树、连接合并随机树, 使高层消防多无人机在复杂室内环境下协同路径规划效率显著提高. 此外, 采用两次动态规划以及改进障碍物接近检测方法, 进一步提高路径的可行性[97]. RRT算法倾向于未探索区域扩张, 随着搜索迭代次数增加, 未探索区域减少, 可以得出RRT算法探索空间能力强、速度快. 该算法概率完备且不最优, 可以迅速找到可行路径. 但所寻找路径通常不是最优路径且包含较多的棱角.

    针对RRT算法所规划路径不是最优可行路径的问题, 2011年Karaman等在RRT算法基础上加入了重新布线函数和代价函数, 提出了一种RRT* 算法[98]. 该算法改进了RRT算法父节点选择方式, 在最小代价函数值下选择每一个节点, 因此当采样节点趋于无穷多时, RRT* 算法计算的可行路径必定收敛至最优路径. 针对水下机器人海洋调查问题, Cui等提出了一种多维RRT* 路径规划方法, 通过最大化标量场模型和观测值之间的信息来确定水下机器人的采样位置, 以提高采取样本的质量[99]. 但是, RRT算法与RRT* 算法都存在碰撞检测计算的代价昂贵问题, 将大量的计算时间都花费在了碰撞检测中[100-101], 特别是在复杂且障碍物较多的环境中, 算法效率大幅降低.

    Janson等提出的FMT* 算法(Fast marching tree*)[102]结合了PRM算法和RRT算法的优点, 用于解决高维空间中的复杂运动规划问题. 该算法在结构上减少了大量重复的碰撞检测, 同时也减少了求解节点过程中需要调整参数的数量, FMT* 算法提高了多机器人收敛到最优路径的速度, 同时减少了计算量. 为了提高效率和可扩展性, Le等基于RRT算法提出了一种协调扩展搜索树方法, 首先开发了一种单机器人采样方法跟踪给定路线, 然后设计路径跟随器确保每一个机器人跟随给定路线同时避免与其他机器人相撞, 且所提出方法可以解决机器人增加带来的高位复合状态空间问题, 具有良好的可扩展性[103]. 基于连续的多机器人采样运动规划过程, Dayan等通过张量积将多个机器人PRM图构建为张量路线图, 以支持在有限时间内保证高质量的解[104].

    图16所示, 近年来PRM算法和RRT算法的改进型不断被提出, 在机器人运动规划领域表现良好, 同时具备避障性、概率完备性等理论支撑. 但调节算法运行时间与算法最优性之间的矛盾、探索盲目性问题是基于采样的规划算法需要解决的问题.

    图 16  基于采样的运动规划[96, 99, 102]
    Fig. 16  Motion planning based on sampling[96, 99, 102]
    2.1.4   基于人工智能的规划算法

    随着人工智能技术的发展, 人工智能算法被逐渐应用于多机器人运动规划问题中[105-106]. 常见的人工智能运动规划方法有遗传算法、蚁群算法、粒子群算法、人工神经网络算法、机器学习算法等.

    1975年Bhaduri提出的遗传算法(Genetic algorithm, GA)[107]是一种模拟大自然生物进化过程的最优解搜索算法. 该算法在运动规划问题中通过将可行路径视为个体, 每个种群包含的可行路径条数为个体数量, 每条可行路径的路径点个数为个体中染色体的数量. 在迭代演化的过程中, 借助遗传算子进行选择、基因交叉、基因突变等操作, 适应度低的种群被淘汰, 适应度高的种群被保留, “优胜劣汰”的竞争使得最终保留下来的路径为算法寻得的最佳可行路径. Nazarahari等提出了一种增强遗传算法 (Enhanced genetic algorithm, EGA) 来改善连续空间中的初始路径, 基于省时的确定性方案寻找可行的初始路径, 并保证找到一个可行的路径(如果存在), 同时EGA算法利用五个定制的交叉和突变运算符来改善初始路径[108]. 但遗传算法具有较高的随机性, 每次调用的运行结果都不尽相同, 甚至存在不收敛的可能.

    1992年Dorigo等提出的蚁群算法(Ant colony algorithm, ACA)[109]是一种采用正反馈机制, 模拟蚂蚁寻找食物时根据同伴分泌的信息素逐渐发现最短路径的仿生概率算法, 其在搜索过程中不断收敛直至逼近最优可行路径[110]. Hasan等将蚁群算法与D* 算法结合, 考虑在自由空间中的动态障碍物, 构建概率函数选择每个机器人的最佳路径达到动态避障[111].

    1995年Kennedy提出的粒子群优化算法[112] (Particle swarm optimization, PSO)是一种模拟鸟类捕食的优化算法. 该算法通过鸟类个体间的信息共享与相互协作, 引领着群体演化至最优可行解, 粒子群优化算法提高了复杂环境下最优解的发现率. Wang等提出了一种由连续粒子群算法和离散粒子群算法组成的混合粒子群算法, 连续粒子群算法优化期望编队的中心位置和旋转角度, 离散粒子群算法用于优化初始位置和目标位置之间的匹配关系[113]. 针对未知环境下的多机器人目标搜索问题, Dadgar等提出一种基于粒子群优化的分布式算法, 避免陷入局部最优[114].

    人工神经网络在多机器人运动规划中, 通过搭建、训练神经网络系统以逼近问题中的可行运动路径, 并依照环境约束与机器人约束的变化不断优化所寻的运动路径[115-116].

    2017年Pfeiffer等提出了一种基于监督学习的运动规划方法, 根据激光测距结果建立相对目标位置的卷积神经网络(Convolutional neural networks, CNN)模型[117], 但监督学习的框架依赖于标记的算法, 对环境变化的泛化能力弱. 强化学习通过代价迭代方式建立表格, 用于存储状态到动作过程的映射, 根据表格信息引导多机器人运动到目标位置. 面对碰撞避免和输入约束影响的在线多机器人时间最优路径规划问题, He等将人工势场纳入近似成本函数中, 提出了一种积分强化学习方法, 将具有输入约束的有限视界最小时间能量问题转换为近似无限视界最优控制问题[118]. 但在障碍物信息变化的环境中需生成大量表格, 耗费内存空间. Tai等将深度强化学习应用于运动规划问题中, 只需指定运动规划的目标, 使其在仿真规划场景中大量尝试, 不断进行学习, 根据获得的奖励及惩罚自主迭代更新网络, 从而求解出较好的可行路径[119]. 针对传统方法难以将其他移动机器人识别为障碍物或协作机器人的问题, Bae等结合了CNN网络和深度强化学习算法, 其中CNN网络使用环境的图像信息分析确切的情况, 同时机器人根据通过深度强化学习分析的情况进行规划[120]. 为解决钣金钻孔过程运动规划问题, Veeramani等将最优路径识别问题建模为一个马尔可夫决策问题, 选择了一种无模型的状态−动作−奖励−状态−动作策略时间差规划算法, 并基于路径规划问题的参数进行了描述[121].

    图17所示, 基于人工智能的运动规划方法通常可以寻得运动规划问题中的较优解, 但求解过程需花费较多时间, 效率较低.

    图 17  基于人工智能的运动规划[108, 114, 120]
    Fig. 17  Artificial intelligence-based motion planning[108, 114, 120]
    2.1.5   基于混合算法的运动规划

    有效地结合两种或以上规划算法, 可以很大程度上提高计算效率. 如图18所示, 为完成多机器人点焊任务, Pellegrinelli等结合冲突搜索算法与市场法, 为每个机器人设计无碰撞运动路径减少设计时间和设计失误[122]. Hartmann等将优化方法与基于采样的双向时空路径规划器相结合, 共同求解操纵约束, 使其能够规划到达时间未知的协作式多机器人操作[123]. 为解决柔性物体协同搬运问题, Alonso-Mora提出了一种混合集中/分布式方法, 针对机械手设计低层规划器, 通过物体相互传递力来保持操纵和避免碰撞的保证, 基于分布式反演水平规划器设计局部控制算法, 并包含避免碰撞和形状维护的约束[124]. 为完成汽车生产过程中的去毛刺、切割和焊接等任务, Touzani等首先使用市场法对任务进行排序, 然后使用PRM算法完成自动路径规化[125]. Han等结合路径多样化和最优子问题策略, 提出了一种新的集中解耦算法, 解决仓库环境的一次性和动态最优多机器人路径规划问题[126]. 为完成大规模自由曲面产品的光学检测问题, Liu等通过机器人坐标空间动态搜索, 考虑冲突机器人中探头姿态或局部路径的扰动, 提出无碰撞路径规划和协调运动规划[127]. Rigatos采用分布式梯度算法和群体智能算法, 解决多机器人协作自主装配问题, 从解空间中的不同点开始, 并在向目标位置移动时相互交互, 可以在每个机器人的最佳先前移动和其邻居的最佳先前移动定义的区域中迭代搜索[128]. 为完成自动化仓库设置, Han等结合路径多样化和最优子问题解决方案数据库, 有效地利用整个工作空间进行机器人旅行, 而最佳子问题解决方案数据库有助于快速解决局部路径冲突[129].

    面向复杂作业环境下多机器人协同加工过程, 按照机器人结构及作业环境的不同, 主要分为移动端运动规划、作业端(末端执行器作业)运动规划.

    2.2.1   多机器人移动端运动规划

    复杂环境下高效的全局路径规划及动态冲突下局部路径重规划是多机器人移动端安全、稳定运动的前提. Li等[130]首先利用增强冲突的搜索算法获得每个机器人的离散路径, 根据离散路径构建针对静态障碍物的安全廊道作为安全性硬约束, 然后构造涉及轨迹平滑性和多机间安全性的目标函数, 利用模型预测算法进行优化求解获得全局可行轨迹. Wagner等[131]以A* 算法作为底层路径规划器为每个机器人单独规划最优路径, 同时为每个节点维护碰撞集合和反向传播集合, 大大减少了A* 算法扩展过程的节点数. 为应对机器人数量较多时, 会出现由于过度避障导致的机器人抖动问题, Van等[132]提出交互速度障碍算法为多机器人提供统一的决策行为, 虽然解决了多机器人相遇时的抖动问题, 但是多机器人规模增大时仍然无法避免碰撞, 可扩展性低. 为改进这一缺点, Van等[133]提出最佳相互避碰方法, 利用有向平面分割空间将避碰问题转换为线性规划问题, 提高了计算效率, 并能够对其他机器人的运动进行精准的感知、相互协作产生无碰撞的运动. Tordesillas等[134]利用最小体积法构建当前机器人控制点的最小凸多面体, 并且对动态障碍物或者其他机器人同样建立凸多面体, 进而创建一个平面对两种凸多面体进行分离, 通过将此平面作为安全性硬约束, 建立目标函数进行求解, 获得无碰撞的轨迹.

    图19所示, Zhou等[135]提出多目标时空轨迹联合优化方法, 构建与时间以及轨迹平滑性相关的多目标优化函数, 在满足动力学约束下求解获取实时轨迹.

    图 19  多机器人移动端运动规划[135]
    Fig. 19  Motion planning of multi-robot mobile terminals[135]
    2.2.2   多机器人作业端运动规划

    多机器人作业端无干涉协同运动是实现多机器人系统安全制造的前提. 如图20所示, 面向制造的机器人系统通常由移动端与作业端执行器组成, 作业端高自由度、规划空间高维以及作业空间受限等对实现实时安全无干涉协同运动规划提出了挑战. Thakar等[136]考虑到移动机械臂单元的高非线性、紧耦合性等问题, 将其定义为非完整移动机械臂(Nonholonomic mobile manipulator, NMM), 首先根据机器人周围环境的信息, 对机械手和目标点的样品进行协调聚焦, 其次考虑到NMM的非全息约束, 在两个搜索树之间建立连接的启发式方法, 从而提高路径的计算速度和成功率. Tallamraju等[137]提出了一种分层自适应移动机械臂规划器, 对移动单元与作业单元进行单独规划, 并以概率地图法规划框架基础上通过增加自适应采样策略, 提高规划效率. Pardi等[138]考虑到移动作业机器人系统的非完整约束与运动学约束, 将约束受限下的路径规划表述为多目标优化问题, 将由作业单元末端执行器表面移动距离、可操作性以及移动单元运行速度构成的代价函数嵌入到RRT* 算法中实现任务空间下的路径规划. 基于多机器人作业端协同搬运运动规划, Tang等[139]将多机器人协同运输系统视作环境中的一个虚拟矩形, 提出了一种基于系统轮廓矩形变化的避障规划方法, 通过改变虚拟对象的移动方向和矩形宽度来适应环境变化. 面对存在未知轨迹障碍物环境下对移动机械臂运动规划问题, Vannoy等[140]提出了一种可扩展的实时自适应运动规划方法, 可实现实时同步的路径和轨迹规划, 同时通过机器人配置变量的松散耦合, 利用移动机械臂的冗余, 实现避障和优化目标. Bonilla等[141]提出了一种多机器人作业端在与环境以及自身内部进行位置/力交互时的运动规划与控制集成方法. 该方法设计了一个非交互式的控制器实现多机器人的解耦控制, 通过放松几何约束, 采用一个狭窄的全维边界层代替低维约束流形来解决受约束的运动规划问题.

    图 18  基于混合算法的运动规划[122-129]
    Fig. 18  Motion planning based on hybrid algorithm[122-129]
    图 20  非完整和任务约束下作业端路径规划[136-138]
    Fig. 20  Path planning for operators under non-integrity and task constraints[136-138]

    表2所示, 目前多机器人运动规划在制造领域得到了一定的研究进展, 算法的最优性、鲁棒性及避碰、避障能力有了显著的提升. 但在复杂环境下、狭小空间下的解空间计算复杂性、寻路效率还有待提高, 对目标函数、人工智能算法的奖励函数设计还需要进一步的研究.

    表 2  运动规划方法分析
    Table 2  The analysis of motion planning
    使用方法全局/局部优点缺点应用
    广度优先搜索[71]全局可以获得问题的最优解浪费大量的时间探索无用区域游戏领域
    A* 算法[73, 7879]全局减少节点, 可获得最优解仅针对环境已知的静态场景协同避障
    D* 算法[74, 80]全局可适应环境信息的变化寻路效率低、仅适用于低维空间动态环境
    CBS算法[8183]全局提高搜索速度, 保持最优依赖地图网格的划分冲突预测
    人工势场法[8491]局部高鲁棒性、目标路径安全平稳容易陷入局部最优仅适用于二维平面协同避障
    RRT算法[9596]局部位置环境探索能力强规划路径可能非最优解编队规划
    RRT* 算法[98101]局部可以达到最优路径增加碰撞检测计算节点动态环境避障
    FMT* 算法[102]局部适用于高位复杂环境容易产生冗余扩展导致性能较低高维复杂环境
    群体智能算法[107114]全局可扩展性、灵活性高随机性、可能不收敛未知环境搜索
    人工神经网络[115120]全局高适应性、可达到全局最优奖励函数设计困难、计算效率低复杂未知环境
    冲突搜索 + 市场法[122]全局/局部减少计算时间、设计失误成本函数设计复杂多机点焊
    分布式梯度 + 群体智能[128]全局/局部高灵活性、最优性寻路效率低自主装配
    下载: 导出CSV 
    | 显示表格

    随着重大装备大型复杂部件制造的不断发展, 多机器人系统的应用和研究为制造过程的效率和精度提供了重要的保障. 但是针对复杂作业环境下多任务、多工序的作业需求, 多机器人缺乏可扩展性、任务协调性. 集群机器人具有高柔性、智能化、可扩展性、灵活性等优势, 为大型复杂部件制造提供了新思路. 在过去的一些算法研究中, 集群机器人任务分配与运动规划已有部分进展. Yang等基于蚁群算法与响应阈值模型, 完成集群机器人任务分配, 体现分布式算法的可扩展性[142]. Ghassemi等考虑任务截止日期与机器人范围和任务完成能力限制, 并允许在动态任务空间下进行异步决策, 为不同的实际应用(例如灾难响应) 提供重要的解决方案[143]. Vicmudo等基于遗传算法为每个机器人生成最短路径, 使其到达目标点而集群机器人之间不会相互碰撞, 通过仿真验证安全无碰撞路径的有效性[144]. Chella等改进蚁群算法, 为集群机器人提出了一种基于量子的路径规划算法, 量化输入位置和奖励信息 (以机器人与目标的接近程度来衡量) 和路径规划决策[145]. 但上述方法仅仅在仿真环境下验证, 且使用局域网进行算法设计很大程度上限制了集群机器人工作空间, 同时通信过程中产生的时延、噪声以及网络波动影响了分配和规划的效率与准确性. 因此复杂环境制造场景, 如何将多机器人任务分配与运动规划算法应用在集群机器人中, 体现可扩展性, 在此基础上向网络化、智能化延伸, 即云−边−端网络协同下的集群机器人任务分配与运动规划, 为亟待解决的难题. 尽管目前已有许多研究学者对集群机器人进行了探索, 结合表1表2的分析, 在大型复杂部件作业场景中仍然存在一部分问题亟待解决:

    1) 制造环境的复杂性: 在大型复杂部件制造领域, 部件具有尺寸大、刚度低、制造精度高、结构复杂等特点, 生产环境往往复杂多变, 从而引起集群机器人全局任务分配与运动规划困难. 现有的方法在复杂场景下寻路效率低、随机性高、成本函数设计复杂, 因此探索大规模复杂环境下任务分配和运动规划方法是未来的研究方向之一.

    2) 难以兼顾全局和局部: 复杂制造环境下仅采用某一种算法难以兼顾全局最优性, 若采用局部规划分配算法将极大增加任务的复杂性. 而两种及以上的方法有效地结合可以满足全局和局部的优势, 因此在采用全局方法进行任务分配规划的基础上结合局部规划方法对部分复杂场景进行实时动态规划是未来研究方向之一.

    3) 通信约束强: 网络化集群机器人制造过程中容易出现通信的不确定性, 而当前的部分方法如启发式算法、A* 算法等对通信准确程度具有较强的依赖性, 且深度学习算法需要通过云服务器进行大量的数据计算. 因此需要对动态任务分配规划技术进行改进, 以实现在部分时间段弱通信或通信受限场景下的鲁棒性.

    4) 冲突干涉问题: 复杂动态环境下集群机器人与动态障碍物以及集群机器人之间的相互移动都会影响全局运动规划过程, 容易引起冲突干涉, 因此亟待寻求解决高动态环境下冲突预测与动态避障方法.

    5) 受限空间问题: 复杂场景下机器人作业端存在运动空间狭小、规划空间维度高、约束条件多等问题, 因此进行狭小空间下集群机器人无干涉协同运动规划方法设计是未来的研究方向之一.

    图21所示, 与其他方法相比较, 基于学习的方法具有强大的学习能力、高鲁棒性、高适应性等优点, 结合现阶段研究现状及复杂制造场景下现阶段亟待解决的问题, 提出一种基于云−边−端协同的任务分配与运动规划构想. 首先提出基于云边协同的集群机器人高动态实时任务分配方法, 采用整数线性规划方法进行智能化区域划分与资源分配, 并使用分层强化学习方法进行区域内任务分配, 基于云边协同进行启发式跨区域任务分配. 然后提出边端协同下移动端实时冲突预测与运动规划方法, 使用基于知识复用方法进行高效无冲突全局路径规划, 针对高动态环境下冲突干涉问题, 采用基于行为预测的局部运动规划方法. 面向作业空间受限问题, 提出集群机器人作业端无冲突协同运动规划, 构建末端执行器自适应安全域, 并提出基于随机采样的实时避障轨迹规划, 提高动态环境的适应能力.

    图 21  复杂环境下集群机器人任务分配与运动规划技术路线
    Fig. 21  Technical route of task allocation and motion planning for cluster robots in complex environment

    重大装备大型复杂部件具有尺寸超大、工序繁多、型面复杂等特点, 其制造过程场景规模大、任务工序多、精度需求高, 作业场景复杂. 传统的人工、单机制造面临着效率低、柔性不足、一致性差、空间有限等问题, 难以保障大型复杂部件制造的需求. 多机器人具有高适应性、高柔顺性等优点, 为大型复杂部件提供了良好的制造基础. 先进的任务分配和轨迹规划方法是多机器人制造系统的决策中枢, 其性能影响整个系统的运行效率.

    本文针对任务分配过程对线性规划方法、基于市场的方法、启发式算法及深度强化学习算法进行了分析, 同时针对运动规划对基于搜索的规划方法、基于势场的规划方法、基于采样的规划方法及人工智能规划方法进行了描述. 在此基础上对算法产生的计算时间问题、可行解问题、维度问题及通信的鲁棒性问题进行了总结. 结合重大装备制造复杂作业环境, 对现有的方法存在的问题进行了总结, 与其他方法相比较, 基于学习的方法具有强大的学习能力、高鲁棒性、高适应性等优点, 因此结合深度强化学习为基础的混合算法提出了一种复杂场景下集群机器人协同制造的思路. 综上所述, 结合深度强化学习与其他算法的混合分配规划方法并应用于集群机器人重大装备制造中是未来的主要研究方向.

  • 图  1  重大装备加工需求

    Fig.  1  Major equipment processing needs

    图  2  任务分配与运动规划在多机器人制造过程中的重要性

    Fig.  2  The importance of task allocation and motion planning in multi-robot manufacturing

    图  3  多机器人任务分配问题

    Fig.  3  Task allocation problem of multi-robot

    图  4  集中式任务分配系统

    Fig.  4  Centralized task allocation system

    图  5  分布式任务分配系统

    Fig.  5  Distributed task allocation system

    图  6  基于线性规划的任务分配方法[16-17, 33]

    Fig.  6  Task allocation method based on linear programming[16-17, 33]

    图  7  基于启发式算法的任务分配[34, 40]

    Fig.  7  Task assignment based on heuristic algorithm[34, 40]

    图  8  基于学习的任务分配方法[46-49]

    Fig.  8  Task allocation method based on learning[46-49]

    图  9  基于混合算法的任务分配方法[50-53]

    Fig.  9  Task allocation method based on hybrid algorithm[50-53]

    图  10  不同数量机器人情况下区域划分[54]

    Fig.  10  Area division under different number of robots[54]

    图  11  复杂作业场景下多机器人任务分配[56, 58]

    Fig.  11  Multi-robot task allocation in complex operation scenarios[56, 58]

    图  12  多机器人跨区域任务分配[61-62]

    Fig.  12  Multi-robot cross-region task allocation[61-62]

    图  13  复杂场景下多机器人运动规划

    Fig.  13  Motion planning of multi-robot in complex scenarios

    图  14  基于搜索的运动规划[78-82]

    Fig.  14  Search-based motion planning[78-82]

    图  15  基于人工势场法的运动规划[88, 91]

    Fig.  15  Motion planning based on artificial potential field[88, 91]

    图  16  基于采样的运动规划[96, 99, 102]

    Fig.  16  Motion planning based on sampling[96, 99, 102]

    图  17  基于人工智能的运动规划[108, 114, 120]

    Fig.  17  Artificial intelligence-based motion planning[108, 114, 120]

    图  19  多机器人移动端运动规划[135]

    Fig.  19  Motion planning of multi-robot mobile terminals[135]

    图  18  基于混合算法的运动规划[122-129]

    Fig.  18  Motion planning based on hybrid algorithm[122-129]

    图  20  非完整和任务约束下作业端路径规划[136-138]

    Fig.  20  Path planning for operators under non-integrity and task constraints[136-138]

    图  21  复杂环境下集群机器人任务分配与运动规划技术路线

    Fig.  21  Technical route of task allocation and motion planning for cluster robots in complex environment

    表  1  任务分配方法分析

    Table  1  The analysis of task allocation

    使用方法执行模式优点缺点应用
    混合线性规划[2833]集中式高严谨性、可获得全局最优解随着问题规模复杂度呈指数增长时间最优问题
    模拟退火法[3436]分布式计算简单、鲁棒性高对初始值和参数过于敏感异构任务分配
    群体智能算法[3740]分布式加快收敛速度、快速找到近似最优解非常大的解空间时无法保证最优性提高空间覆盖率
    基于市场的方法[4144]分布式高鲁棒性、可扩展性和灵活性成本函数缺乏形式化、设计复杂化飞机装配任务
    基于学习的方法[4648]集中式高适应性、鲁棒性奖励函数设计困难、采样效率低未知环境分配
    线性规划+市场法[16]集中/分布高严谨性、提高速度成本函数设计复杂汽车制造
    市场法+启发式[51]分布式高鲁棒性、快速性无法保证全局最优焊接制造
    启发式+机器学习[53]集中/分布快速性、高适应性奖励函数设计复杂工具切换
    下载: 导出CSV

    表  2  运动规划方法分析

    Table  2  The analysis of motion planning

    使用方法全局/局部优点缺点应用
    广度优先搜索[71]全局可以获得问题的最优解浪费大量的时间探索无用区域游戏领域
    A* 算法[73, 7879]全局减少节点, 可获得最优解仅针对环境已知的静态场景协同避障
    D* 算法[74, 80]全局可适应环境信息的变化寻路效率低、仅适用于低维空间动态环境
    CBS算法[8183]全局提高搜索速度, 保持最优依赖地图网格的划分冲突预测
    人工势场法[8491]局部高鲁棒性、目标路径安全平稳容易陷入局部最优仅适用于二维平面协同避障
    RRT算法[9596]局部位置环境探索能力强规划路径可能非最优解编队规划
    RRT* 算法[98101]局部可以达到最优路径增加碰撞检测计算节点动态环境避障
    FMT* 算法[102]局部适用于高位复杂环境容易产生冗余扩展导致性能较低高维复杂环境
    群体智能算法[107114]全局可扩展性、灵活性高随机性、可能不收敛未知环境搜索
    人工神经网络[115120]全局高适应性、可达到全局最优奖励函数设计困难、计算效率低复杂未知环境
    冲突搜索 + 市场法[122]全局/局部减少计算时间、设计失误成本函数设计复杂多机点焊
    分布式梯度 + 群体智能[128]全局/局部高灵活性、最优性寻路效率低自主装配
    下载: 导出CSV
  • [1] Zhou J, Li P G, Zhou Y H, Wang B C, Zang J Y, Meng L. Toward new-generation intelligent manufacturing. Engineering, 2018, 4(1): 11-20 doi: 10.1016/j.eng.2018.01.002
    [2] 谢福贵, 梅斌, 刘辛军, 张加波, 乐毅. 一种大型复杂构件加工新模式及新装备探讨. 机械工程学报, 2020, 56(19): 70-78 doi: 10.3901/JME.2020.19.070

    Xie Fu-Gui, Mei Bin, Liu Xin-Jun, Zhang Jia-Bo, Yue Yi. Novel mode and equipment for machining large complex components. Journal of Mechanical Engineering, 2020, 56(19): 70-78 doi: 10.3901/JME.2020.19.070
    [3] 王婧, 张弓, 郑甲红, 吴月玉, 侯至丞, 杨文林, 等. 多机器人优化布局与任务分配的研究综述与展望. 机床与液压, 2021, 49(16): 161-167

    Wang Jing, Zhang Gong, Zheng Jia-Hong, Wu Yue-Yu, Hou Zhi-Cheng, Yang Wen-Lin, et al. Survey and expectation of multi-robot optimization layout and task allocation. Machine Tool & Hydraulics, 2021, 49(16): 161-167
    [4] Rubenstein M, Cornejo A, Nagpal R. Programmable self-assembly in a thousand-robot swarm. Science, 2014, 345(6198): 795-799 doi: 10.1126/science.1254295
    [5] Li S G, Batra R, Brown D, Chang H D, Ranganathan N, Hoberman C, et al. Particle robotics based on statistical mechanics of loosely coupled components. Nature, 2019, 567(7748): 361-365 doi: 10.1038/s41586-019-1022-9
    [6] Jaderberg M, Czarnecki W M, Dunning I, Marris L, Lever G, Castaneda A G, et al. Human-level performance in 3D multiplayer games with population-based reinforcement learning. Science, 2019, 364(6443): 859-865 doi: 10.1126/science.aau6249
    [7] Skaltsis G M, Shin H S, Tsourdos A. A survey of task allocation techniques in MAS. In: Proceedings of International Conference on Unmanned Aircraft Systems (ICUAS). Athens, Greece: IEEE, 2021. 488−497
    [8] Zhang K T, Chermprayong P, Xiao F, Tzoumanikas D, Dams B, Kay S, et al. Aerial additive manufacturing with multiple autonomous robots. Nature, 2022, 609(7928): 709-717 doi: 10.1038/s41586-022-04988-4
    [9] Foehn P, Romero A, Scaramuzza D. Time-optimal planning for quadrotor waypoint flight. Science Robotics, 2021, 6(56): Article No. eabh1221 doi: 10.1126/scirobotics.abh1221
    [10] Ali A, Azevedo-Sa H, Tilbury D M, Robert Jr L P. Heterogeneous human–robot task allocation based on artificial trust. Scientific Reports, 2022, 12(1): Article No. 15304 doi: 10.1038/s41598-022-19140-5
    [11] Suárez-Ruiz F, Zhou X, Pham Q C. Can robots assemble an IKEA chair? Science Robotics, 2018, 3(17): Article No. eaat6385
    [12] Li X, Serlin Z, Yang G, Belta C. A formal methods approach to interpretable reinforcement learning for robotic planning. Science Robotics, 2019, 4(37): Article No. eaay6276 doi: 10.1126/scirobotics.aay6276
    [13] 唐苏妍, 朱一凡, 李群, 雷永林. 多Agent系统任务分配方法综述. 系统工程与电子技术, 2010, 32(10): 2155-2161 doi: 10.3969/j.issn.1001-506X.2010.10.30

    Tang Su-Yan, Zhu Yi-Fan, Li Qun, Lei Yong-Lin. Survey of task allocation in multi agent systems. Systems Engineering and Electronics, 2010, 32(10): 2155-2161 doi: 10.3969/j.issn.1001-506X.2010.10.30
    [14] 张嵛, 刘淑华. 多机器人任务分配的研究与进展. 智能系统学报, 2008, 3(2): 115-120

    Zhang Yu, Liu Shu-Hua. Survey of multi-robot task allocation. CAAI Transactions on Intelligent Systems, 2008, 3(2): 115-120
    [15] Turner J, Meng Q G, Schaefer G, Whitbrook A, Soltoggio A. Distributed task rescheduling with time constraints for the optimization of total task allocations in a multirobot system. IEEE Transactions on Cybernetics, 2018, 48(9): 2583-2597 doi: 10.1109/TCYB.2017.2743164
    [16] Spensieri D, Carlson J S, Ekstedt F, Bohlin R. An iterative approach for collision free routing and scheduling in multirobot stations. IEEE Transactions on Automation Science and Engineering, 2016, 13(2): 950-962 doi: 10.1109/TASE.2015.2432746
    [17] Hu X X, Ma H W, Ye Q S, Luo H. Hierarchical method of task assignment for multiple cooperating UAV teams. Journal of Systems Engineering and Electronics, 2015, 26(5): 1000-1009 doi: 10.1109/JSEE.2015.00109
    [18] Mai L, Dao N N, Park M. Real-time task assignment approach leveraging reinforcement learning with evolution strategies for long-term latency minimization in fog computing. Sensors, 2018, 18(9): Article No. 2830 doi: 10.3390/s18092830
    [19] Wu H S, Li H, Xiao R B, Liu J. Modeling and simulation of dynamic ant colony's labor division for task allocation of UAV swarm. Physica A: Statistical Mechanics and its Applications, 2018, 491: 127-141 doi: 10.1016/j.physa.2017.08.094
    [20] Whitbrook A, Meng Q G, Chung P W H. Reliable, distributed scheduling and rescheduling for time-critical, multiagent systems. IEEE Transactions on Automation Science and Engineering, 2018, 15(2): 732-747 doi: 10.1109/TASE.2017.2679278
    [21] Pujol-Gonzalez M, Cerquides J, Farinelli A, Meseguer P, Rodriguez-Aguilar J A. Efficient inter-team task allocation in RoboCup rescue. In: Proceedings of International Conference on Autonomous Agents and Multiagent Systems. Istanbul, Turkey: ACM, 2015. 413−421
    [22] Mayya S, Wilson S, Egerstedt M. Closed-loop task allocation in robot swarms using inter-robot encounters. Swarm Intelligence, 2019, 13(2): 115-143 doi: 10.1007/s11721-019-00166-x
    [23] Tereshchuk V, Stewart J, Bykov N, Pedigo S, Devasia S, Banerjee A G. An efficient scheduling algorithm for multi-robot task allocation in assembling aircraft structures. IEEE Robotics and Automation Letters, 2019, 4(4): 3844-3851 doi: 10.1109/LRA.2019.2929983
    [24] Oh G, Kim Y, Ahn J, Choi H L. Market-based task assignment for cooperative timing missions in dynamic environments. Journal of Intelligent & Robotic Systems, 2017, 87(1): 97-123
    [25] Horst R, Pardalos P M, Van Thoai N. Introduction to Global Optimization. (Second edition). New York: Springer, 2000.
    [26] Schneider J J, Kirkpatrick S. Stochastic Optimization. Berlin: Springer, 2007.
    [27] Floudas C A, Lin X X. Mixed integer linear programming in process scheduling: Modeling, algorithms, and applications. Annals of Operations Research, 2005, 139(1): 131-162 doi: 10.1007/s10479-005-3446-x
    [28] Reklaitis G V. Overview of scheduling and planning of batch process operations. Batch Processing Systems Engineering. Berlin: Springer, 1996. 660−705
    [29] Bererton C A, Gordon G, Khosla P. Multi-robot Coordination and Competition Using Mixed Integer and Linear Programs. Schenley Park Pittsburgh: Carnegie Mellon University, 2004.
    [30] Schumacher C, Chandler P, Pachter M, Pachter L. UAV task assignment with timing constraints via mixed-integer linear programming. In: Proceedings of the AIAA 3rd “Unmanned Unlimited” Technical Conference, Workshop and Exhibit. Chicago, USA: AIAA, 2004. 6410
    [31] 聂明泓, 杨丽英, 聂义勇. 任务分配问题的建模与求解. 小型微型计算机系统, 2009, 30(4): 710-715

    Nie Ming-Hong, Yang Li-Ying, Nie Yi-Yong. Modelling and solution for assignment problem. Journal of Chinese Computer Systems, 2009, 30(4): 710-715
    [32] Åblad E, Spensieri D, Bohlin R, Carlson J S, Strömberg A B. Spatial-temporal load balancing and coordination of multi-robot stations. IEEE Transactions on Automation Science and Engineering, 2023, 20(4): 2203−2214
    [33] An S, Kim H J. Simultaneous task assignment and path planning using mixed-integer linear programming and potential field method. In: Proceedings of the 13th International Conference on Control, Automation and Systems (ICCAS 2013). Gwangju, South Korea: IEEE, 2013. 1845−1848
    [34] Kirkpatrick S, Gelatt Jr C D, Vecchi M P. Optimization by simulated annealing. Science, 1983, 220(4598): 671-680 doi: 10.1126/science.220.4598.671
    [35] Wang Y, Shi Y, Liu Y. Research on improved genetic simulated annealing algorithm for multi-UAV cooperative task allocation. In: Proceedings of Journal of Physics: Conference Series. IOP, 2022, 2246(1): 012081
    [36] Attiya G, Hamam Y. Task allocation for maximizing reliability of distributed systems: A simulated annealing approach. Journal of parallel and Distributed Computing, 2006, 66(10): 1259-1266 doi: 10.1016/j.jpdc.2006.06.006
    [37] Sasaki T, Biro D. Cumulative culture can emerge from collective intelligence in animal groups. Nature Communications, 2017, 8: Article No. 15049 doi: 10.1038/ncomms15049
    [38] Li Z, Barenji A V, Jiang J Z, Zhong R Y, Xu G Y. A mechanism for scheduling multi robot intelligent warehouse system face with dynamic demand. Journal of Intelligent Manufacturing, 2020, 31(2): 469-480 doi: 10.1007/s10845-018-1459-y
    [39] Panerati J, Gianoli L, Pinciroli C, Shabah A, Nicolescu G, Beltrame G. From swarms to stars: Task coverage in robot swarms with connectivity constraints. In: Proceedings of IEEE International Conference on Robotics and Automation (ICRA). Brisbane, Australia: IEEE, 2018. 7674−7681
    [40] Geetha K, Ravindran D, Kumar M S, Islam M N. Concurrent tolerance allocation and scheduling for complex assemblies. Robotics and Computer-Integrated Manufacturing, 2015, 35: 84-95 doi: 10.1016/j.rcim.2015.03.001
    [41] Luo L Z, Chakraborty N, Sycara K. Distributed algorithms for multirobot task assignment with task deadline constraints. IEEE Transactions on Automation Science and Engineering, 2015, 12(3): 876-888 doi: 10.1109/TASE.2015.2438032
    [42] Choi H L, Brunet L, How J P. Consensus-based decentralized auctions for robust task allocation. IEEE Transactions on Robotics, 2009, 25(4): 912-926 doi: 10.1109/TRO.2009.2022423
    [43] Wu D F, Zeng G P, Meng L G, Zhou W J, Li L M. Gini coefficient-based task allocation for multi-robot systems with limited energy resources. IEEE/CAA Journal of Automatica Sinica, 2018, 5(1): 155-168 doi: 10.1109/JAS.2017.7510385
    [44] Chen X C, He S W, Zhang Y X, Tong L, Shang P, Zhou X S. Yard crane and AGV scheduling in automated container terminal: A multi-robot task allocation framework. Transportation Research Part C: Emerging Technologies, 2020, 114: 241-271 doi: 10.1016/j.trc.2020.02.012
    [45] Tian Y T, Yang M, Qi X Y, Yang Y M. Multi-robot task allocation for fire-disaster response based on reinforcement learning. In: Proceedings of International Conference on Machine Learning and Cybernetics. Baoding, China: IEEE, 2009. 2312−2317
    [46] Wilson A, Fern A, Ray S, Tadepalli P. Multi-task reinforcement learning: A hierarchical Bayesian approach. In: Proceedings of the 24th International Conference on Machine Learning. Corvalis, USA: ACM, 2007. 1015−1022
    [47] Sun L J, Yu X J, Guo J C, Yan Y, Yu X. Deep reinforcement learning for task assignment in spatial crowdsourcing and sensing. IEEE Sensors Journal, 2021, 21(22): 25323-25330 doi: 10.1109/JSEN.2021.3057376
    [48] Wang Z Y, Gombolay M. Learning scheduling policies for multi-robot coordination with graph attention networks. IEEE Robotics and Automation Letters, 2020, 5(3): 4509-4516 doi: 10.1109/LRA.2020.3002198
    [49] Choudhury S, Gupta J K, Kochenderfer M J, Sadigh D, Bohg J. Dynamic multi-robot task allocation under uncertainty and temporal constraints. Autonomous Robots, 2022, 46(1): 231-247 doi: 10.1007/s10514-021-10022-9
    [50] Zhou B, Zhou R, Gan Y H, Fang F, Mao Y J. Multi-robot multi-station cooperative spot welding task allocation based on stepwise optimization: An industrial case study. Robotics and Computer-Integrated Manufacturing, 2022, 73: Article No. 102197 doi: 10.1016/j.rcim.2021.102197
    [51] Tereshchuk V, Bykov N, Pedigo S, Devasia S, Banerjee A G. A scheduling method for multi-robot assembly of aircraft structures with soft task precedence constraints. Robotics and Computer-Integrated Manufacturing, 2021, 71: Article No. 102154 doi: 10.1016/j.rcim.2021.102154
    [52] Liu S R, Shen J X, Tian W, Lin J M, Li P C, Li B. Balanced task allocation and collision-free scheduling of multi-robot systems in large spacecraft structure manufacturing. Robotics and Autonomous Systems, 2023, 159: Article No. 104289 doi: 10.1016/j.robot.2022.104289
    [53] Paiva G S, Carvalho M A M. Improved heuristic algorithms for the job sequencing and tool switching problem. Computers & Operations Research, 2017, 88: 208-219
    [54] Fung N, Rogers J, Nieto C, Christensen H I, Kemna S, Sukhatme G. Coordinating multi-robot systems through environment partitioning for adaptive informative sampling. In: Proceedings of International Conference on Robotics and Automation (ICRA). Montreal, Canada: IEEE, 2019. 3231−3237
    [55] Shi Y F, Wang N, Zheng J M, Zhang Y, Yi S, Luo W H, et al. Adaptive informative sampling with environment partitioning for heterogeneous multi-robot systems. In: Proceedings of IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS). Las Vegas, USA: IEEE, 2020. 11718−11723
    [56] Lopes T C, Sikora C G S, Molina R G, Schibelbain D, Rodrigues L C A, Magatão L. Balancing a robotic spot welding manufacturing line: An industrial case study. European Journal of Operational Research, 2017, 263(3): 1033-1048 doi: 10.1016/j.ejor.2017.06.001
    [57] Mitiche H, Boughaci D, Gini M. Efficient heuristics for a time-extended multi-robot task allocation problem. In: Proceedings of International Conference on New Technologies of Information and Communication (NTIC). Mila, Algeria: IEEE, 2015. 1−6
    [58] Ham A, Park M J. Human–robot task allocation and scheduling: Boeing 777 case study. IEEE Robotics and Automation Letters, 2021, 6(2): 1256-1263 doi: 10.1109/LRA.2021.3056069
    [59] Huang J, Yang B, Liu D Y. A distributed Q-learning algorithm for multi-agent team coordination. In: Proceedings of International Conference on Machine Learning and Cybernetics. Guangzhou, China: IEEE, 2005. 108−113
    [60] Gil P, Nunes L. Hierarchical reinforcement learning using path clustering. In: Proceedings of the 8th Iberian Conference on Information Systems and Technologies (CISTI). Lisboa, Portugal: IEEE, 2013. 1−6
    [61] Yu X Y, Gao X H, Wang L, Wang X W, Ding Y, Lu C, et al. Cooperative multi-UAV task assignment in cross-regional joint operations considering ammunition inventory. Drones, 2022, 6(3): Article No. 77 doi: 10.3390/drones6030077
    [62] Zhang Q, Wang Y J, Cai Z P, Tong X R. Multi-stage online task assignment driven by offline data under spatio-temporal crowdsourcing. Digital Communications and Networks, 2022, 8(4): 516-530 doi: 10.1016/j.dcan.2021.10.005
    [63] McGuire K N, De Wagter C, Tuyls K, Kappen H J, De Croon G C H E. Minimal navigation solution for a swarm of tiny flying robots to explore an unknown environment. Science Robotics, 2019, 4(35): Article No. eaaw9710 doi: 10.1126/scirobotics.aaw9710
    [64] 原魁, 李园, 房立新. 多移动机器人系统研究发展近况. 自动化学报, 2007, 33(8): 785-794

    Yuan Kui, Li Yuan, Fang Li-Xin. Multiple mobile robot systems: A survey of recent work. Acta Automatica Sinica, 2007, 33(8): 785-794
    [65] 李黎, 尚俊云, 冯艳丽, 淮亚文. 关节型工业机器人轨迹规划研究综述. 计算机工程与应用, 2018, 54(5): 36-50

    Li Li, Shang Jun-Yun, Feng Yan-Li, Huai Ya-Wen. Research of trajectory planning for articulated industrial robot: A review. Computer Engineering and Applications, 2018, 54(5): 36-50
    [66] Yilmaz N K, Evangelinos C, Lermusiaux P F J, Patrikalakis N M. Path planning of autonomous underwater vehicles for adaptive sampling using mixed integer linear programming. IEEE Journal of Oceanic Engineering, 2008, 33(4): 522-537 doi: 10.1109/JOE.2008.2002105
    [67] Aghababa M P. 3D path planning for underwater vehicles using five evolutionary optimization algorithms avoiding static and energetic obstacles. Applied Ocean Research, 2012, 38: 48-62 doi: 10.1016/j.apor.2012.06.002
    [68] Yue R G, Xiao J Z, Wang S P, Joseph S L. Modeling and path planning of the city-climber robot part II: 3D path planning using mixed integer linear programming. In: Proceedings of IEEE International Conference on Robotics and Biomimetics (ROBIO). Guilin, China: IEEE, 2009. 2391−2396
    [69] Yan F, Liu Y S, Xiao J Z. Path planning in complex 3D environments using a probabilistic roadmap method. International Journal of Automation and Computing, 2013, 10(6): 525-533 doi: 10.1007/s11633-013-0750-9
    [70] Duan H B, Yu Y X, Zhang X Y, Shao S. Three-dimension path planning for UCAV using hybrid meta-heuristic ACO-DE algorithm. Simulation Modelling Practice and Theory, 2010, 18(8): 1104-1115 doi: 10.1016/j.simpat.2009.10.006
    [71] Awerbuch B, Gallager R. A new distributed algorithm to find breadth first search trees. IEEE Transactions on Information Theory, 1987, 33(3): 315-322 doi: 10.1109/TIT.1987.1057314
    [72] Ng F, Butler G, Kay J. An intelligent tutoring system for the Dijkstra-Gries methodology. IEEE Transactions on Software Engineering, 1995, 21(5): 415-428 doi: 10.1109/32.387471
    [73] Hart P E, Nilsson N J, Raphael B. A formal basis for the heuristic determination of minimum cost paths. IEEE Transactions on Systems Science and Cybernetics, 1968, 4(2): 100-107 doi: 10.1109/TSSC.1968.300136
    [74] Stentz A. Optimal and efficient path planning for partially-known environments. In: Proceedings of IEEE International Conference on Robotics and Automation (ICRA). San Diego, USA: IEEE, 1994. 3310−3317.
    [75] Koenig S, Likhachev M, Furcy D. Lifelong planning A*. Artificial Intelligence, 2004, 155(1-2): 93-146 doi: 10.1016/j.artint.2003.12.001
    [76] Koenig S, Likhachev M. D* lite. In: Proceedings of the 18th National Conference on Artificial Intelligence. Edmonton Alberta, Canada: ACM, 2002. 476−483
    [77] Ferguson D, Stentz A. The Field D* Algorithm for Improved Path Planning and Replanning in Uniform and Non-uniform Cost Environments, Technical Report CMU-TR-RI-05-19, Carnegie Mellon University, Pittsburgh, USA, 2005.
    [78] Ali H, Xiong G, Wu H Y, Hu B, Shen Z, Bai H X. Multi-robot path planning and trajectory smoothing. In: Proceedings of the IEEE 16th International Conference on Automation Science and Engineering (CASE). Hong Kong, China: IEEE, 2020. 685−690
    [79] 陈光友, 余粟. 改进A* 的多机器人双层路径规划算法. 计算机工程与应用, 2023, 59(11): 312−319

    Chen Guang-You, Yu Su. Improved A* multi robot bilevel path planning algorithm. Computer Engineering and Applications, 2023, 59(11): 312−319
    [80] Ren Z Q, Rathinam S, Likhachev M, Choset H. Multi-objective path-based D* lite. IEEE Robotics and Automation Letters, 2022, 7(2): 3318-3325 doi: 10.1109/LRA.2022.3146918
    [81] Sharon G, Stern R, Felner A, Sturtevant N R. Conflict-based search for optimal multi-agent pathfinding. Artificial Intelligence, 2015, 219: 40-66 doi: 10.1016/j.artint.2014.11.006
    [82] Zhang X B, Wang J R, Fang Y C, Yuan J. Multilevel humanlike motion planning for mobile robots in complex indoor environments. IEEE Transactions on Automation Science and Engineering, 2019, 16(3): 1244-1258 doi: 10.1109/TASE.2018.2880245
    [83] Dogar M, Spielberg A, Baker S, Rus D. Multi-robot grasp planning for sequential assembly operations. Autonomous Robots, 2019, 43(3): 649-664 doi: 10.1007/s10514-018-9748-z
    [84] Liu C Q, Ang M H, Krishnan H, Yong L S. Virtual obstacle concept for local-minimum-recovery in potential-field based navigation. In: Proceedings of ICRA. Millennium Conference. IEEE International Conference on Robotics and Automation. Symposia Proceedings (Cat. No.00CH37065). San Francisco, USA: IEEE, 2000. 983−988
    [85] 石鸿雁, 孙昌志. 一种基于混沌优化算法的机器人路径规划方法. 机器人, 2005, 27(2): 152-157

    Shi Hong-Yan, Sun Chang-Zhi. Path planning method for robot based on chaotic optimization algorithm. Robot, 2005, 27(2): 152-157
    [86] Scott N A, Carignan C R. A line-based obstacle avoidance technique for dexterous manipulator operations. In: Proceedings of IEEE International Conference on Robotics and Automation. Pasadena, USA: IEEE, 2008. 3353−3358
    [87] Lee D, Jeong J, Kim Y H, Park J B. An improved artificial potential field method with a new point of attractive force for a mobile robot. In: Proceedings of the 2nd International Conference on Robotics and Automation Engineering (ICRAE). Shanghai, China: IEEE, 2017. 63−67
    [88] 韩伟, 孙凯彪. 基于模糊人工势场法的智能全向车路径规划. 计算机工程与应用, 2018, 54(6): 105-109, 167

    Han Wei, Sun Kai-Biao. Research on dynamic path planning of fuzzy artificial potential field method. Computer Engineering and Applications, 2018, 54(6): 105-109, 167
    [89] Mamani K M S, Ordoñez J. MIMC-VADOC model for autonomous multi-robot formation control applied to differential robots. In: Proceedings of the 8th International Conference on Automation, Robotics and Applications (ICARA). Prague, Czech Republic: IEEE, 2022. 118−124
    [90] Pan Z, Zhang C, Xia Y, Xiong H, Shao X. An improved artificial potential field method for path planning and formation control of the multi-UAV systems. IEEE Transactions on Circuits and Systems II: Express Briefs, 2021, 69(3): 1129−1133
    [91] Matoui F, Boussaid B, Abdelkrim M N. Distributed path planning of a multi-robot system based on the neighborhood artificial potential field approach. Simulation, 2019, 95(7): 637-657 doi: 10.1177/0037549718785440
    [92] Wu Z C, Su W Z, Li J H. Multi-robot path planning based on improved artificial potential field and B-spline curve optimization. In: Proceedings of Chinese Control Conference (CCC). Guangzhou, China: IEEE, 2019. 4691−4696
    [93] Ge J X, Sun F C, Liu C F. RRT-GD: An efficient rapidly-exploring random tree approach with goal directionality for redundant manipulator path planning. In: Proceedings of IEEE International Conference on Robotics and Biomimetics (ROBIO). Qingdao, China: IEEE, 2016. 1983−1988
    [94] Kavraki L E, Svestka P, Latombe J C, Overmars M H. Probabilistic roadmaps for path planning in high-dimensional configuration spaces. IEEE Transactions on Robotics and Automation, 1996, 12(4): 566-580 doi: 10.1109/70.508439
    [95] LaValle S M, Kuffner Jr J J. Randomized kinodynamic planning. The International Journal of Robotics Research, 2001, 20(5): 378-400 doi: 10.1177/02783640122067453
    [96] 王乐乐, 眭泽智, 蒲志强, 刘振, 易建强. 一种改进RRT的多机器人编队路径规划算法. 电子学报, 2020, 48(11): 2138-2145

    Wang Le-Le, Sui Ze-Zhi, Pu Zhi-Qiang, Liu Zhen, Yi Jian-Qiang. An improved RRT algorithm for multi-robot formation path planning. Acta Electonica Sinica, 2020, 48(11): 2138-2145
    [97] 陈锦涛, 李鸿一, 任鸿儒, 鲁仁全. 基于RRT森林算法的高层消防无人机室内协同路径规划. 自动化学报, 2023, 49(12): 2615−2626

    Chen Jin-Tao, Li Hong-Yi, Ren Hong-Ru, Lu Ren-Quan. Cooperative indoor path planning of multi-UAVs for high-rise fire fighting based on RRT-forest algorithm. Acta Automatica Sinica, 2023, 49(12): 2615−2626
    [98] Karaman S, Frazzoli E. Sampling-based algorithms for optimal motion planning. The International Journal of Robotics Research, 2011, 30(7): 846-894 doi: 10.1177/0278364911406761
    [99] Cui R X, Li Y, Yan W S. Mutual information-based multi-AUV path planning for scalar field sampling using multidimensional RRT*. IEEE Transactions on Systems, Man, and Cybernetics: Systems, 2016, 46(7): 993-1004 doi: 10.1109/TSMC.2015.2500027
    [100] LaValle S M. Planning Algorithms. Cambridge: Cambridge University Press, 2006.
    [101] 杜明博, 梅涛, 陈佳佳, 赵盼, 梁华为, 黄如林, 等. 复杂环境下基于RRT的智能车辆运动规划算法. 机器人, 2015, 37(4): 443-450

    Du Ming-Bo, Mei Tao, Chen Jia-Jia, Zhao Pan, Liang Hua-Wei, Huang Ru-Lin, et al. RRT-based motion planning algorithm for intelligent vehicle in complex environments. Robot, 2015, 37(4): 443-450
    [102] Janson L, Schmerling E, Clark A, Pavone M. Fast marching tree: A fast marching sampling-based method for optimal motion planning in many dimensions. The International Journal of Robotics Research, 2015, 34(7): 883-921 doi: 10.1177/0278364915577958
    [103] Le D, Plaku E. Multi-robot motion planning with dynamics via coordinated sampling-based expansion guided by multi-agent search. IEEE Robotics and Automation Letters, 2019, 4(2): 1868-1875 doi: 10.1109/LRA.2019.2898087
    [104] Dayan D, Solovey K, Pavone M, Halperin D. Near-optimal multi-robot motion planning with finite sampling. In: Proceedings of IEEE International Conference on Robotics and Automation (ICRA). Xi'an, China: IEEE, 2021. 9190−9196
    [105] Das N, Yip M. Learning-based proxy collision detection for robot motion planning applications. IEEE Transactions on Robotics, 2020, 36(4): 1096-1114 doi: 10.1109/TRO.2020.2974094
    [106] Josef S, Degani A. Deep reinforcement learning for safe local planning of a ground vehicle in unknown rough terrain. IEEE Robotics and Automation Letters, 2020, 5(4): 6748-6755 doi: 10.1109/LRA.2020.3011912
    [107] Bhaduri A. A mobile robot path planning using genetic artificial immune network algorithm. In: Proceedings of World Congress on Nature & Biologically Inspired Computing (NaBIC). Coimbatore, India: IEEE, 2009. 1536−1539
    [108] Nazarahari M, Khanmirza E, Doostie S. Multi-objective multi-robot path planning in continuous environment using an enhanced genetic algorithm. Expert Systems With Applications, 2019, 115: 106-120 doi: 10.1016/j.eswa.2018.08.008
    [109] Dorigo M, Gambardella L M, Middendorf M, Stutzle T. Guest editorial: Special section on ant colony optimization. IEEE Transactions on Evolutionary Computation, 2002, 6(4): 317-319 doi: 10.1109/TEVC.2002.802446
    [110] 江明, 王飞, 葛愿, 孙龙龙. 基于改进蚁群算法的移动机器人路径规划研究. 仪器仪表学报, 2019, 40(2): 113-121

    Jiang Ming, Wang Fei, Ge Yuan, Sun Long-Long. Research on path planning of mobile robot based on improved ant colony algorithm. Chinese Journal of Scientific Instrument, 2019, 40(2): 113-121
    [111] Hasan A H, Mosa A M. Multi-robot path planning based on max-min ant colony optimization and D* algorithms in a dynamic environment. In: Proceedings of International Conference on Advanced Science and Engineering (ICOASE). Duhok, Iraq: IEEE, 2018. 110−115
    [112] Kennedy J, Eberhart R. Particle swarm optimization. In: Proceedings of International Conference on Neural Networks. Perth, Australia: IEEE, 1995. 1942−1948
    [113] Wang J W, Ren X M, Liu J. Trajectory planning for multi-robot formation by one hybrid particle swarm optimization algorithm. In: Proceedings of 5th International Conference on Intelligent Human-Machine Systems and Cybernetics. Hangzhou, China: IEEE, 2013. 344−348
    [114] Dadgar M, Jafari S, Hamzeh A. A PSO-based multi-robot cooperation method for target searching in unknown environments. Neurocomputing, 2016, 177: 62-74 doi: 10.1016/j.neucom.2015.11.007
    [115] Li Y, Cui R X, Li Z J, Xu D M. Neural network approximation based near-optimal motion planning with kinodynamic constraints using RRT. IEEE Transactions on Industrial Electronics, 2018, 65(11): 8718-8729 doi: 10.1109/TIE.2018.2816000
    [116] Sebastian B, Ren H L, Ben-Tzvi P. Neural network based heterogeneous sensor fusion for robot motion planning. In: Proceedings of IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS). Macau, China: IEEE, 2019. 2899−2904
    [117] Pfeiffer M, Schaeuble M, Nieto J, Siegwart R, Cadena C. From perception to decision: A data-driven approach to end-to-end motion planning for autonomous ground robots. In: Proceedings of IEEE International Conference on Robotics and Automation. Singapore: IEEE, 2017. 1527−1533
    [118] He C Y, Wan Y, Gu Y X, Lewis F L. Integral reinforcement learning-based multi-robot minimum time-energy path planning subject to collision avoidance and unknown environmental disturbances. IEEE Control Systems Letters, 2021, 5(3): 983-988 doi: 10.1109/LCSYS.2020.3007663
    [119] Tai L, Paolo G, Liu M. Virtual-to-real deep reinforcement learning: Continuous control of mobile robots for mapless navigation. In: Proceedings of IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS). Vancouver, Canada: IEEE, 2017. 31−36
    [120] Bae H, Kim G, Kim J, Qian D W, Lee S. Multi-robot path planning method using reinforcement learning. Applied Sciences, 2019, 9(15): Article No. 3057 doi: 10.3390/app9153057
    [121] Veeramani S, Muthuswamy S, Setchi R. Coordination and path planning of a heterogeneous multi-robot system for sheet metal drilling. Procedia Computer Science, 2022, 207: 2335-2344 doi: 10.1016/j.procs.2022.09.292
    [122] Pellegrinelli S, Pedrocchi N, Tosatti L M, Fischer A, Tolio T. Multi-robot spot-welding cells for car-body assembly: Design and motion planning. Robotics and Computer-Integrated Manufacturing, 2017, 44: 97-116 doi: 10.1016/j.rcim.2016.08.006
    [123] Hartmann V N, Orthey A, Driess D, Oguz O S, Toussaint M. Long-horizon multi-robot rearrangement planning for construction assembly. IEEE Transactions on Robotics, 2023, 39(1): 239-252 doi: 10.1109/TRO.2022.3198020
    [124] Alonso-Mora J, Knepper R, Siegwart R, Rus D. Local motion planning for collaborative multi-robot manipulation of deformable objects. In: Proceedings of IEEE International Conference on Robotics and Automation (ICRA). Seattle, USA: IEEE, 2015. 5495−5502
    [125] Touzani H, Hadj-Abdelkader H, Séguy N, Bouchafa S. Multi-robot task sequencing & automatic path planning for cycle time optimization: Application for car production line. IEEE Robotics and Automation Letters, 2021, 6(2): 1335-1342 doi: 10.1109/LRA.2021.3057011
    [126] Han S D, Yu J J. Effective heuristics for multi-robot path planning in warehouse environments. In: Proceedings of International Symposium on Multi-Robot and Multi-agent Systems (MRS). New Brunswick, USA: IEEE, 2019. 10−12
    [127] Liu Y H, Zhao W Z, Lutz T, Yue X W. Task allocation and coordinated motion planning for autonomous multi-robot optical inspection systems. Journal of Intelligent Manufacturing, 2022, 33(8): 2457-2470 doi: 10.1007/s10845-021-01803-1
    [128] Rigatos G G. Distributed gradient and particle swarm optimization for multi-robot motion planning. Robotica, 2008, 26(3): 357-370 doi: 10.1017/S0263574707004080
    [129] Han S D, Yu J J. DDM: Fast near-optimal multi-robot path planning using diversified-path and optimal sub-problem solution database heuristics. IEEE Robotics and Automation Letters, 2020, 5(2): 1350-1357 doi: 10.1109/LRA.2020.2967326
    [130] Li J C, Ran M P, Xie L H. Efficient trajectory planning for multiple non-holonomic mobile robots via prioritized trajectory optimization. IEEE Robotics and Automation Letters, 2021, 6(2): 405-412 doi: 10.1109/LRA.2020.3044834
    [131] Wagner G, Choset H. M*: A complete multirobot path planning algorithm with performance bounds. In: Proceedings of IEEE/RSJ International Conference on Intelligent Robots and Systems. San Francisco, USA: IEEE, 2011. 3260−3267
    [132] van den Berg J, Lin M, Manocha D. Reciprocal velocity obstacles for real-time multi-agent navigation. In: Proceedings of IEEE International Conference on Robotics and Automation. Pasadena, USA: IEEE, 2008. 1928−1935
    [133] van Den Berg J, Guy S J, Lin M, Manocha D. Reciprocal n-body collision avoidance. Robotics Research: The 14th International Symposium ISRR. Berlin, Germany: Springer, 2011. 3−19
    [134] Tordesillas J, How J P. MADER: Trajectory planner in multiagent and dynamic environments. IEEE Transactions on Robotics, 2022, 38(1): 463-476 doi: 10.1109/TRO.2021.3080235
    [135] Zhou X, Wen X Y, Wang Z P, Gao Y M, Li H J, Wang Q H, et al. Swarm of micro flying robots in the wild. Science Robotics, 2022, 7(66): Article No. eabm5954 doi: 10.1126/scirobotics.abm5954
    [136] Thakar S, Rajendran P, Kim H, Kabir A M, Gupta S K. Accelerating bi-directional sampling-based search for motion planning of non-holonomic mobile manipulators. In: Proceedings of IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS). Las Vegas, USA: IEEE, 2020. 6711−6717
    [137] Tallamraju R, Salunkhe D H, Rajappa S, Ahmad A, Karlapalem K, Shah S V. Motion planning for multi-mobile-manipulator payload transport systems. In: Proceedings of IEEE 15th International Conference on Automation Science and Engineering (CASE). Vancouver, Canada: IEEE, 2019. 1469−1474
    [138] Pardi T, Maddali V, Ortenzi V, Stolkin R, Marturi N. Path planning for mobile manipulator robots under non-holonomic and task constraints. In: Proceedings of IEEE/RSJ International Conference on Intelligent Robots and Systems. Las Vegas, USA: IEEE, 2020. 6749−6756
    [139] Tang Q R, Zhang Y, Yu F C, Zhang J T. An obstacle avoidance approach based on system outlined rectangle for cooperative transportation of multiple mobile manipulators. In: Proceedings of IEEE International Conference on Intelligence and Safety for Robotics (ISR). Shenyang, China: IEEE, 2018. 533−538
    [140] Vannoy J, Xiao J. Real-time adaptive motion planning (RAMP) of mobile manipulators in dynamic environments with unforeseen changes. IEEE Transactions on Robotics, 2008, 24(5): 1199-1212 doi: 10.1109/TRO.2008.2003277
    [141] Bonilla M, Pallottino L, Bicchi A. Noninteracting constrained motion planning and control for robot manipulators. In: Proceedings of IEEE International Conference on Robotics and Automation (ICRA). Singapore: IEEE, 2017. 4038−4043
    [142] Yang Y M, Zhou C J, Tian Y T. Swarm robots task allocation based on response threshold model. In: Proceedings of 4th International Conference on Autonomous Robots and Agents. Wellington, New Zealand: IEEE, 2009. 171−176
    [143] Ghassemi P, DePauw D, Chowdhury S. Decentralized dynamic task allocation in swarm robotic systems for disaster response: Extended abstract. In: Proceedings of International Symposium on Multi-robot and Multi-agent Systems (MRS). New Brunswick, USA: IEEE, 2019. 83−85
    [144] Vicmudo M P, Dadios E P, Vicerra R R P. Path planning of underwater swarm robots using genetic algorithm. In: Proceedings of International Conference on Humanoid, Nanotechnology, Information Technology, Communication and Control, Environment and Management (HNICEM). Palawan, Philippines: IEEE, 2014. 1−5
    [145] Chella A, Gaglio S, Mannone M, Pilato G, Seidita V, Vella F, et al. Quantum planning for swarm robotics. Robotics and Autonomous Systems, 2023, 161: Article No. 104362 doi: 10.1016/j.robot.2023.104362
  • 期刊类型引用(9)

    1. 梅艺林,崔立堃,胡雪岩,胡广琦,王浩. 基于人工势场法的复杂环境下多无人车避障与编队控制. 工程科学学报. 2025(02): 364-373 . 百度学术
    2. 宁聪,范菁,孙书魁. 多无人机协同规划研究综述. 计算机工程与应用. 2025(01): 42-58 . 百度学术
    3. 张辉,杜瑞,钟杭,曹意宏,王耀南. 电力设施多模态精细化机器人巡检关键技术及应用. 自动化学报. 2025(01): 20-42 . 本站查看
    4. 谢宇明,尹汉锋,肖慧慧. 基于领航-跟随及人工势场的环卫机器人编队研究. 工程设计学报. 2025(01): 42-50 . 百度学术
    5. 万怡华,张雪梅. 基于HMSDBO算法的机器人路径规划. 机械设计与研究. 2025(01): 239-246+251 . 百度学术
    6. 金龙,张凡,刘佰阳,郑宇. 基于数据驱动的冗余机器人末端执行器位姿控制方案. 自动化学报. 2024(03): 518-526 . 本站查看
    7. 毛聪,曾利华. 基于深度学习的AI视觉和机器人集群在钢铁行业的应用. 中国机械. 2024(09): 80-83 . 百度学术
    8. 刘占省,杨煜垚,史国梁. 融合聚类算法与改进哈里斯鹰算法的建筑机器人任务分配方法. 建筑结构. 2024(20): 89-97+42 . 百度学术
    9. 于宁波,王翔宇,赵新刚,韩建达,王天然. 可信行为智能:发展机遇与未来. 人工智能. 2024(06): 1-12 . 百度学术

    其他类型引用(13)

  • 加载中
图(21) / 表(2)
计量
  • 文章访问数:  6497
  • HTML全文浏览量:  1775
  • PDF下载量:  819
  • 被引次数: 22
出版历程
  • 收稿日期:  2022-12-12
  • 录用日期:  2023-04-13
  • 网络出版日期:  2023-05-09
  • 刊出日期:  2024-01-29

目录

/

返回文章
返回