迈向标准化的强化学习框架用于AAM应急管理

先进空中交通（AAM）是下一代航空运输方式，包括电动垂直起降（eVTOL）飞机、日益自主的飞行操作以及小型无人机包裹投递等新进入者。随着这些新机型和运营概念的出现，人们希望在城市区域及其周边地区大幅提高密度，利用新型电池技术，并朝着更自主驾驶的飞机发展。为实现这些目标，必须引入新的安全管理系统能力，以快速评估风险在复杂危害范围内的演变，并在必要时通过监督或自动决策执行适当措施来降低风险。最近，强化学习在实时决策方面显示出在各种应用中的潜力，包括应急处理管理。在这项工作中，我们将应急处理管理问题表述为马尔可夫决策过程（MDP），并将应急处理管理MDP整合到AAM-Gym模拟框架中。这使得强化学习算法的快速原型设计和现有系统的评估成为可能，从而为未来算法开发提供一个社区基准。我们报告了环境的基线统计信息，并提供了示例性能指标。（预印本；同行评审状态请核对原文。）