计算机研究与发展2022,Vol.59Issue(9) :2039-2050.DOI:10.7544/issn1000-1239.20210474

基于强化学习的伦理智能体训练方法

An Approach for Training Moral Agents via Reinforcement Learning

古天龙 高慧 李龙 包旭光 李云辉
计算机研究与发展2022,Vol.59Issue(9) :2039-2050.DOI:10.7544/issn1000-1239.20210474

基于强化学习的伦理智能体训练方法

An Approach for Training Moral Agents via Reinforcement Learning

古天龙 1高慧 2李龙 1包旭光 2李云辉2
扫码查看

作者信息

  • 1. 暨南大学网络空间安全学院 广州 510632;广西可信软件重点实验室(桂林电子科技大学) 广西桂林 541004
  • 2. 广西可信软件重点实验室(桂林电子科技大学) 广西桂林 541004
  • 折叠

摘要

自动驾驶汽车、看护机器人等形式多样的智能体在人类生活中扮演着越来越重要的角色,其伦理问题受到了广泛关注.为使智能体具备遵守人类伦理规范的能力,提出了 一种基于众包和强化学习的伦理智能体训练方法.首先,采用众包获取行为示例数据集,并借助于文本聚类、关联分析等技术生成情节图及轨迹树,以定义智能体的基本行为空间、表明行为的发生顺序;其次,提出元伦理行为的概念,通过对不同场景中的相似行为进行概括,扩展伦理智能体的行为空间,进一步基于《中学生日常行为规范》提取了 9种元伦理行为;最后,提出了行为分级机制及与之对应的强化学习奖惩函数,以此为基础完成伦理智能体训练.通过模拟人类生活中的买药场景,分别使用 Q-learning算法及DQN(deep Q-networks)算法完成了伦理智能体的训练实验.实验结果表明,训练后的智能体能够以符合伦理的行为方式完成预期任务,验证了所提方法的合理性与有效性.

关键词

伦理智能体/符合伦理的设计/伦理分级/强化学习/众包

引用本文复制引用

基金项目

出版年

2022
计算机研究与发展
中国科学院计算技术研究所 中国计算机学会

计算机研究与发展

CSTPCDCSCD北大核心
影响因子:2.649
ISSN:1000-1239
被引量1
参考文献量3
段落导航相关论文