为通用人工智能搭建新测试体系

​近来,大模型技术引发了全球对通用人工智能的广泛关注,在产业界、科研界掀起了巨大热潮。在人工智能技术大显身手、取得瞩目成就的同时,如何应对技术跨越所带来的风险并进行管控与治理,如何判断人工智能系统是否具备通用人工智能的性能等,也日益成为各方关注的焦点。在笔者看来,当下,我国科学界和产业界要抓住这一历史机遇,明确通用人工智能的发展路径和方向,牢牢把握解读和评估通用人工智能的话语权,尽快搭建并完善通用人工智能测试评级标准与平台。

 在建构人工智能评测系统方面,早在1950年,英国计算机科学家阿兰·图灵就提出了基于行为的图灵测试:如果一台机器能够与人类展开对话而不被人类辨别出其机器身份,则称这台机器通过了测试。人工智能发展至今,现有的人工智能测试体系各自所呈现出的局限性,已无法满足通用人工智能的研究诉求:图灵测试不足以准确衡量人工智能的智能程度、任务导向测试(俗称“刷榜”),可能导致人工智能过度适应某项特定任务,当前很多基于Unity(一种实时三维互动内容创作和运营平台)的虚拟环境测试则在模拟复杂物理交互方面有所欠缺……显然,传统的人工智能测试已不适用于通用人工智能系统的评级。

另外,很多应用者反映,当下热门的大模型常常出现“脑雾”与“认知眩晕”等现象,在产业落地中出现问题。归根结底,是因为这种基于数据驱动的大模型仍然缺“心”,缺乏明确的认知架构和价值体系,只能按照人类设定的程序,机械地对问题进行反馈,求解“填空题”。这也倒逼通用人工智能测试之“心”要具备两个结构:其一为价值体系,具备符合人类价值观的通用智能体,才能被广泛接纳;其二为认知架构,这是通用智能体与人交流、合作的基础。价值体系、认知架构不仅应是驱动通用人工智能自主任务生成的根本内驱力,也是保障通用人工智能安全运转的关键。智能体只有具备了“良知”的知识体系及可以与人类沟通解释的“认知架构”,才能形成人机信任关系,实现人机和谐共生。

为通用人工智能搭建新测试体系

 针对科学测试人工智能所需的种种条件,近期,笔者带领团队依据发展心理学和心智理论,参考人类婴幼儿发育的测试标准,研究总结出一种基于能力和价值的通用人工智能评测方法,并开发了复杂动态的物理场景(模拟仿真)和社会交互(混合现实)的测试平台——通智测试。这项成果于今年8月发表在中国工程院院刊《工程(英文)》上,这也是该领域发布的全球首个评级测试标准与平台。

该测试强调在复杂动态的物理及社会环境中,通用人工智能系统(智能体)应满足三个基本标准:

一是能完成无限任务并具备任务泛化能力,不依赖人类定义和训练任务。任务被定义为智能体对物理世界属性(如颜色、位置、速度等)或社会状态(如感知、认知、决策、心智等)状态的改变。人类在与外界交互时会产生无限可能,通用智能体需在这些场景中理解人类意图、与人协作,其任务和运动的规划必须符合物理因果与社会规范。

二是能根据变化的场景自主生成任务,不依赖于人类分配任务,做到俗话说的“眼里有活”。反之,如果智能体只能执行人类提前设定好的任务,不论是基于规则或者统计模型,既不能对预设之外的任务做到自主定义,也无法在与陌生环境交互中自动生成新任务,并不能适应人类社会的动态性与多样性。

三是由价值驱动并具有自我意识和层次化的价值体系。智能体能够自主生成并完成符合人类需求的任务,一套合适的价值系统至关重要。这套价值体系必须融入人类价值观,使智能体有能力学习和理解人类的价值偏好,并最终实现与人类价值的同向甚至对齐。例如,如果儿童提出不安全的要求,智能体能否识别出任务的不合理之处,并自主形成新任务。

通智测试从智能体探索和认知世界规律的各自感知、认知、运动、交互、社会、学习等能力,以及对自我、他人和群体的价值理解学习这两个角度入手,搭建了具体可行的测试平台架构。测试全面考虑了通用人工智能的关键特征,填补了通用人工智能评测的空白,突破了传统图灵测试的方法局限,在人工智能领域具有创新价值:不但有助于指导研究者为通用人工智能构建综合的设计架构与完善的评估体系,而且能为人工智能安全治理问题提供积极的解决方案。

在通智测试评估体系下,管理者可针对不同水平的智能体制定差异化监管准入机制,对通用人工智能规范化发展具有参考意义。此外,通智测试评级机制还可以为通用人工智能的科研路径提供明晰可靠的路线图,协助相关领域研究者找准科研道路上的前进方向。

(作者:朱松纯,系北京通用人工智能研究院院长,北京大学智能学院、人工智能研究院院长)

来源:光明日报

该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们

(0)
小安小安

相关推荐

  • 目前的人工智能属于什么领域

    人工智能的发展与应用 人工智能的定义与发展 人工智能(Artificial Intelligence,简称AI)是指通过模拟人类智能的方式,使机器能够像人一样思考、学习和解决问题的…

    2023年9月22日
  • 全球人工智能产业进入高速发展阶段

    各国将人工智能上升至国家战略层面,加强人工智能顶层设计和统筹规划。产业界不断探索人工智能在多领域的应用落地,挖掘人工智能技术潜力。在政策和市场的双重驱动下,人工智能产业进入高速发展阶段,技术红利快速释放,研发成果不断涌现,应用场景持续拓展。

    2024年2月15日
  • 人工智能:发展和治理“两手抓”

    人工智能无疑是2023年最热门的数字科技关键词。一方面,各国纷纷加速布局人工智能产业。

    2024年3月9日
  • 人工智能的现状与未来

    人工智能的现状 人工智能(Artificial Intelligence,简称AI)是一门研究如何使计算机能够像人一样思考和行动的科学。近年来,随着计算能力的提升和大数据的普及,人…

    2023年9月23日
  • 到2024年,人工智能市场将达到至5543亿美元

    预测显示,到2024年,人工智能市场将飙升至惊人的5543亿美元。这种显著的增长是由一系列因素共同推动的,从人工智能的采用增加到该领域的持续创新。

    2023年11月20日
  • 一文读懂2024政府工作报告中“人工智能+”

    从去年的AI语言模型ChatGPT到今年的视频生成模型Sora,一系列AIGC利用人工智能技术生成内容相继问世、更新迭代,人工智能的影响面越来越广,让所有人直观地感受到未来已来。为了抓紧这把打开未来之门的钥匙,我国也在加紧布局。今年全国两会政府工作报告中一个新关键词引发热议――“人工智能+”行动。值得注意的是,这是“人工智能+”首次被写入政府工作报告。

    2024年3月14日