AI|清华、阿里、RealAI等顶尖团队联合发布最新AI安全评估平台( 二 )


越丰认为,该平台的发布对工业界和学术界都能带来正面的影响,比如工业界可以使用该平台评估目前AI服务的安全性,发现模型的安全漏洞 。同时,也可为学术界提供一个全面、客观、公平、科学的行业标准,推动整个学术界在AI对抗攻防领域的快速发展 。
清华方面介绍,本次发布的AI安全基准也是依托清华大学人工智能研究院研发的人工智能对抗安全算法平台ARES(Adversarial Robustness Evaluation for Safety)建立 。ARES作为古希腊神话中的战神,双手持矛和盾是攻防合一的化身,集中体现了AI安全算法攻防博弈的特点 。该平台对主流的攻防算法实现了模块化的设计,支持数十种主流攻防算法的实现,可以方便研究者和开发人员进行使用,有助于推动AI对抗攻防领域的发展 。
清华大学、阿里安全、Real AI三方强调,该基准评测平台不是专属于某一家机构或者公司搭建的平台,需要工业界和学术界的共同参与才能把它打造为真正受认可的全面、权威的AI安全评估平台 。因此,三方将联合不断在排行榜中注入新的攻击和防御算法,并且欢迎学术界和产业界的团队能提供新的攻防模型 。
“数据对于AI发展非常重要,通过对于不同攻击和防御算法统一全面的对比,相信这次的平台可以为机器学习模型的安全与稳定性验证提供更全面的支持,并为进一步设计开发新的安全、强壮的学习算法提供有力的技术背书 。”李博说道 。
附1:基准测试平台网站http://ml.cs.tsinghua.edu.cn/adv-bench/
附2:ARES开源算法库https://github.com/thu-ml/ares


推荐阅读