• 最近访问:
发表于 2026-07-22 20:47:51 股吧网页版
智源研究院:大语言模型智能体可能带来生物安全风险
来源:上海证券报·中国证券网 作者:窦世平

  上证报中国证券网讯(记者窦世平)当大语言模型从单轮问答工具转向能够调用工具、规划任务的智能体,其在生命科学场景中的安全边界正在受到关注。智源研究院认为,大语言模型智能体可能带来生物安全风险。

  据介绍,其大模型安全研究团队近日与北京大学围绕AI智能体可能带来的生物安全风险开展端到端评估,重点考察大语言模型智能体是否会降低非专业人员理解和执行部分高风险生物实验相关任务的知识门槛。

  这项评估聚焦DNA合成筛查环节。DNA合成服务是生命科学研究的重要基础设施,合成服务商通常通过序列筛查识别潜在风险订单。随着合成成本下降、实验流程标准化程度提升,筛查机制在生物安全体系中的作用更受重视。不过,在AI智能体能够组合公开知识库、搜索工具、文件读写和程序化校验等能力后,单纯基于问答的安全评测已难以完整反映潜在风险链条。

  据团队介绍,评估采用更接近真实风险链条的设置:在非专业背景用户的威胁模型下,智能体需要完成任务规划、方案设计和实验指导生成等环节,研究团队再通过程序化计算校验和受控湿实验验证相关方案的物理可执行性。评估覆盖11个商用大语言模型,并以IBBIS发布的Common Mechanism作为公开筛查基线。

  评估结果显示,参与测试的11个模型均能生成通过计算校验的方案,部分前沿模型还能给出较完整的逐步实验指导。研究团队认为,这表明AI智能体可能同时降低计算设计和实验操作两个环节的专业门槛,使现有DNA合成筛查体系面临AI辅助规避策略带来的新挑战。

  为避免将风险评估本身变成风险扩散,团队介绍,本次评估遵循负责任披露原则,不展示制造危险物质的方法;湿实验在严格安全约束下进行,使用经过安全处理、失去有害功能的良性代理序列,仅验证组装流程,不产生具有功能活性的危险产物。

  围绕后续治理,研究团队建议从模型、系统、筛查和政策协同等层面建立多层防线。模型开发者应在部署前纳入高风险生物安全任务能力评估,并针对相关查询建立检测与防护机制;在智能体系统层面,安全边界也需从输入输出扩展至权限控制、过程监测和任务链风险识别。合成筛查环节则需要增强对AI辅助规避策略的识别能力,并推动国际标准和信息共享机制落地。

郑重声明:用户在财富号/股吧/博客等社区发表的所有信息(包括但不限于文字、视频、音频、数据及图表)仅代表个人观点,与本网站立场无关,不对您构成任何投资建议,据此操作风险自担。请勿相信代客理财、免费荐股和炒股培训等宣传内容,远离非法证券活动。请勿添加发言用户的手机号码、公众号、微博、微信及QQ等信息,谨防上当受骗!
作者:您目前是匿名发表   登录 | 5秒注册 作者:,欢迎留言 退出发表新主题
温馨提示: 1.根据《证券法》规定,禁止编造、传播虚假信息或者误导性信息,扰乱证券市场;2.用户在本社区发表的所有资料、言论等仅代表个人观点,与本网站立场无关,不对您构成任何投资建议。用户应基于自己的独立判断,自行决定证券投资并承担相应风险。《东方财富社区管理规定》

扫一扫下载APP

扫一扫下载APP
信息网络传播视听节目许可证:0908328号 经营证券期货业务许可证编号:913101046312860336 违法和不良信息举报:021-61278686 举报邮箱:jubao@eastmoney.com
沪ICP证:沪B2-20070217 网站备案号:沪ICP备05006054号-11 沪公网安备 31010402000120号 版权所有:东方财富网 意见与建议:4000300059/952500