永信至诚:AI大模型急需常态化测试评估 “数字风洞”保障AI数字健康
财经梦想家
2024-05-21 21:34:45
0

K图 688244_0

  3月13日,永信至诚(688244)董事副总经理、智能永信总经理张凯受邀出席华创证券“算力赋能,应用无限”论坛,并在会上发表《AI大模型安全测评数字风洞》主题演讲,提出AI大模型急需常态化测试评估,永信至诚“数字风洞”产品体系双管齐下,全面支撑AI大模型基础设施安全与内容风险测评,为AI数字健康提供强有力保障。

  随着AI技术的发展和广泛应用,特别是AI大模型的兴起,推动着社会生产力的不断创新与变革,也带来了前所未有的安全风险和挑战。张凯提出,“百模大战”时代下,一些实际存在的AI大模型安全问题引发公众的深切担忧,一是AI大模型作为复杂的软件系统,面临基础设施和软件安全风险,如系统漏洞、数据泄露、模型篡改等;二是AI大模型虽然提高了内容产出质量,但同时生成的内容可能包含误导信息或偏见内容,被用于不良目的,如钓鱼邮件和恶意软件的编写,降低网络攻击等犯罪门槛。

  针对AI大模型存在的安全问题以及大众的担忧,结合监管要求,张凯认为要从实质安全运营的角度出发,基于AI大模型安全测评“数字风洞”,对基础设施安全和内容安全风险进行持续性检查。

  首先,AI大模型安全测评“数字风洞”作为一个以安全检测为核心,以“产品乘服务”体系为手段,以安全风险防范化解为目标的测试评估平台,通过模拟各种网络攻击和系统入侵场景,检验AI大模型在不同攻击下的韧性,识别AI大模型基础设施存在的风险,预见和预防未来可能出现的威胁。张凯表示,同时基于永信至诚自主研发的风洞时光机系统,构建“测试-发现风险-迭代优化-再测试-再迭代优化”的科学测评流程,通过安全风险的反复验证、消除和收敛,提升实质性安全。

  其次,针对内容安全风险,张凯强调AI大模型安全测评“数字风洞”的核心优势在于集成了永信至诚AI春秋大模型和“数字风洞”产品体系的能力。基于100+提示词检测模板以及20万+基础提问,AI大模型安全测评「数字风洞」以攻击者视角构建出引导AI大模型产生不当回答的测试载荷,对AI大模型的安全规则和过滤机制进行深入测试,评估其在处理潜在敏感、违法或不合规内容时的反应,确保AI大模型输出内容更符合社会伦理和法律法规要求,避免安全隐患变成安全事件。

  对于AI大模型安全测评“数字风洞”的应用价值,张凯认为可以在多方面体现,例如,监管机构可以通过“数字风洞”对市场上已公开使用的AI大模型以及将要上市的AI大模型进行安全测评,为安全合规工作提供智能化手段支持;AI大模型厂商或AI大模型安全公司可以利用AI大模型安全测评“数字风洞”充分识别自身模型的弱点和安全内容漏洞,进一步强化产品本身的过滤系统和内容辨别能力。

  2022年,我国人工智能核心产业规模已达5000亿元。据沙利文咨询预测,2024年我国人工智能市场规模将突破7993亿元。这也意味着,随着AI技术的广泛应用,AI大模型安全测试评估赛道拥有巨大的市场潜力和发展空间。张凯认为,AI发展的大体历程可以分为三个阶段:AI助手、AI工具以及AI智能体。在AI智能体阶段,“数字风洞”作为AI大模型的安全基座,持续支撑AI大模型常态化安全测试评估,为AI技术在千行百业的安全应用保驾护航,保障AI“数字健康”,带给世界安全感。

相关内容

我国古茶树超5624万株,...
日前,《中国古茶树资源状况(2024)》白皮书发布。据统计,目前全...
2024-10-12 12:42:28
美股异动丨BuzzFeed...
数字媒体公司BuzzFeed(BZFD.US)涨近17%,报2.6...
2024-09-24 15:09:12
2024年2月10日甘肃武...
(原标题:2024年2月10日甘肃武山县蔬菜产业发展中心价格行情)...
2024-06-11 21:32:41
3月4日基金净值:国寿安保...
本站消息,3月4日,国寿安保安盛纯债3个月定开债最新单位净值为1....
2024-06-06 21:57:04
2024年2月8日全国主要...
(原标题:2024年2月8日全国主要批发市场苹果梨价格行情) ...
2024-05-26 21:34:57
永信至诚:AI大模型急需常...
  3月13日,永信至诚(688244)董事副总经理、智能永信总经...
2024-05-21 21:34:45

热门资讯

《阴阳师》给《王者荣耀》发送律... 如果过去几个月《元梦之星》和《蛋仔派对》的商战还算是暗处的话,《王者荣耀》和《阴阳师》这次则是把骂战...
全国政协委员、中国石化董事长马...   战略性新兴产业代表新一轮科技革命和产业变革的方向,近年来,我国战略性新兴产业加快培育壮大,有效释...
时尚情报|新茶饮迎来上市潮,无... 5家新茶饮企业待上市新茶饮热度再起,行业迎来上市潮。近期,沪上阿姨、茶百道、古茗、霸王茶姬、新时沏5...
古茗上市被证监会要求补充材料,... 1月26日,证监会官网发布《境外发行上市备案补充材料要求公示》,其中,古茗控股被要求补充提交说明材料...
上海股票配资平台 ,最高检:拟... 上海股票配资平台 ,最高检:拟加强未成年人罪错行为分级干预矫治   记者从最...
恒泰期货能源产业日报:欧佩克二... 汇通财经APP讯——内容摘要:原油:对于3月份油价预计其中枢较二月份小幅上移,但不宜过度乐观,成品油...
山东荣成:全国五成以上出口房车...   山东荣成是国内最大的房车生产及出口基地。记者日前走进荣成最大的一家房车制造企业。   “通过多年...
抢钱俱乐部;黄金避险继续,关注... 把握自己把握的行情。没有必要让所有的人都认同你交易。更不用把所有的交易利润都给别人说个不停,支持爱你...
科创板创新药企共论“新质生产力... 从药品"0自主创新"到国家鼓励药械创新政策频繁落地再到药企出海,中国创新药产业已步入发展快车道,正加...
售价1316万起 东风奕派eπ... 8月9日,eπ007增程版正式上市并开启交付。新车搭载东风马赫超感增程系统,CLTC纯电续航里程20...