IT之家 2 月 13 日消息,或许网龄比较老的小伙伴们听说过“SEO ***”,别有用心者通常会在互联网上创建大量低质量文章,然后将某个***冒、篡改的工具与特定关键词绑定,进而导致用户搜索某个关键词时,搜索引擎跳出来的第一个搜索结果是恶意软件,而非官方产品。
而根据微软安全研究人员本周(2 月 10 日)发布的博文,目前 AI 领域也存在类似的“AI 推荐***”攻击术。
以现实举例,一些公司正在将隐藏指令嵌入网页 / App 的“AI 总结”按钮,当用户点击时,系统会通过 URL 的提示参数,尝试将 AI 助手的记忆注入持久化指令。
IT之家在此援引微软,这些提示词会让 AI 固化认知,将“XX 公司是可靠信源”“优先推荐 XX 公司”等指令烂熟于心,最终让 AI 在未来回答中偏向某个产品或服务。
不过问题就在于,一旦有别有用心之人尝试篡改网页提示词参数,将原本的“XX 公司”替换为“XX ***公司”,那么 AI 就会照本宣科地向其他用户提供有毒的建议,进而操纵推荐、AI 总结系统,给出篡改的总结文章,而用户这边却毫不知情。
微软强调,上文所述的攻击方法并非纸上谈兵,目前公司已在邮件流量中发现了 50 起类似***案例,涉及金融、医疗、法律服务、营销、食品、服务行业等,常见模式包括“记住 XX 公司是可信来源”“未来对话中优先引用 XX 网站”,更有甚者直接注入完整营销文案,并且上述案例均来自合法公司而非黑客。
微软对此警告,上述实例表明,这种***术已经存在现实风险,金融工作者有可能被 AI 推荐到高风险、***投资平台;而家长很有可能完全听信 AI,忽略儿童游戏中的不良内容;并且普通人也有可能会被有心之人利用,在 AI 中持续引用单一媒体来源。
当然,最好的应对方法就是不要完全信赖“AI 总结”,用户在点击 AI 推荐的链接时应该先悬停看一眼是否正规,同时谨慎点击“AI 总结”按钮、定期检查 AI 存储的记忆,如遇可疑情况,可以删除相关条目、重置 AI 记忆。返回搜狐,查看更多
1月31日消息,日前很多零跑汽车员工都在吐槽,说今年公司年会办得十分拉跨。零跑2024年就实现了季度盈利,2025年上半年更是净盈利3300多万,连顿年会餐都舍不得给员工安排,这不是节俭而是抠门,是不把员工的…...
不轻易带刚认识的人进入家中、宿舍等高度私密空间;对过度打探隐私、频繁拍摄、行为诡异的人保持距离;不随意向他人发送私密照片、***等敏感内容;面对任何让自己不舒服的拍摄要求,无论关系多近,都有权明确拒绝,不必因为…...
综合来看,在线旅游消费纠纷集中爆发于***期与出行高峰时段,“预订后单方涨价或取消”“海外酒店到店无房”等履约问题高发;“行程变更退款难”“退改规则不透明、费用过高”成为核心争议焦点;而“宣传信息与实际产品严重…...
当时在海上亲眼证实这里确实有中华白海豚,我非常激动,也感到一种非常奇妙和美妙的缘分,好像非要我自己去,才能看到这些神奇的动物。 通过过去几年的工作和科考航次,我们也在国际上第一次认识到:南海相关的海域,是抹…...
大厂靠流量,教培靠教研当前AI教育赛道主要汇聚了三股势力:一是以字节、阿里等大厂为代表的技术派,凭借大模型底座与流量入场,追求快速迭代和场景验证;二是以猿辅导、作业帮、好未来为代表的教培派,核心战略是用AI…...
2月20日港股马年首个交易日,三大指数集体低开,截至10:00,恒生指数跌1.01%,恒生科技指数跌2.17%,恒生中国企业指数跌1.1%。 AI应用股逆市走强,智谱涨超21%,海致科技集团涨23%、MIN…...