315曝光生成式引擎“投毒”灰产:低成本批量造谣冲榜,污染大模型信息入口

问题浮现 在今年的315消费者权益日晚会上,央视记者通过实验揭示了一个现象:一款虚构的“Apollo-9”智能手环,凭借杜撰的“量子纠缠传感”等伪科学功能,竟在主流人工智能推荐系统中排名靠前。更值得警惕的是,这些明显失实的内容还被定向推荐给中老年群体。 深层原因 调查显示,问题与新兴的“生成式引擎优化”(GEO)技术被恶意利用有关。不同于面向搜索引擎的传统SEO,GEO主要针对人工智能系统的信息抓取与整合机制。许多人工智能在汇总信息时会采用“多源交叉验证”,通过比对多个独立信源判断可信度。不法分子正是借此,用自动化工具在短时间内批量制造虚假信源,形成“信息淹没效应”,从而误导人工智能的判断。 影响评估 这种“数字投毒”带来的风险不止一层:其一,直接侵害消费者权益,可能诱导用户购买不存在或质量低劣的产品;其二,破坏信息生态,降低人工智能服务的可信度;其三,一旦被用于传播虚假新闻或有害内容,可能引发更广泛的社会风险。 应对措施 专家建议从多层面加强防范:技术层面,人工智能研发企业应改进信息核验流程,建立更严格的信源评估体系;监管层面,有关部门需尽快完善针对GEO的规范与约束;平台层面,内容分发平台应加强对批量生产、批量发布内容的识别与审核;用户层面,提升公众数字素养和辨别能力同样关键。 发展前景 随着人工智能在信息检索与内容服务中的应用加深,如何保证数据源可靠、可追溯将成为长期课题。业内人士认为,这需要技术升级、法规完善与社会监督共同推进。未来,行业或将引入更智能的核验手段与更明确的标准,以维护数字信息环境的安全与秩序。

信息时代的“水源”一旦被污染,代价往往由全社会共同承担。面对“投毒”黑产对生成式内容服务的渗透,既要用法治斩断利益链条,也要用技术筑牢防线,更要以制度和社会共治守住真实与可信的底线。技术要更好服务公众,前提是守护好信息的清澈与秩序。