黑灰产批量发布低俗引流内容、编造虚假人设、诱导用户线下消费,持续破坏线上社交社区秩序,广场、群聊、私聊作为用户核心互动场景,是违规信息高发区域。Soul App发布《2026年第二季度生态安全报告》,以三大互动场景为核心推行分层精细化内容治理,同步开展虚假人设专项整治、AI生成图像识别管控,依靠AI前置拦截与人工复核双向管控,压缩各类违规内容传播范围,维护真实有序的社区交流氛围。

Soul App针对广场、群聊、私聊制定差异化审核治理策略,重点处置低俗擦边、有偿交友、攻击辱骂、违规引流、虚假邀约消费托等违规内容。2026年第二季度,平台通过机审直接拦截违规内容400万条,处置相关跟帖评论726万条,累计拉黑违规设备3723个,日均向2533名用户推送社区规范和文明表达提醒。针对低俗、攻击性、引流类低质信息,平台结合识别、审核、流量限制实施综合处置,日均处理相关低质内容超过13万条;针对以虚假邀约诱导线下消费的消费托风险,Soul App上线专项自动化治理策略,累计处置相关风险账号约3.2万个,从源头降低用户遭遇消费欺诈的可能性。

盗用他人图片、虚构个人身份、批量搬运人设素材,是扰乱真实社交体验的突出问题,Soul App在二季度持续推进假人设与盗图内容专项治理,通过策略识别搭配人工审核同步处置违规账号与对应帖子。本季度,Soul App累计处置假人设违规账号3万余个,识别并处理相关帖子8万余条,持续压缩虚假账号、盗图内容在社区内的传播空间,减少虚假身份衍生的诈骗、骚扰风险。
AI技术贯穿全流程内容管控工作,Soul App升级批量黑灰产识别节点,相关策略的风险内容处置率由上线初期的约30%提升至60%,大幅缩短黑灰产账号存活周期;反诈AI Agent结合账号、行为、语义综合识别杀猪盘账号,准确率已达到93%以上。平台搭建“AI元数据识别-AI外显标识识别-人像图识别-AI图识别”分层识别链路,识别AI人像、虚假场景、盗图内容后推送中性提示,识别流程采用异步处理,不会阻碍用户正常发帖与内容展示。女性私聊隔离机制、未成年人AI发帖审核同步配套落地,平台日均隔绝骚扰3099次,主动识别未成年人比例超99%。

除技术管控手段外,SoulApp推进社交规范协同建设,官方账号“风纪球长”定期公示违规处罚典型案例,围绕低俗内容、不实信息、恶意引战开展安全规范、社交礼仪、网络辟谣常态化宣导,二季度相关内容累计触达用户47万人。未来Soul App将持续迭代AI内容识别模型,打通账号、设备、内容、社交链路全流程管控,结合人工审核、产品防护、用户教育完善治理闭环,平衡用户社交体验与社区内容安全。
编辑:faburen4