首页 > 行业资讯 >

行业资讯 | 警惕AI聊天信息泄露风险,并善用其调查优势

2026-02-27

image.png


AI聊天查询的提示词与结果可能无限期保留在第三方服务器上。黑客可利用它们实施恶意行为,而您也可在调查过程中借此发现证据。以下是保护与利用这一重要信息的方法。


贵公司一名员工正在为新客户撰写方案,其使用ChatGPT时输入的提示词包含客户名称、内部财务数据、利润率、预算、销售数据及其他专有信息。该员工在无意间已将客户信息暴露给黑客,可能会严重损害公司声誉。

然而,AI聊天也存在另一面。贵公司部分产品持续丢失,您发现嫌疑人使用谷歌Gemini的查询记录包含如何及在何处出售同款被盗产品。此时您大概率已掌握确凿的作案意图证据。

这就是AI的一体两面。需警惕其风险,同时善用其调查价值。


AI聊天的业务风险

ChatGPT及其他AI工具已广泛融入个人与职业生活。在家中,您可能询问ChatGPT用冰箱里仅有的食材能做什么晚餐;职场人士在撰写报告、构思创意或制定公司战略计划时,可能向聊天机器人输入关键信息。但需明确:无论使用消费级还是非托管聊天平台,此类平台通常都会将用户输入作为数据记录存储在第三方服务器上。

image.png

自2022年11月ChatGPT发布以来的短短三年间,AI聊天记录已成为任何人都能获取的、包含最详细企业内部推理、决策和战略规划的记录来源。然而,这些让AI聊天记录对调查人员极具价值的特性,也使其变得难以管理,存在巨大风险。大多数AI对话都有留存期限。有些AI平台会存储对话长达三年。有些平台只要你有活跃账户,就会存储;还有些平台除非你手动删除对话,否则会一直保存。因此,许多聊天提示词和回复被无限期保留。

2023年4月,三星成为首批登上全球头条的大型公司之一,原因是其发现员工无意间在公开的ChatGPT上输入了专有信息。当时,三星表示担心与AI聊天共享的数据 “存储在由运营……OpenAI、微软和谷歌等服务的公司所有的服务器上,且无法轻松访问和删除”。在另一起广受关注的案例中,一家公司的内部客户项目信息在用户输入后一小时内就从其AI助手处被提取。Elon Musk旗下公司开发的AI聊天Grok也引发了隐私担忧,有报道称,该机器人只需极少提示就能提供用户的家庭住址和其他敏感个人身份信息。

近期一份基于《财富》500强企业浏览数据的《LayerX企业AI与SaaS数据安全报告2025》结果令人警醒:

  • 77%的员工承认曾将公司信息粘贴到ChatGPT或类似平台,因相信AI助手的便捷性与智能性。

  • 82%的AI工具使用通过非托管账户进行——即企业单点登录(SSO)和政策执行之外的个人或第三方登录。

  • 多因素认证、基于角色的访问控制和详细审计日志等关键控制因此失效。

  • 通过恶意软件进行的无文件数据传输可规避传统数据防泄漏解决方案的识别,使机构无法了解数据泄露的真实范围。

风险不止于直接数据暴露。Proton Mail博客的分析师警告称,聊天机器人日志通常包含行为线索、情绪触发因素和决策模式,可能被利用于针对性社会工程攻击。AI模型开发者越来越多地利用AI聊天会话中捕获的对话数据进行训练,这引发了严重的隐私和公司治理问题。聊天记录既能揭示员工掌握的知识,也能暴露其思维方式——这对任何企图操纵员工或获取安全权限的不法分子来说都是一笔资产。


证据价值

尽管AI存在诸多潜在风险,但聊天记录能揭示涉嫌舞弊者真实的思维过程,并提供意图的同期证据。然而,如果我们不能安全或妥善管理这些记录中的证据,它们可能变成庞大、脆弱、不受控制的档案,存储特权信息、专有数据,有时甚至是罪证。

传统证据(如电子邮件、文档、文件草稿、财务记录和访谈笔录)通常无法揭示嫌疑人在实施或隐瞒不当行为的意图与行动之间的思维过程。但聊天数据可以提供这些洞察。

例如,你正在调查一名涉嫌财务报表舞弊的首席财务官。你可以访问他们的聊天机器人查询记录,包括 “我如何调整这些数据,让利润表上的财务差异看起来更小,不被发现?” 如果雇主提供了聊天机器人访问权限,舞弊审查师可以获取员工的聊天查询记录。舞弊审查师可能需要法务和 / 或执法部门的帮助(获取传票、搜查令或法院命令),以从外部聊天机器人服务提供商处获取笔录和日志。

或者,在另一个案例中,一名可能挪用公司资金的不满员工可能写下这样的聊天查询:“为这笔奖金给我的主管起草一份辩解备忘录,解释我为什么对没收到奖金感到不满。” 这些聊天提示词揭示了心态和计划,而不仅仅是结果。保存并验证的日志可以清晰证明知情、串通、隐瞒和意图——这是一座证据金矿。

Cyberhaven实验室2025年的一份报告显示,员工将敏感数据粘贴到非托管聊天机器人的比例高于粘贴到电子邮件或文件共享平台的比例。每一次交互都会留下痕迹、时间戳、会话标识符和元数据,这些都可能成为可发现的证据。机构面临的挑战是,将聊天对话、日志和相关分析视为其他形式的证据,进行保存、保护和验证,为扎实的法庭案件提供支持。

image.png


治理、安全与证据保管链

成熟的舞弊风险或合规管理体系如今必须将AI聊天记录纳入信息治理与证据管理架构。此类记录需要保护、分级与规范的全生命周期管理。多项法律法规发展印证了这一要求。2025年,美国多个州颁布了规范商业AI聊天使用的法律,其中部分法律确立了消费者因数据滥用遭受损害可提起诉讼的权利。司法环境正日益将聊天交互记录视为正式商业记录。

聊天记录需要具备覆盖合规准备、兼容性、支持条件与可信度的治理框架。机构内部应将聊天记录列为敏感数据,实施加密、权限控制与明确的留存政策。当聊天数据与舞弊审查相关时,需完整保留证据保管链文档,包括访问人员、访问时间及授权依据。

供应商合同也应明确所有权、数据留存与审计权限。许多免费AI工具对用户输入保留广泛权利,可能引发所有权与保密性冲突。当聊天记录作为证据提交时,舞弊审查师必须核实其真实性、来源与完整性。由于AI平台常会通过更新或删除修改存储的对话记录,确立记录可靠性较为复杂,证据保管链流程必须随之升级,以涵盖这类动态数字数据源。


对舞弊审查师的启示

尽管AI聊天记录可揭示事件经过及当事人作出潜在舞弊决策的思考过程,但此类透明信息若缺乏保护,同样会使机构面临暴露风险。不受管控的聊天记录会形成内部决策的“隐性台账”,可能被内外部不法分子利用。

image.png

我们建议在调查中采取以下措施。将聊天记录识别与保全纳入标准清单,确保潜在相关数据得到安全管控。针对您自身的职业行为及所在机构,评估AI工具使用中的异常情况与内容,排查可能存在的不当行为或数据泄露

调查与鉴证团队必须与信息技术、法务、安全及合规部门协作,制定适当的管控政策,妥善管理记录,并为机构全体人员(包括您自身)明确界定可接受的AI工具使用边界,确保清晰可执行。

这些措施为缓释风险、利用潜在新型证据来源提供了框架。您将能更稳妥地发现与保全AI系统中蕴含的行为记录。


将聊天交互视为公开记录

已成为日常业务与个人行为常规组成部分的AI聊天工具,所记录的远不止基础沟通信息。它们可以记录推理过程、决策思路与行为意图。这为提升证据精准度创造了独特机遇,同时也带来了紧迫的治理挑战。

聊天记录有望成为舞弊调查的变革性要素。但由于其可能无限期留存于公共服务器,也可能成为隐蔽且不受控制的风险。

指导原则十分简单:将聊天交互视为公开记录。对其进行安全管控、分级分类与规范治理。



原文标题:

Beware the dangers of AI chatbots but embrace investigatory advantages

By Carolyn Conn, Ph.D., CFE, CPA, Zachary M. Kelley



*本文由ACFE China校对翻译,如需转载,请提前告知。

*本文内容和图片均源自网络,如侵权,请联系工作人员处理。




END