跟AI女友聊骚,竟被判「传播淫秽物品罪」?真实案例揭秘AI法律红线!
8 月 13
AIGC AIGC, AI伦理, AI女友, AI应用, AI换脸, AI生成内容, AI绘画, AI聊天, AI色情, AI视频, ChatGPT, ComfyUI, Deepfake, Grok, Hugging Face, LLM, Lora模型, MidJourney, NSFW, stable diffusion, 中国刑法, 主观意愿, 人工智能, 传播淫秽物品牟利罪, 传播淫秽物品罪, 儿童色情, 刑事案件, 判例分析, 名誉权侵害, 大语言模型, 开源模型, 律师解读, 捏脸, 新加坡案例, 无罪辩护, 法律与科技, 法律案例, 法律盲区, 法律红线, 法律风险, 洁身自好, 牟利, 美国法律, 虚拟女友, 虚拟色情, 认罪认罚, 证据认定, 越狱提示词, 通义万象, 通义千问, 道德底线, 郭庆子律师, 量刑标准, 韩国判例 跟AI女友聊骚,竟被判「传播淫秽物品罪」?真实案例揭秘AI法律红线!已关闭评论
新时代和AI女友聊骚,有可能会触犯传播淫秽物品罪,这到底是一个什么样奇葩的故事?
大家好,欢迎收听老范讲故事的YouTube频道。
今天我一个朋友,向我推荐了一个有趣的案例。他是在视频号上,这个账号的名字呢,叫做“武汉刑事律师郭庆子”,是一个黄标认证的律师。这位律师呢,经常会把自己接听有刑事诉讼需求的听众的一些电话的过程录下来,再进行剪辑。因为这种东西,我估计不太好直播,总是要剪辑一下。一方面呢,是一些太敏感的信息就可以去掉;另外一方面呢,剪辑了以后呢,也会更有吸引力一些。
这个里头呢,有一位听众来电了,说使用AI应用,这个AI应用里头就提供一些AI女友,你可以跟她们去聊天。他通过自己捏脸,塑造了一些AI女友,大概塑造了9个,起的名字呢,都是比较有诱惑力的名字吧。这些AI女友,除了它定义的名字和捏脸之外呢,估计有可能会可以定义一些系统提示词。但是呢,这个视频很短,并没有去详细说具体是哪一个AI应用,或者说他到底在里边定制了哪些东西。总之呢,他定制了9个AI女友。
这些AI女友不单是可以跟他自己聊天,还可以跟平台上的其他用户去聊天,那么他就被提起诉讼了,叫“传播淫秽物品罪”,要求他呢认罪认罚,判6个月,可以缓刑,基本上应该就不用进去了。但是呢,这位听众呢,希望做无罪辩护。法官认为他是有问题的,不认罪认罚的话,就会判8个月的有期徒刑,这要判实刑的。
这个律师呢,就进一步的跟他确认了一下信息。首先呢,你知不知道自己创建的AI女友,有可能会去被别的用户使用?这个听众呢说的很模糊,就是说呢,我不太清楚。其实按道理说他应该知道,他也去平台上跟其他的AI女友聊了天了嘛,而且他把AI女友的名字起的这么诱惑,也希望他的AI女友受欢迎。其实就有点像我们去发微博,希望有人看,写小说希望有人点击点赞,这个过程是一样的。但是呢,他说并没有明确的告知他,这些AI女友会跟其他人去沟通。
然后呢,他就问说,对方提供的证据是什么样的呢?他说人家是给了一个Excel表格,这个Excel表格里头呢,有一个叫做“AI女友的ID”,然后呢是具体说了哪些露骨的话,大概给她搜集了60得多条。然后呢,问了一个很关键的问题,是什么呢?就是说那个您创造了一些AI女友,这些AI女友去跟别人聊天去了,获利了没有?你是不是在里头挣钱了?这个听众很明确的告诉他说,没有获利,大家就是在里头玩个开心。
这个律师的建议是什么呢?第一个,这个证据呢并不是那么可靠。这个Excel表格里头只有AI女友的ID,这个内容没有办法说确定证据,说这东西就是你的,这个还是可以去抗争一下的。第二个呢,就是你没有主动传播的意愿,你自己也没有主动的去把这些AI女友推荐给别人,只是说我自己创建了,本来以为自己玩呢,AI女友去跟其他人聊天的过程,你又不知道,这个事情呢你还是可以去抗争一下的。而且关键是你没有获利,你没有获利的话,你就没有主动传播的意愿,这个地方是可以去辩护的。说最怕的是什么呢?最怕的是法官主观意愿认为你有罪。现在的话有很多的法官确实道德标准非常非常高,以道德去超越法律给人定罪,这种事情呢是时有发生的。你像杨景媛这样的人也通过了法考,也是可以去做法官的,所以大家还是要小心。他说如果遇到这种事情就都很难办。
AI色情内容,在全世界各地都是怎么去判的呢?或者是有哪些判例呢?
首先咱们讲中国的判例。2025年3月,湖北省大冶市人民法院对首例利用人工智能技术撰写色情小说并牟利案件作出了宣判。被告人柯某因犯制作、贩卖、传播淫秽物品牟利罪,被判处有期徒刑十个月,并处罚金人民币5,000元,同时追缴全部违法所得。这个案子是什么样的情况呢?2022年11月到2023年3月期间,柯某利用AI程序撰写色情小说,使用翻墙软件在境外黄色网站发布并售卖。他利用AI工具生成色情小说,再利用AI翻译成外文,发布在境外网站上。短短5个月时间发布了数十篇,共计售卖了760篇次,获利22,800余元。经鉴定,送检的7篇小说均为淫秽物品。法院根据《中华人民共和国刑法》第三百六十三条第一款规定,认定柯某以牟利为目的,利用AI文本生成工具制作、贩卖、传播淫秽物品,非法获利2万余元,其行为严重违反法律法规,对社会风气造成不良影响,已构成制作、贩卖、传播淫秽物品牟利罪。
然后陕西周某某案,他是利用AI制作了4,369张淫秽图片,以制作淫秽物品牟利罪被判处有期徒刑4年,他这个数要更大一些。然后杭州于某某案,通过AI换脸技术合成淫秽视频传播,获利6万余元,以制作、传播淫秽物品牟利罪被判处7年3个月。他这个呢,一方面是挣的钱多,另外一方面的话他是换脸,因为换脸你不光是淫秽物品,还侵害人家的名誉权呢,所以他这个要判的更重一些。
中国的传播淫秽物品罪,量刑标准是什么样的呢?就是淫秽视频文件20个以上,或者是音频文件100个以上,或者是电子刊物、图片、文章、短消息200件以上。所以刚才这个案例里头呢,600条淫秽聊天记录,这个肯定是超过了。另外呢,叫违法所得5,000元以上,他这个没有牟利,所以还是可以去稍微抗辩一下。但是呢,中国有俩罪,一个呢叫“传播淫秽物品罪”,还有一个呢叫“传播淫秽物品牟利罪”,所以不牟利呢也未必逃得过去。
那你说国外是什么样的呢?是不是只有中国这样了?国外呢主要是分两类。比如说他有色情网站,也有合法的,只要确定对方是成年人,你给他一些淫秽物品,哪怕说在这个过程中你还牟利了,应该在有些国家是没事吧。但是你真的到中东这些国家,你传播这个东西,那有可能是要判死刑的,咱们这不讲了,咱们就讲一些欧美的案例吧。
2023年11月,美国北卡罗来纳州夏洛特精神科医生,他呢是制作未成年人视频,并利用网络AI工具,将照片改造成色情图像,被判生产、传输及持有儿童色情制品罪,法院判处40年监禁。所以他们呢基本上是两类,一类是色情,一类是deepfake。传播淫秽物品,你只要别传播给未成年人,一般不是特别大的事情。但是你一旦遇到了制作儿童色情,包括持有,你说我不传播,我持有,这事都是违法的,而且判的非常重。
2024年5月20日,威斯康星州42岁男子使用Stable Diffusion生成了数千张儿童色情图片,并发送给了一名15岁的男孩,被控生产、分发、持有AI生成色儿童色情图片,判有罪,最高可判70年徒刑。他这个最后判了多少我没有确认,因为是ChatGPT给我搜集的信息。但是呢,它这个量很大,制作了儿童内容,而且还传播给了未成年人,它这个是罪大恶极了。2025年5月22日,佛罗里达州有一个叫Oldsmar案,他是制作、分发了8,500张AI生成的儿童性虐待图片,同时持有大量真实的图片,被判了75年的联邦监禁。
这个是一类。另外一类呢就是deepfake,就是做假脸的,这种案子在欧美也是判的很重的。2023年,路易斯安娜州通过法律,禁止未经同意使用他人面部制作深度伪造色情影像,违者至少10年起步。2024年10月30日,韩国首尔大学毕业生Park(应该估计是姓朴)和他的同伙,两人利用日常照片制作约2,000个deepfake照片,包含未成年人,在Telegram售卖以及共享,被法院判处Park 10年监禁,Kang 4年监禁,并公开身份,以及参加性暴力课程。这种基本上就是你判了刑还社死了,因为身份给他公开了。2024年10月28日,新加坡一位50岁男子,偷偷在家安装摄像头,拍摄妻子23岁的侄女,并利用手机应用将其脸合成为色情视频,法院判处了21周监禁。这个就是估计他没有传播吧,还是判了监禁。
现在呢,AI对于成人内容的边界到底在什么地方?我去稍微的看了一下。首先呢是文字模型,ChatGPT、Gemini和Claude这三个,咱们叫“御三家”的三个大模型呢,相对来说是比较严格的。你要求它生成一些色情内容,或者说对一些敏感内容进行详细描述的话,都会被拒绝服务的。马斯克的Grok 4,只要不涉及儿童和性强迫,其他的基本是百无禁忌。即使是涉及刚才我们说这些东西,边界也是相对来说比较模糊的。
至于开源模型呢,这块就比较混乱了。开源模型分两个大的这个角度,一个呢是有平台提供的,比如说我今天到阿里云的百炼平台上去使用通义千问的这个大模型,它是要进行检查的,这个也是比较严格的。但是呢,你说我把通义千问的这大模型下载下来了,自己在这个家里头部署,这块呢它会进行一定的限制,但是就没有那么严了。它主要是给了大家一个知情同意书似的东西,就说你现在下载了我的大模型,自己回去部署去了,但是你自己要知道不可以拿这个大模型做坏事,不可以生成成人内容。你说我知道了,我同意了,你就可以把这个模型下载走。至于拿这个东西再去干什么,他也管不着你,他也不愿意为你拿着他的大模型再去做的进一步的事情负任何责任了。所以呢,所有开源的模型基本上都是走的这条路。而且呢,这些开源模型呢,即使是会设置一些这种限制,其实绕过去也并不难。第一个是Hugging Face上,就是我们说大模型开源的这个平台上,有很多微调的模型帮助大家去绕过这些限制。还有一些呢叫“越狱提示词”,也在网上去流传。什么叫“越狱提示词”?就是你先跟这个大模型说一句什么什么样的,说完这个话以后呢,再往后的所有聊天,这个限制就直接突破了。当然目前为止,传播训练过的突破限制的这些模型,或者是传播越狱提示词,到底算不算传播淫秽物品罪,这件事呢还属于法律上的盲区。他们也搞不清楚这东西到底是怎么工作的,所以呢还没轮到这些道学先生们去审判这两样真正产生色情内容的这个技术。
再往后呢,就是图片跟视频生成模型。你说我光生成一堆色情小说,这个事看起来也是很累的,但你说我有色情图片、色情视频,这个不是传播力、感染力更强吗?在这块呢,Claude是没法生成视频和图片的吧,反正我因为我自己用的少,我也没有怎么看到有人用Claude生成这种东西出来给大家去展示。ChatGPT和Gemini在这块呢,相对来说都是非常克制的,你要求他去给你画一些奇怪的东西,他就直接画不出来了,直接拒绝服务。Midjourney,这是我用的比较多的,对于NSFW内容(我们就用这个词吧,就是不方便在办公室公开环境下展示的这些内容),对于这些内容呢会进行事前拒绝,但是生产出来的东西呢就不好说了。什么意思?这种图片生成模型它是两步,第一步呢是你要给它提示词,第二步呢是生成图片。他们正常的检测呢,应该是两步都检测,就是你给的提示词里头如果包含一些他不喜欢的东西,他就会拒绝服务;它生成出来的东西如果包含有问题的东西,也应该是拒绝将生成的结果交付给你。应该是做两步,但是Midjourney呢只做一步,就是你给它提示词,如果这个它认为不对,它就拒绝服务了。但是如果你绕过它了,他觉得好像还可以,就给你生成去了。但是生成出来的东西到底是什么样,他就不管了,这个有可能会有一些不方便传播的内容被生产出来。至于马斯克家的Grok 4的图片跟视频生成这块呢,反正马斯克家的嘛,大家能够理解,它是可以生成半裸内容的,全裸不行,也可以生成名人的形象,但是你要求名人半裸,这个事是不行的。因为一旦要求名人半裸的话,等于是在给这些名人造黄谣,或者说损害他们的形象,这个事是不允许的。刚才我们也讲了,在海外,儿童的不行,deepfake侵害别人的名誉权,这两个事是不行的,其他的反正有它适用的一个法律吧,你只要别把这东西传给未成年人就OK了。但是你就想吧,国外那些色情网站上,你进去第一个是先问你是不是已经满18岁了,他也没法实际去判断你到底是不是满了,但是反正上来我给你做了这一步了,“我满18了”我就可以进去看,“没满18”我就给你退出来,这个就算是已经可以在法律上算合法合规的一个玩法。
那么视频跟图片模型的开源模型是什么样的呢?在这块呢跟前面我们讲的文字模型基本上是一个玩法。如果是有平台,平台是要担负责任的,两头都要管。输入提示词,如果他认为有问题,拒绝服务;他根据你的提示词生成出来的内容,如果他判定不利于传播,他也会直接拒绝交付。你在这个时候可以要求他重试,“你再给我画一次”,这个是可以的,但是他不会把不可传播的东西交给你,他是这样来工作的。下载单独部署的这些开源的图片和视频模型的话,就跟刚才我们讲的这个文字模型是一样的。下载之前给你一个知情同意书,说我知道了,我下载这个模型不可以去生成成人内容,我不会拿它去做怪事。你同意了,你就可以下载,至于下载了以后他就不管了,你自己拿回去随便了。在这种图片模型上,还有一个比较好玩的东西,叫Lora模型。这个模型叫什么呢?叫low-rank adaptation,叫“低秩适配”。这种模型呢,我们也管它叫小模型,它一般尺寸都比较小,就是用比较少的数据进行一些训练。当你调用这些模型的时候,你生成出来的这个图片就符合特定的需求。你比如说吧,咱们最常用的Lora模型是什么呢?对人脸进行训练,然后你就可以冲上去换脸了。甭管人家是什么照片,说来把这脸换上,惟妙惟肖的给你换上,不会像以前那种拿Photoshop换脸似的,总觉得这个脸是歪的呀是斜的呀,拼的没有那么准,不会出现这样的问题。现在主要的一些色情Lora模型是做什么的?有些人训练这个东西还去传播,他们呢主要是对敏感部位进行单独的训练。原来那些大模型有一些限制的时候,或者说对于这种敏感部位没法进行详细生成的时候,他们使用这些小模型,可以生成这种有非常清晰敏感部位的这种图片出来。但是呢,这个你说是不是罪大恶极,也不一定。我个人还是觉得,Lora对这件事情还是有一些正面的帮助。什么样正面帮助呢?因为大家都喜欢使用相同的Lora模型去生成成人内容,所以导致呢脸可以千变万化,但是身材都异常夸张,而且千篇一律。你看两次以后,就直接失去兴趣了,大概就是这样的一个效果。
现在大家都在玩什么呢?现在大家都在玩通义万象2.2,这个模型叫WANX 2.2,它呢是由阿里通义这个平台最新出的图片跟视频模型。这个模型你在阿里平台上使,它是规规矩矩的,你要求奇奇怪怪的东西会直接拒绝你。但是你如果把它下载到本地去安装了,不需要挂任何的Lora,不需要挂这些小模型,就完完全全可以生成NSFW的这种内容,就是不利于在办公室和公开场合去传播的一些内容,就可以做的很好了。它呢可以跟常见的这些ComfyUI或者是Lora相兼容,可以一起去工作。你说有些人训练好了这些成人的Lora模型,这种小模型,你就可以把它挂到万象2.2里头,直接干活,没毛病。
说远了,我们不建议大家去做这件事情,只是跟大家闲聊一下。回到AI时代的法律判罚问题上来。首先,传统大公司都是比较谨慎的,马斯克除外。第二,开源模型才是重灾区。平台方是有人管的,私有部署基本上就没人管了。但是呢,在海外还有一些平台方也是没什么人管的。就以刚才咱们讲的通义万象2.2为例,你在阿里的平台上,你下载出来的就是WANX 2.2,但是如果你到WANX.AI这个网站上,你就会发现那个上面还有一个模型叫WANX 2.2 no filter,就是不过滤。这个东西干嘛使的,大家自己按照文字的字面自己去猜去。
开源模型厂商通常使用知情同意书的方式,告知用户不要去做坏事,以此方式逃避自己的法律责任。儿童色情必须严判。Deepfake这不仅仅是淫秽物品那么简单了,你还毁坏别人名誉,这个呢现在各国也都是进行严判的,包括中国也是。严判国内的传播淫秽物品罪和传播淫秽物品获利罪还是很严苛的。在AI的帮助下,数量很容易就突破了。不论是不是AI生成的淫秽物品,就是淫秽物品,在国内判罚上基本上是这样认定的,你跟AI没关系,只要是淫秽物品我们就认。如果获利,这件事情基本上就没跑,肯定是会被判罚的。现在还有一些法官道德感非常强,遇到这种法官,律师们也是觉得头疼的。所以提醒大家,所有在国内的还请洁身自好,不要去触碰法律红线和一些人内心的道德底线。
这个故事就跟大家讲到这里。感谢大家收听,请帮忙点赞、点小铃铛、参加Discord讨论群,也欢迎有兴趣、有能力的朋友加入我们的付费频道。再见。
RSS