被AI换脸骗走18万彩礼:深度合成技术滥用离普通人有多近?

上个月去基层派出所送材料,碰到个蹲在走廊抽烟的小伙子。眼通红,鞋上还沾着火车站的泥。一问才知道,叫杨明,皖北农村的,攒了20多年钱,凑了18万彩礼给网恋半年的“未婚妻”,结果今天奔现,站在他面前的是个两百斤的壮汉——所有照片、视频,全是用深度合成换脸做的。

你以为的神仙女友,全是算法拼出来的假人

说实话,我之前接触的深度合成案子,大多是明星换脸、造谣女网友,没想到现在都伸到农村彩礼这块了。 小杨说,“未婚妻”朋友圈天天发自拍,还跟他视频过好几次,除了偶尔说“信号不好不方便出声”,没露出半点马脚。哪知道整个账号都是那个壮汉买的,脸是换的网红的,声音是AI配的,连嘘寒问暖的话术都是模板。 几块钱。 现在随便搜一搜,十来块钱就能买到一键换脸的深度合成工具,不用懂任何技术,上传几张照片,十分钟就能出几十段聊天视频。
网络售卖一键深度合成AI换脸工具页面
网络售卖一键深度合成AI换脸工具页面
你说这门槛低到什么程度?连我老家读初二的侄子都能给同学换脸玩,更别说别有用心的骗子了。 不过话说回来,骗子骗彩礼还算直接摆到台面上的恶,更多暗戳戳的滥用,你根本防不胜防。前阵子接的咨询,一个小学女老师,被之前辞退的代课老师换脸做了不雅视频,发到了学校家长群。好好的工作差点丢了,得了大半年抑郁症。那个渣男抓住了,说“我就是开玩笑P着玩的”,最后赔了八万,但留在网上的痕迹,哪能清干净?

抓得到人,定不了责?法律现在正在摸着石头过河

很多人一听到这个,第一反应就是“把这些工具全禁了不就行了”?哪有这么简单。正常用深度合成做影视特效、做修复老照片、做虚拟主播,都是正经生意,不能一棒子打死。 问题出在滥用,可真碰到事儿,你去维权,才发现到处都是坑。 小杨这个案子,对方是用的境外服务器注册的账号,层层转钱,找这个人就花了仨月。好不容易抓到了,定诈骗没问题,可钱早就被挥霍得差不多了,18万彩礼只追回来两万。 那要是那种没到诈骗程度的滥用呢?比如换脸造谣,AI生成你的私密视频,你告谁? 告发视频的人?很多人都是用的小号,抓都抓不到。告平台?平台说“我们不知道这是深度合成的,接到举报就删了,我们没责任”。现行规则里,对平台的强制标注义务,其实还没写得太死,很多时候只能各打五十大板。
法院审理深度合成AI换脸诈骗案件庭审现场
法院审理深度合成AI换脸诈骗案件庭审现场
我前阵子跟法院的朋友聊天,他说现在每个月都能接到一两件深度合成滥用的案子,之前从来没碰到过这种新型的侵权,很多条款都是对着旧案子写的,碰到新问题只能一点点试。 比如之前那个女老师的案子,最后法院判平台承担百分之二十的责任,因为平台没有对明显违规的深度合成内容做审核,放在十年前,这种判决根本不可能。法律不是刻在石头上不变的,它是跟着这些受害者的遭遇,一点点挪步子的。

别等出事才补窟窿,规则得跑在恶的前面

别等出事才补窟窿,规则得跑在恶的前面
别等出事才补窟窿,规则得跑在恶的前面
我听过太多人说,技术是中立的,错的是人。 可问题是,当作恶的成本低到几块钱,获益能到几十万几百万,光靠道德能约束得住吗? 说实话,现在深度合成技术滥用,已经不是什么未来的问题,就是摆在我们眼前的问题。有公司用深度合成换脸做假简历骗面试,有骗子换脸成老板骗财务转账,还有人用深度合成做去世亲人的视频骗家属钱……真的缺德到家了! 我们现在要做的,不是禁技术,是给滥用套上缰绳。比如要求所有公开的深度合成内容必须打标识,平台必须留好使用者的身份信息,出了事儿能第一时间找到人,对吧?平台要是没做到,就得跟着一起赔钱。 对普通人来说,其实也得多长个心眼。涉及转钱、涉及隐私的事儿,别光看发来的视频照片,一定要打个实时语音,甚至见一面,别给骗子留空子。 你说法律什么时候能完全跟上?其实它已经在跟了。你看去年出的生成式AI管理规则,已经明确要求深度合成内容要做标识,今年好多地方都出了指导案例,越来越多的受害者能拿到合理的赔偿了。 就像第一个走新路的人总会踩进泥坑,第一个碰到新技术的法律,也总得摔几跤才能走得稳。遭殃的是那些先碰到坑的普通人,但也正是他们的遭遇,逼着规则长出新的牙齿,能咬得住新的恶。 走廊里的小杨抽完最后一根烟,把烟头狠狠踩灭,说就当花钱买个教训。可这个教训,本不该他买啊。
免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。如有侵权请联系删除。
文章名称:被AI换脸骗走18万彩礼:深度合成技术滥用离普通人有多近?
文章链接:https://m.wuhanlihunlvshi.com/cases/1715.html