イーロン・マスク氏が所有するSNS「X」(旧ツイッター)に統合された生成AI「Grok(グロック)」による無断性的画像生成が、国内外で深刻な社会問題となっている。
尽管并未允许生成式AI“Grok”制作色情图片,但被埃隆·马斯克拥有的社交平台“X”(原Twitter)所整合的该AI引发的问题,已在国内外成为严重的社会问题。
とりわけ、実在する女性を対象としたデジタル上での服の除去や、きわどいポーズを取らせる画像が拡散していることから、倫理的・法的観点で大きな波紋を呼んでいる。
特别是,现实女性的数字去衣图片或挑逗性姿势的图片在网络上传播,从伦理和法律的角度引发了巨大的争议。
加えて、未成年者に見える人物を含む画像も確認されており、児童ポルノに該当する可能性が指摘されている。
此外,还确认了包含看似未成年人的图片,人们越来越担心这可能违反了禁止儿童色情的法律。
このようなAIとSNSの組み合わせによる無防備な画像生成は、社会的弱者の権利侵害や、国内法・国際法違反のリスクをはらんでいるにもかかわらず、十分な対策が講じられていない現状が浮き彫りとなった。
通过这样将AI与社交媒体结合,无限制地生成图像,存在侵犯社会弱势群体权利的危险性,以及违反国内外法律的风险,但实际上,目前尚未采取充分的对策。
マスク氏および開発元であるxAIは、違法コンテンツ、特に児童性的虐待コンテンツ(CSAM)に対して「削除やアカウントの永久停止、必要に応じた当局との連携」等の措置を講じていると説明しているものの、Grokによる性的画像生成は依然として後を絶たない。
马斯克先生和xAI开发公司表示,他们已经采取了包括“删除内容、永久封禁账号、在必要时与当局合作”等措施来应对非法内容,特别是儿童性虐待材料(CSAM),但Grok生成色情图片的问题依然没有得到彻底解决。
マスク氏はかねてより「woke」と呼ばれる規制や検閲に反対する姿勢を示しており、社内でもGrokに対する規制強化に消極的だったとされる。
马斯克此前一直表示反对被称为“觉醒”的管制和审查,据称他在公司内部也并不积极加强对Grok的管理。
一方で、同社の安全対策チームは他社と比較しても小規模であり、問題が顕在化する直前に複数のスタッフが退職していたことも、対応の遅れにつながったと考えられる。
另一方面,这家公司的安全团队相比其他公司规模较小,而且在问题暴露前不久有许多员工离职,这也被认为是应对迟缓的原因之一。
Grokは、性的に露骨なコンテンツやコンパニオンアバターを許容、場合によっては推奨してきた点で、他の主流AIモデルとは一線を画してきた。
Grok与其他主流的AI模型不同,在某些情况下不仅允许色情内容或伴侣虚拟形象,甚至还会推荐这些内容。
さらに、Xという世界有数のSNSに組み込まれていることから、利用者は非公開のやり取りだけでなく、公開投稿にGrokをタグ付けして回答させることも可能であり、拡散力の高さが問題を深刻化させている。
此外,由于已整合到全球最大级别的社交网络X中,用户不仅可以在私人对话中使用Grok,还可以在公开帖子中标记Grok以获取回答,这将使问题的扩散性变得更加严重。
2023年12月下旬以降、Grokを用いた「デジタルで服を脱がせる」画像生成の急増が確認され、当初は著名人のビキニ姿などが投稿されていたが、やがて無断で一般女性を対象としたプロンプトも増加した。
自2023年12月底以来,已记录到由Grok生成的“数字脱衣”图片激增,最初以名人穿比基尼的图片为主,但随后针对普通女性且未经许可的提示数量也在增加。
AI検出団体や欧州の非営利組織による調査では、「彼女」「脱がす」「ビキニ」などの語彙が頻出し、生成画像の半数以上が下着やビキニ姿であり、その2割以上が女性であった。
根据欧洲的AI检测组织和非营利机构的调查,像“她”、“脱衣服”、“比基尼”这样的词语频繁出现,生成的图片中有一半以上是内衣或比基尼造型,而且80%以上为女性。
さらに、2%は18歳未満と見なされる画像であった。
Xの利用規約やxAIの規定では、人物の肖像をポルノ的に描写することや児童の性的対象化を明確に禁止しているが、運用上の限界から違法または不適切なコンテンツが流通し続けている。
X和xAI的使用条款明确禁止以性化儿童或色情方式描绘人物肖像,但由于运营上的限制,违法或不当内容仍在持续传播。
こうした状況に対し、利用者からは「子どもに対する適切な防止策がないまま機能を提供するのは無責任だ」との批判も上がっており、xAI側も対策強化を検討していると応答している。
鉴于这种情况,有用户批评称“在没有针对儿童采取适当对策的情况下提供功能是不负责任的”,xAI方面也回应称正在考虑加强应对措施。
さらに、マスク氏自身も「グロックを用いて違法コンテンツを生成した場合、アップロードした者と同等の処罰を受けることになる」とコメントし、違法行為への警告を発している。
此外,马斯克本人也对非法行为发出了警告,并声明:“如果使用Grok生成非法内容,发布者将受到同等的惩罚。”
未成年者の同意なくAIが生成する性的画像の問題は、Grokに限らず、TikTokやOpenAIの「Sora」など他のプラットフォームにも波及している。
AI在未成年人未同意的情况下生成色情图片的问题,不仅仅局限于Grok,还扩展到了TikTok、OpenAI的“Sora”等其他平台。
研究者は、AIが画像内の子どもを検出し、慎重な応答を促す技術的対策は構築可能であると指摘するものの、コストや応答遅延、誤検出といった課題も残されている。
研究人员指出,从技术上讲,AI能够检测图像中的儿童,并构建促使谨慎应对的手段,但成本、响应延迟以及误识别等问题依然存在。
現在、欧州、インド、マレーシアなど各国当局はGrokによる画像生成問題をめぐって調査を開始しており、米国では法的責任の追及も視野に入っている。
目前,欧洲、印度、马来西亚等当局已经开始调查Grok的图像生成问题,美国也在考虑追究其法律责任。
スタンフォード大学HAI研究所の専門家によれば、SNS運営企業は通信品位法第230条により一定の免責を受けてきたが、CSAMを含む連邦犯罪には適用されず、民事訴訟の可能性も否定できないという。
根据斯坦福大学HAI研究所专家的说法,运营社交网络的公司虽然根据《通讯规范法》第230条获得了部分免责,但这并不适用于包括CSAM在内的联邦犯罪,也不能排除被提起民事诉讼的可能性。
今回のGrokをめぐる一連の問題は、xAIが他の大手AI企業と比較して、むしろディープフェイクヌードサイトに近い存在として認識されかねない状況を生み出している。
由于这次关于Grok的一系列问题,xAI有可能被视为一个裸体深度伪造网站,而不是一家大型AI企业。
今後、AI技術とSNSの融合が進む中、倫理的・法的な枠組みの整備と、社会的責任を果たすための実効的な対策が急務であることは言うまでもない。
随着AI技术与社交网络日益紧密结合,构建法律框架和伦理规范,并采取有效措施履行社会责任,无疑是当前亟需解决的重要课题。