イーロン・マスク氏が所有するSNS「X」(旧ツイッター)に統合された生成AI「Grok(グロック)」による無断性的画像生成が、国内外で深刻な社会問題となっている。
儘管生成式AI「Grok」未被允許製作色情圖片,但由伊隆·馬斯克擁有的社群媒體「X」(前稱Twitter)所整合的這款AI,所引發的問題已成為國內外嚴重的社會議題。
とりわけ、実在する女性を対象としたデジタル上での服の除去や、きわどいポーズを取らせる画像が拡散していることから、倫理的・法的観点で大きな波紋を呼んでいる。
特別是,實際存在的女性數位去衣圖片或挑逗性姿勢的圖片在網路上擴散,從倫理及法律的觀點來看,引起了極大的爭議。
加えて、未成年者に見える人物を含む画像も確認されており、児童ポルノに該当する可能性が指摘されている。
此外,也已確認包含看似未成年人之人物的圖片,令人更加擔憂可能違反兒童色情禁止法。
このようなAIとSNSの組み合わせによる無防備な画像生成は、社会的弱者の権利侵害や、国内法・国際法違反のリスクをはらんでいるにもかかわらず、十分な対策が講じられていない現状が浮き彫りとなった。
如此一來,透過AI與社群媒體的結合無限制地生成圖片,存在著侵害社會弱勢者權益的危險性,以及違反國內外法律的風險,但實際上尚未採取足夠的對策。
マスク氏および開発元であるxAIは、違法コンテンツ、特に児童性的虐待コンテンツ(CSAM)に対して「削除やアカウントの永久停止、必要に応じた当局との連携」等の措置を講じていると説明しているものの、Grokによる性的画像生成は依然として後を絶たない。
馬斯克先生與xAI開發公司表示,針對非法內容,特別是兒童性虐待資料(CSAM),他們已採取「刪除內容、永久停用帳號,以及在必要時與當局合作」等措施,但Grok生成色情圖片的問題依然尚未解決。
マスク氏はかねてより「woke」と呼ばれる規制や検閲に反対する姿勢を示しており、社内でもGrokに対する規制強化に消極的だったとされる。
馬斯克先生過去一直表明反對被稱為「覺醒」的規制與審查,據說他在公司內部對於加強對Grok的管理也並不積極。
一方で、同社の安全対策チームは他社と比較しても小規模であり、問題が顕在化する直前に複数のスタッフが退職していたことも、対応の遅れにつながったと考えられる。
另一方面,這家公司的資安團隊相較於其他公司規模較小,且在問題浮現前夕有許多員工離職,這也被認為是導致應對遲緩的原因之一。
Grokは、性的に露骨なコンテンツやコンパニオンアバターを許容、場合によっては推奨してきた点で、他の主流AIモデルとは一線を画してきた。
Grok與其他主流的AI模型不同,在某些情況下甚至允許或推薦色情內容與陪伴型虛擬角色。
さらに、Xという世界有数のSNSに組み込まれていることから、利用者は非公開のやり取りだけでなく、公開投稿にGrokをタグ付けして回答させることも可能であり、拡散力の高さが問題を深刻化させている。
此外,由於Grok已整合到全球最大規模的社交網路X中,使用者不僅可以在私人對話中使用Grok,還可以在公開貼文中標註Grok來獲得回覆,這將使問題的擴散性更加嚴重。
2023年12月下旬以降、Grokを用いた「デジタルで服を脱がせる」画像生成の急増が確認され、当初は著名人のビキニ姿などが投稿されていたが、やがて無断で一般女性を対象としたプロンプトも増加した。
自2023年12月底開始,記錄到由Grok生成的「數位脫衣」圖片激增,最初以名人穿著比基尼的圖片為主,但之後針對一般女性且未經同意的提示數量也在增加。
AI検出団体や欧州の非営利組織による調査では、「彼女」「脱がす」「ビキニ」などの語彙が頻出し、生成画像の半数以上が下着やビキニ姿であり、その2割以上が女性であった。
根據歐洲的AI檢測組織和非營利團體的調查,「她」、「脫掉」、「比基尼」等詞彙經常出現,生成的圖片中有一半以上是穿著內衣或比基尼的形象,且超過80%為女性。
さらに、2%は18歳未満と見なされる画像であった。
Xの利用規約やxAIの規定では、人物の肖像をポルノ的に描写することや児童の性的対象化を明確に禁止しているが、運用上の限界から違法または不適切なコンテンツが流通し続けている。
X及xAI的使用條款明確禁止以性化兒童或色情方式描繪人物肖像,但由於運營上的限制,違法或不當內容依然在流通。
こうした状況に対し、利用者からは「子どもに対する適切な防止策がないまま機能を提供するのは無責任だ」との批判も上がっており、xAI側も対策強化を検討していると応答している。
因應這種情況,使用者批評說:「在沒有對兒童採取適當對策的情況下提供功能是不負責任的」,xAI方面則回應表示正在考慮加強應對措施。
さらに、マスク氏自身も「グロックを用いて違法コンテンツを生成した場合、アップロードした者と同等の処罰を受けることになる」とコメントし、違法行為への警告を発している。
此外,馬斯克本人也對非法行為發出警告,並聲明:「如果使用Grok創建非法內容,發布者將會受到同等的處罰。」
未成年者の同意なくAIが生成する性的画像の問題は、Grokに限らず、TikTokやOpenAIの「Sora」など他のプラットフォームにも波及している。
未經未成年人同意,AI生成色情影像的問題,不僅限於Grok,也擴散到TikTok、OpenAI的「Sora」等其他平台。
研究者は、AIが画像内の子どもを検出し、慎重な応答を促す技術的対策は構築可能であると指摘するものの、コストや応答遅延、誤検出といった課題も残されている。
研究人員指出,從技術上來看,AI可以檢測圖像中的兒童,並建立促使謹慎應對的措施,但成本、回應延遲以及誤判等問題依然存在。
現在、欧州、インド、マレーシアなど各国当局はGrokによる画像生成問題をめぐって調査を開始しており、米国では法的責任の追及も視野に入っている。
目前,歐洲、印度、馬來西亞等當局已開始調查Grok的圖像生成問題,美國也正在考慮追究其法律責任。
スタンフォード大学HAI研究所の専門家によれば、SNS運営企業は通信品位法第230条により一定の免責を受けてきたが、CSAMを含む連邦犯罪には適用されず、民事訴訟の可能性も否定できないという。
根據史丹佛大學HAI研究所的專家表示,經營社交網路的企業雖然因《通訊端正法》第230條而享有部分豁免權,但這項規定並不適用於包含CSAM在內的聯邦犯罪,也無法完全排除遭到民事訴訟的可能性。
今回のGrokをめぐる一連の問題は、xAIが他の大手AI企業と比較して、むしろディープフェイクヌードサイトに近い存在として認識されかねない状況を生み出している。
由於這次有關Grok的一連串問題,xAI有可能被視為裸體深偽網站,而不是一家大型AI企業。
今後、AI技術とSNSの融合が進む中、倫理的・法的な枠組みの整備と、社会的責任を果たすための実効的な対策が急務であることは言うまでもない。
隨著AI技術與社交網絡日益結合,建立法律框架與倫理規範,並採取有效措施以履行社會責任,無疑是當前亟需解決的重要課題。