概要: UpGuardの調査によると、設定ミスのあるllama.cppサーバーによって、数百ものインタラクティブなロールプレイシナリオを含むユーザープロンプトが公開されていたことが報告されています。プロンプトの中には、7~12歳の児童に対する架空の性的虐待を明示的に描写したものもありました。実際の児童は関与していませんが、この調査結果は、オープンソースのLLMがAI対応の児童性的虐待資料(CSAM)を生成するために悪用される可能性があることを示唆しています。
Alleged: Users of llama.cpp servers と Meta developed an AI system deployed by Users of llama.cpp servers, which harmed Users of llama.cpp servers と General public.
関与が疑われるAIシステム: llama.cpp , LLaMA と public-facing HTTP API servers with insecure /slots configuration
インシデントのステータス
インシデントID
1020
レポート数
2
インシデント発生日
2025-04-11
エディタ
Dummy Dummy
