AI生成のスパムPRを自動隔離するGitHub App「slopguard」が登場
近年、オープンソースソフトウェア（OSS）のリポジトリにおいて、AIによって生成されたと思われる質の低いプルリクエスト（PR）やIssueが増加しているという問題が指摘されています。これらの内容は見た目はそれらしいものの、実質的な検証が行われていないケースが多く、メンテナー（管理者）の時間と労力を消耗させています。
この状況を受け、開発者が「slopguard」というGitHub Appを開発し、公開しました。本Appは、リポジトリにPRやIssueが作成されるたびに、その内容に対して0から100のスコアを自動で付与します。そして、設定された閾値（しきいち）を超えたと判断された場合、「slop-quarantine」というラベルを自動で付与し、判断理由をコメントとして残す仕組みです。
開発者は特に「自動でPRをクローズしない」点にこだわったと述べています。これは、新規の貢献者（コントリビューター）が真面目に提出したPRを機械的な判定だけで誤って排除してしまうことを防ぐためであり、最終的な承認・却下判断は必ず人間が行う設計となっています。ユーザーは`/slop approve`または`/slop reject`というコメントコマンドを使用することで、内容の確定処理を行うことができます。
精度面では、無料プランでもAPIキー不要なヒューリスティック（経験則）のみで動作可能です。開発者が用意した評価セット25ケースでのテスト結果によると、このAppはPrecision 100%、Recall 92%という高い性能を示しています。これにより、内容が単に生成されただけで実質的な検証が伴っていないPRを高い確率で検出できるとしています。
背景
オープンソース開発（OSS）の活発化に伴い、AI技術を利用したコンテンツ生成が容易になりました。その結果、実質的な貢献度が低い「スパム的」なPRやIssueが増加し、メンテナー側の工数増大という課題が生じています。本ツールは、この品質管理の自動化を目指しています。
重要用語解説
- プルリクエスト（PR）: 開発者が自分の変更をメインのリポジトリに統合する際に行う提案のこと。コードレビューや議論の場となります。
- オープンソースソフトウェア（OSS）: 誰でも自由に利用、改変、配布できるライセンスの下で公開されているソフトウェアのこと。
- ヒューリスティック: 特定の理論に基づかず、経験則や直感的なルールを用いて問題を解決する手法。本AppではAPIキー不要な簡易判定に用いられています。
今後の影響
AI生成コンテンツによるノイズがOSS開発の大きな課題となる中で、この自動隔離システムはメンテナーの負担を大幅に軽減し、リポジトリの品質維持に貢献すると予想されます。今後のGitHub App市場において、同様の「品質ゲート」機能を持つツールが増加する可能性があります。