SWE-rebenchは、LLMベースのコーディングエージェントが実際のソフトウェアのバグや機能要望をどれだけ解決できるかを評価するベンチマークである。クラウド企業Nebiusの研究者らが2025年に公開した。公開GitHubリポジトリのissueとそれを解決したプルリクエストから自動的に課題を生成し、エージェントが作成したコード修正を非公開のテストで採点する。
広く使われるSWE-benchと同じ形式だが、課題集合を一度固定するのではなく最新のissueを継続的に追加することで、モデルの学習データに解答が含まれる汚染の問題を軽減しようとする点が特徴である。課題は主にPythonリポジトリから抽出され、モデルごとの成績を比較する公開リーダーボードが運営されている。