Devin Review 2.0、PRのレビューを8割安く　1件0.25〜0.75ドル

AIの開発エージェント「Devin」を出すCognitionは11月5日（米国時間）、PRのレビューの道具の新版「Devin Review 2.0」を公式のブログで発表した。8月から1件のPRを見る費用を82%下げ、ふつうのレビューは0.25〜0.75ドルで済むという。同社のXの投稿は「最大で5倍安く、1.5倍速い」とまとめた。AIでPRを量産するようになった人や小さなチームにとって、全てのPRに機械のレビューを通す費用の見当が付きやすくなる。

詰まっているのはレビュー

ブログは、PRの数は増えているのに、人がコードを読む力は増えていないと書く。PRを作った直後のレビューが、開発の流れの中で一番詰まる所になったという見方だ。

レビューを減らせば目先の速さは上がるが、利用者に見えるバグやコードの質で後から代償を払う。そこでCognitionは、エージェントにレビューを手伝わせる道を選んだ。Devin Reviewは自動でバグを探し、PRの中を順に案内する説明も作る。人が読む時に、前提をつかんでから早く読めるようにするためだ。今回の2.0で、Devinと一緒に使う時のPRのレビューは、この道具が既定になった。Devin以外の道具で作ったPRも見られる。

8割安くなっても見つける数は増えた

費用が下がった理由として、ブログは2つを挙げる。レビューの中で使うモデルの組み合わせを見直したことと、動かす仕組みを詰めたことだ。

質は落ちていないとする。費用を下げた後も、1件のPRで見つかるバグの数は平均1.22件から1.32件に増えた。顧客の平均では、直したバグ1件あたりの費用は約2.25ドルだという。

速さも上がった。レビューにかかる時間の中央値は、8月の139秒から94秒に縮んだ。

変わった所だけを見直す

使い方も広がった。GitHubかGitLabのPRに「/devin review」とコメントすれば、そのPRだけを見る。Devin CloudやDevin Desktopのレビューの画面から始めることもできる。

PRがレビューの準備を終えた時に、自動で走らせる設定もある。下書きのPRを含めるか、ファイルの場所やブランチ、ラベルで絞るかを細かく決められる。顧客は、見る価値の低いPRを外して費用を抑えているという。

同じPRで2回目からは、前回から変わった所だけを見る。新しい指摘が最新の変更に絞られるので雑音が減り、1回ごとの変更は小さいので費用も下がる。ブログによると、PRの約8割は、全ての追加の変更を含めても1ドル未満で済む。PRごとに使う額の上限も決められ、手に負えないPRで請求が膨らむのを防げる。

自動のレビューは、追加の変更を送るたびに走らせる設定にもできる。PRが育つにつれて新しいバグを探し、案内の説明も作り直す。1回きりのレビューでは、PRが閉じるまでの大半の変化を見落とすというのが同社の考えだ。

念入りな「Ultra」と独自のレビュー役

新しい機能は2つある。1つは「Devin Review Ultra」で、費用は高くなるが、より念入りに見る。決済やセキュリティのように、見落としの損がレビューの費用より大きい所に向けた設定だ。

もう1つは試験版の「Custom Reviewers」で、チームの決まりを、自分の指示で動くレビュー役にできる。Cognitionは社内で、バックエンドの安全の決まり、データベースの移行の安全、速いSQL、使いやすい画面の部品の4つを確かめるのに使っている。独自のレビュー役の指摘も、Devinが直す流れと費用の上限の決まりに乗る。

Devinと組み合わせると、Devinが指摘を1つずつ調べ、直すか、退けるか、人に回すかを決める。人が作業に戻った時に残るのは、人が見るべきバグと判断だけになるという。Xの続きの投稿によると、指摘を自動で直す「Autofix」は、Devin CloudとDevin Desktopで使える。

編集部の見方

Claude CodeやCodexでPRを量産していて、レビューが追いつかない人には、1件0.25〜0.75ドルという目安は試す理由になる。まず決まった場所やラベルのPRだけに自動のレビューを絞り、PRごとの上限額を決めてから広げると、費用の読み違いを避けやすい。ただし82%や1.32件といった数字はCognition自身の集計で、他社の道具と同じ条件で比べたものではない。自分のリポジトリで数件走らせ、指摘の当たり外れを数えてから全てのPRに広げたい。