Ultralytics YOLO27: ウェイトリストに登録する
YOLOのライセンス
Ultralytics Platform

Gemini 4 Carbonの自動アノテーション:VLM Leaderboardの新たな首位モデル

Gemini 4 Carbonは、36データセットの物体検出ベンチマークで45種類のVLMの中で首位に立ち、0.584 mAP50と最高の適合率・再現率を記録しました。GPT-6.1 Terraのほうがコストパフォーマンスに優れる場合もあります。

Glenn JocherGlenn Jocher13 分で読めます
Gemini 4 Carbonのキービジュアル。結晶を囲むUltralyticsの検出ボックスに「crystal 0.97」と表示されています

Gemini 4 Carbonは、UL37(36種類のデータセットで構成される物体検出ベンチマーク)の自動アノテーションで45モデル中1位となり、2026年11月11日のUltralytics VLM Leaderboardのスナップショットで首位に立っています。mAP50は0.584、mAP50-95は0.371で、適合率と再現率の両方の列でも首位を獲得しました。10月の結果では、この2つの指標は別々のモデルが首位でした。前回首位だったGPT-6.1 Terraは、Carbonの約3分の1の画像あたりプロバイダーコストで、mAP50 0.560を記録して2位です。

そのため、データセットにラベルを付ける人にとって重要なのは、総合スコアが最も高いモデルはどれかではなく、Carbonの価格が3倍に見合うのはどんな場合かです。以下では、Carbonが新たな最高スコアを記録した分野、Terraが依然として優位な分野、Googleの12月の価格改定前後の各モデルの費用、そしてUltralytics Platformで自分のデータにCarbonを適用する方法を紹介します。

Gemini 4 Carbonが、料金を支払うすべての開発者に公開されました#

Googleは10月末、サイバーセキュリティの防御担当者を対象とした小規模グループにCarbonを初めて公開しました。2026年11月10日には、すべての有料開発者と企業にモデルを開放し、Google AI Ultraの加入者にも順次提供を開始しました。Googleの提供状況に関する投稿によると、CarbonはGoogle AI StudioとGemini for businessのAPI、およびUltra加入者向けのGeminiアプリ、AI Mode、Antigravityから利用できます。防御担当者は、GoogleのFairwind Programを通じて引き続き専用アクセスを利用できます。

GoogleはCarbonを最も強力なモデルと位置付け、サイバーセキュリティと長期的なエージェント型タスクを対象としています。Gemini 4 Carbonのモデルカードによると、このモデルはGemini 4 Argonをベースとしており、「仮説を徹底的に検討し、深く推論し、長時間にわたる検証ループを実行する」ために、Argonより多くの思考トークンを使用します。テキスト、画像、音声、動画を読み取り、最大100万トークンのコンテキストウィンドウを備え、テキストで回答します。

Googleの発表では、Carbonを検出器として宣伝していません。データラベリングで重要なのは、追加の推論がバウンディングボックスにどのような影響を与えるかであり、それを測定するのがUL37です。すべての結果はGemini 4 Carbonのモデルページで確認できます。

Ultralytics PlatformのGemini 4 Carbonモデルページ。ベンチマーク指標のカードが表示されています

Ultralytics PlatformのGemini 4 Carbonモデルページ。UL37のスコアと、データセットを自動アノテーションするためのリンクが表示されています。

Gemini 4 Carbonの物体検出:すべての精度指標で首位#

UL37では、36種類の実際の物体検出データセットから各10枚、計360枚の画像を使い、モデルのボックスが各データセットの正解ラベルにどれほど近いかを評価します。対象には医療画像、航空画像、熱画像、小売店の棚、スポーツ、文書、回路基板などが含まれます。すべての画像は、Platformユーザーが利用するものと同じ本番パイプラインで処理され、各データセット固有のクラス名が使われます。また、ユーザーの場合と同様、SAM 3.1はSAM 3以外のすべてのモデルのボックスを調整します。各データセットは同じ重みで評価されます。詳しくはUL37ベンチマークの方法論をご覧ください。

Carbonと次点の4モデルを比較すると、次のようになります。

CarbonはGPT-6.1 TerraをmAP50で0.024上回っています。物体の輪郭に沿ったボックスをより高く評価する厳しい指標mAP50-95でも、同様の差があります。Carbonは0.371で、従来の最高スコアであるClaude Fable 5.2の0.347と、Terraの0.345を上回ります。

Carbonは、ベースとなったモデルよりも性能が向上しています。Gemini 4 ArgonのスコアはmAP50が0.537、mAP50-95が0.343で、同じベンチマークとアノテーションパイプラインにおいて、Carbonはそれぞれ0.047、0.028上回ります。

Gemini 4 CarbonはUL37で最高の適合率と再現率を記録#

10月の結果では、リーダーボード上位のモデルは2つのグループに分かれていました。適合率と再現率を基準にVLMを選ぶ方法のガイドで説明しているとおりです。Gemini 4 Argonは最高の適合率0.667を記録しました。ボックスの多くは正解でしたが、一部のラベル付きオブジェクトを見落としていました。GPT-6 Astraは最高の再現率0.627を記録しました。より多くのラベル付きオブジェクトを検出する一方で、正しいボックスの割合は低くなっていました。

2026年11月11日のリーダーボードのスナップショットでは、Carbonの適合率は0.685、再現率は0.642で、45モデルすべての中で最も高い平均値を記録し、Argonの適合率とAstraの再現率を上回りました。

レビュー担当者にとって、これはベンチマークで示される最良の組み合わせです。適合率が高いほど、作成されたボックスのうち正しいものの割合が高くなります。再現率が高いほど、実際のオブジェクトのうち、すでにボックスが付いているものの割合が高くなります。適合率が低いと削除すべきボックスが残り、再現率が低いと描画すべきオブジェクトが残るため、Carbonの初回出力ではどちらの修正も比較的少なくて済みます。

SKU110Kを見ると、密集した画像でこの差が重要な理由が分かります。スーパーマーケットの棚を写したベンチマーク画像10枚には、1クラスに分類されるラベル付き商品が合計1,666点あります。CarbonはここでmAP50 0.671を記録し、Terraが持っていた従来の最高スコア0.619を上回って、全モデル中1位です。このような棚では、余分なボックスが1つあるだけで、レビュー担当者は数十個の正しいボックスの中からそれを見つける必要があります。

Ultralytics Platform上のSKU110Kデータセット画像:ラベル付き商品が密集するスーパーマーケットの棚

Ultralytics Platform上のSKU110K Dense Retail Shelf Detection 2データセット。CarbonはUL37で最高スコアとなるmAP50 0.671を記録しています。

Gemini 4 Carbonは9分野で最高スコアを記録#

Platformのモデルページに掲載されたデータセット別の結果によると、Carbonは現在、UL37の多くのデータセットで全モデル中最高スコアを獲得しています。従来の最高スコアと並べると、次のとおりです。

データセット分野Gemini 4 CarbonのmAP50従来の最高mAP50
LLVIP赤外線画像熱画像/低照度0.955Gemini 4 Argon、0.915
Cheng Brain Tumor MRI医療0.942GPT-6.1 Terra、0.904
RPC Retail Checkout小売0.935GPT-6 Astra、0.935(同率)
CeyMo Road Markings道路/交通0.905Gemini 4 Argon、0.905(同率)
Basketball and Hoopスポーツ0.882Claude Fable 5.2、0.849
FloorPlanCAD 2文書/UI/CAD0.821GPT-6 Astra、0.726
RUOD Underwater水中0.788Gemini 4 Argon、0.757
HIT-UAV熱画像ドローン航空/リモートセンシング0.689Gemini 4 Argon、0.582
SKU110Kの棚小売0.671GPT-6.1 Terra、0.619
PlantDoc自然/農業0.594Claude Fable 5.2、0.521
Airbus Oil Storage航空/リモートセンシング0.381Gemini 4 Argon、0.347
DDR網膜病変医療0.133Claude Opus 5.5、0.132

3つの傾向が見られます。Carbonは熱画像、航空画像、水中画像におけるArgonの強みを引き継ぎ、それぞれの性能をさらに高めています。特にHIT-UAVの熱画像ドローン映像で大きく向上しました。フロアプランではGPT-6 Astraを約0.1上回っています。また、髄膜腫、神経膠腫、下垂体腫瘍のクラスを含む脳腫瘍MRIでは、Terraをわずかに上回ります。

各データセットの画像は10枚ずつであるため、単一のスコアは調査のきっかけにはなりますが、結論を示すものではありません。CarbonはRPCとCeyMoで既存の記録に並び、DDRでは0.001上回っていますが、いずれもモデル間の差を見分けるには小さすぎます。

Ultralytics Platformのベンチマーク画像で、Gemini 4 Carbonが記録したボックスを正解アノテーションと並べて再生表示

モデルページでは、各ベンチマークデータセットとCOCOについて、Carbonが記録したUL37のボックスを正解アノテーションと並べて再生表示します。

Gemini 4 CarbonとGPT-6.1 Terraの比較:Terraが依然として優位な分野#

Terraは医療分野の最高スコアを2つ保持しています。リーダーボードのデータセット表では、TN5000の甲状腺超音波画像で0.935、TXL-PBCの血球顕微鏡画像で0.889を記録し、現在も最良のモデルとして掲載されています。データがどちらかのデータセットに似ている場合は、選択する前に両モデルのページでスコアを比較してください。

Terraのより大きな優位点は価格です。UL37での直接比較は次のとおりです。

UL37の結果Gemini 4 CarbonGPT-6.1 Terra
mAP500.5840.560
mAP50-950.3710.345
プロバイダーの1,000枚あたりのコスト$12.93$4.36
画像1枚あたりの中央値7.6 s5.1秒
失敗したリクエスト1%0%

費用は、料金表価格に基づき、正常にアノテーションされたベンチマーク画像1,000枚あたりのプロバイダー報告トークン使用量から推定しています。TerraはCarbonの約3分の1の費用で、mAP50の約96%を実現し、応答も速く、リクエストの失敗はありませんでした。どちらのモデルもリーダーボードの「Best value」ライン上にあり、費用と精度の両方で他のモデルに上回られていません。

有料モデルの画像1,000枚あたりのプロバイダー費用とmAP50を示すUltralytics VLM Leaderboardのグラフ

現在の料金表価格に基づく、UL37の有料モデルのmAP50対費用のグラフです。

価格差はさらに広がります。Googleの提供状況に関する投稿によると、Carbonは2026年11月30日まで導入価格として入力トークン100万個あたり2ドル、出力トークン100万個あたり10ドルで提供され、その後はそれぞれ4ドルと20ドルになります。同じトークン使用量の場合、画像1,000枚あたり12.93ドルのCarbonの費用は、12月1日には約26ドルになります。

実用上の使い分けは次のとおりです。

  • ラベル品質に費用をかける価値がある場合はCarbonを選びます。小売店の棚のような密集したシーン、熱画像や航空画像、フロアプランやCAD図面、モデルページでCarbonが大きくリードしているデータセットが対象です。
  • 予算を0.024 mAP50の差より重視する大規模な汎用バッチ処理や、TN5000の甲状腺超音波画像、TXL-PBCの血球画像のようなデータにはTerraを選びます。
  • Carbonを使う予定がある場合は、導入価格が適用される12月1日より前に大規模な処理を実行します。

どちらを選んでも、Batch AnnotationではUltralytics Platformの処理料金として処理画像1,000枚あたり1.00ドルが加算され、1回の実行につき最低0.01ドルかかります。プロバイダー料金はご自身のキーに直接請求されます。Ultralyticsはトークンにマークアップを加算しません。全体的な費用の内訳については、画像アノテーションソフトウェアの費用ガイドをご覧ください。より安価な有料モデルでは、Claude Haiku 5.5が画像1,000枚あたり0.37ドルで0.429を記録します。また、Qwen3.8 27BやSAM 3.1 Textなどのホスト型モデルは、キーが不要です。

データセットにGemini 4 Carbonで自動アノテーションを実行する方法#

Carbonは、1~200クラスの検出データセットに対応する、クラスプロンプト方式のモデルです。データセット固有のクラス名に対応したバウンディングボックスを返します。Platformはこれらのクラス名をGeminiのy-first形式でリクエストし、SAM 3.1で調整します。

  1. Google AI StudioでGemini APIキーを作成します。Carbonは有料APIティアで動作するため、キーで課金を有効にする必要があります。
  2. データセットを所有するPlatformワークスペースで、Settings > API Keysからキーを追加します。詳細はプロバイダーキーのドキュメントをご覧ください。
  3. アノテーションエディターで画像を開き、Smartモードに切り替えて、モデル選択メニューのGoogleからGemini 4 Carbonを選びます。
  4. Predictを押すか、Pを実行して、現在の画像にラベルを付けます。処理を拡大する前に、まずデータを代表する数枚の画像で試してください。
  5. データセットページでMore actions > Batch Annotationを選ぶと、ラベルのないすべての画像を一度にアノテーションできます。Platformは最初にデータセットのバージョンを保存するため、以前の状態に戻すことができます。
  6. ボックスを確認して修正します。エディターは変更を自動保存します。その後、同じワークスペースで結果を使ってUltralytics YOLO26モデルをトレーニングします。

開発者はコードからCarbonを呼び出すこともできます。Platform SDK v0.1.109のリリースで、画像予測モデルとしてgemini-4-carbonが追加されました。全体像については、Ultralytics PlatformがAIでアノテーションを自動化する方法と、人間参加型レビューがワークフローに欠かせない理由をご覧ください。医療画像解析では、あらゆるモデルのボックスを臨床専門家が確認・承認するための下書きとして扱い、診断として使用しないでください。

Gemini 4 Carbonの利用が適しているユーザー#

プロバイダー料金よりもラベル品質を重視する場合は、Gemini 4 Carbonを使用してください。これは、当社がベンチマークした自動アノテーションモデルの中で最も精度が高く、適合率と再現率の両方で現在首位に立ち、熱画像、航空画像、水中画像、小売店の棚、フロアプラン、脳MRIの各データセットで最高スコアを記録しています。

すでにArgonを利用しているチームは、導入時のトークン価格が同じでありながら、全体スコアが向上し、Argonが特に強い分野でも新たな最高スコアを得られます。ただし、その価格でもCarbonの画像あたりの費用は高くなります。予算を重視し、大規模な汎用バッチにラベルを付けるチームは、GPT-6.1 Terraをデフォルトとして使い続け、モデルページで明確な差が確認できるデータセットごとにCarbonへ切り替えるのがおすすめです。Argonについて詳しくは、Gemini 4 Argonの自動アノテーション結果をご覧ください。

よくある質問

  • 当社のUL37ベンチマークで、Gemini 4 CarbonはmAP50 0.584、mAP50-95 0.371を記録し、Ultralytics VLM Leaderboardで45モデル中1位です。また、平均適合率と平均再現率の両方で最高値を記録しています。熱画像、航空画像、水中画像、小売店の棚、フロアプラン、脳MRIの各データセットでも、全モデル中最高スコアを獲得しています。

  • 全体的な精度では上回っています。mAP50はTerraの0.560に対して0.584、mAP50-95は0.345に対して0.371です。一方、Terraは画像1,000枚あたり4.36ドルで、Carbonの12.93ドルより安く、応答も速いほか、TN5000の甲状腺超音波画像とTXL-PBCの血球画像データセットでは、現在もリーダーボードで最良のモデルです。密集した棚や熱画像のように、Carbonが大きくリードする分野でCarbonを選びましょう。

  • UL37の総合結果では、はい。CarbonはArgonをベースとし、mAP50で0.047高いスコアを記録しています(0.537に対して0.584)。また、LLVIP赤外線画像、HIT-UAVの熱画像ドローン画像、RUOD水中画像、Airbus Oil Storage画像でArgonの従来の最高スコアを上回っています。両モデルの導入時のトークン価格は同じですが、Carbonはリクエストごとにより多くの思考トークンを使用します。

  • Googleは、2026年11月30日までは入力トークン100万個あたり2ドル、出力トークン100万個あたり10ドルの導入価格を提示しており、その後はそれぞれ4ドルと20ドルになります。当社のベンチマークでは、導入価格でのCarbonのプロバイダー料金は画像1,000枚あたり12.93ドルとなり、12月1日以降に同じ使用量で利用すると約26ドルになります。Ultralytics PlatformのBatch Annotationでは、処理した画像1,000枚あたり1.00ドルが追加されます。

  • 2026年11月10日以降、有料の開発者と企業はGoogle AI StudioのGemini APIおよびGemini for businessを通じてCarbonを呼び出せます。また、GeminiアプリではGoogle AI Ultraの加入者への提供が順次開始されています。サイバーセキュリティの防御担当者は、引き続きGoogleのFairwind Programを通じて専用アクセスを利用できます。Ultralytics Platformでは、ご自身の有料Gemini APIキーを使用して利用します。

  • はい。最上位モデルでさえ、UL37での平均mAP50は0.584であり、最も難しいデータセットでのスコアは大幅に低く、たとえばAirbus Oil Storageではベンチマーク画像10枚で0.381です。すべての画像をレビューし、医療データについては臨床専門家にボックスを承認してもらってください。

執筆者

Glenn Jocher
Glenn Jocher

創業者兼CEO · Ultralytics

Glenn JocherはUltralyticsの創業者兼CEOであり、世界で最も広く採用されているコンピュータービジョンモデルであるUltralytics YOLOの開発を率いています。彼の取り組みは、より高速で高精度なモデルの構築だけではありません。ビジョンAIを活用して意義のある課題を解決できるよう、世界中の人々を支援することを目指しています。

コメント

質問したり、結果を共有したり、ほかの人をサポートしたりできます。

ソリューションを見る

スポーツにおけるコンピュータービジョン

スポーツにおけるコンピュータービジョン

Ultralytics YOLOが、選手やボールの追跡、パフォーマンス分析、コーチングへの知見、アスリートのリハビリを通じて、スポーツビジョンをどのように支えるかをご紹介します。
詳しく見る
航空画像向けコンピュータービジョン

航空画像向けコンピュータービジョン

Ultralytics YOLOを使用して、ドローンや航空画像をリアルタイムの知見に変換し、農業、水産養殖、自然保護、地理空間分析に活用できます。
詳しく見る
航空宇宙分野のコンピュータービジョン

航空宇宙分野のコンピュータービジョン

Ultralytics YOLOを活用して航空宇宙分野でコンピュータビジョンを導入し、航空機検査、滑走路上のFOD検出、空港の地上業務、複合材の欠陥検出に活用できます。
詳しく見る
セキュリティ分野のコンピュータービジョン

セキュリティ分野のコンピュータービジョン

Ultralytics YOLOモデルであらゆる施設を保護しましょう。ビジョンAIは、周辺監視、脅威検知、ナンバープレート認識、職場の安全管理を支援します。
詳しく見る
ロボティクス分野のコンピュータービジョン

ロボティクス分野のコンピュータービジョン

Ultralytics YOLOモデルで、よりスマートなマシンを実現しましょう。ロボティクスにおけるビジョンAIは、自律ナビゲーション、認識、物体追跡、リアルタイム制御を支援します。
詳しく見る
物流におけるコンピュータービジョン

物流におけるコンピュータービジョン

Ultralytics YOLOモデルで物流を効率化しましょう。ビジョンAIにより、荷物検査、仕分け、車両追跡、倉庫のリアルタイム安全監視を実現します。
詳しく見る
小売業におけるコンピュータービジョン

小売業におけるコンピュータービジョン

Ultralytics YOLOモデルで小売のあり方を変革しましょう。ビジョンAIにより、在庫追跡、棚の監視、行列管理、より高度な顧客インサイトを実現します。
詳しく見る
医療分野におけるコンピュータービジョン

医療分野におけるコンピュータービジョン

Ultralytics YOLOモデルで医療ソリューションを構築しましょう。医療分野のビジョンAIは、医用画像処理の高速化、より高度な診断、患者モニタリングを実現します。
詳しく見る
製造業におけるコンピュータービジョン

製造業におけるコンピュータービジョン

Ultralytics YOLOモデルで製造を最適化しましょう。ビジョンAIは、品質管理、欠陥検出、PPE準拠、組立ラインの自動化を推進します。
詳しく見る
自動車分野におけるコンピュータービジョン

自動車分野におけるコンピュータービジョン

Ultralytics YOLOモデルで自動車分野にコンピュータービジョンを導入しましょう。ビジョンAIは、道路の安全性、運転支援、車両の自動化を向上させ、よりスマートな道路を実現します。
詳しく見る
農業におけるコンピュータービジョン

農業におけるコンピュータービジョン

Ultralytics YOLOモデルでスマート農業にビジョンAIを導入しましょう。作物のモニタリング、家畜の追跡、精密農業を支援し、より高く効率的な収量を実現します。
詳しく見る

AIの未来を一緒に築きましょう!

機械学習の未来に向けた歩みを始めましょう