EfficientNetとは何か？クイック概要

2019年、Google AIの研究者らは、画像内のオブジェクトやパターンを認識するように構築された最先端のcomputer visionモデルであるEfficientNetを発表しました。これは主に画像分類のために設計されたものであり、画像を用意された複数の事前定義されたカテゴリのいずれかに割り当てる作業を伴います。しかし現在では、EfficientNetは物体検出、セグメンテーション、転移学習といった、より複雑なタスクのバックボーンとしても機能しています。

EfficientNet以前の機械学習およびビジョンAIモデルでは、レイヤーを追加したり、レイヤーのサイズを大きくしたりすることで精度の向上を図っていました。レイヤーとは、ニューラルネットワークモデル（人間の脳に着想を得たディープラーニングモデルの一種）において、データを処理してパターンを学習し、精度を高めるためのステップのことです。

こうした変更にはトレードオフがあり、従来のAIモデルをより大きく、より低速にする一方で、追加の精度向上は、必要とされる計算能力の大幅な増加に比べればわずかなものであることが多くありました。

EfficientNetは従来とは異なるアプローチを採用しました。深さ（レイヤー数）、幅（各レイヤーのユニット数）、画像解像度（入力画像のディテールレベル）をバランスよく同時に向上させました。コンパウンドスケーリングと呼ばれるこの手法により、利用可能な処理能力を確実かつ効率的に使い切ることができます。その結果として得られるのは、ResNetやDenseNetといった従来のモデルよりも優れたパフォーマンスを発揮できる、より小型で高速なモデルです。

Today, newer computer vision models like Ultralytics YOLO11 offer greater accuracy, speed, and efficiency. Even so, EfficientNet remains an important milestone that influenced the design of many advanced architectures.

本記事では、EfficientNetの仕組み、独自性、そしてコンピュータビジョンにおける重要性について、5分間で分かりやすく解説します。それでは始めましょう！

EfficientNetとは？#

EfficientNetが設計される以前、ほとんどの画像認識モデルは、レイヤーを調整したり、より詳細な情報を捉えるために画像入力サイズを大きくしたりすることで精度を向上させていました。これらの戦略により結果は改善されましたが、同時にモデルが重くなり、負荷も増大しました。つまり、より多くのメモリと優れたハードウェアが必要になったということです。

EfficientNetは個々のレイヤーを変更する代わりに、コンパウンドスケーリングと呼ばれる手法を用いて深さ、幅、画像解像度を同時にスケーリングします。このアプローチにより、モデルは特定の要素に過度な負担をかけることなく、効率的に拡張することが可能となります。

EfficientNetのアーキテクチャは、一連のブロックを通じて画像を処理し、各ブロックは小さなモジュールで構成されています。各ブロック内のモジュール数はモデルのサイズによって異なります。

図1: EfficientNetの構成要素。(Source)

小さいバージョンでは使用するモジュール数が少なく、大きいバージョンではモジュールがより頻繁に繰り返されます。この柔軟な設計により、EfficientNetはモバイルデバイスから大規模システムまで、幅広い用途で高い精度と効率を実現しています。

コンパウンドスケーリングの仕組み#

コンパウンドスケーリング手法は、モデルの深さ、幅、画像解像度を拡張しつつ、それらのバランスを維持します。これにより、計算能力を効率的に活用することが可能になります。このシリーズは、他のすべてのバージョンの基礎となるEfficientNet-B0という小さなベースラインモデルから始まります。

B0から、モデルはEfficientNet-B1からEfficientNet-B7へと名付けられた大きなバリエーションへとスケールアップします。ステップごとに、ネットワークはレイヤーを追加し、チャンネル数（処理に使用されるユニット数）を増やし、より高解像度の入力画像を扱えるようになります。各ステップにおける成長量はコンパウンド係数と呼ばれるパラメータによって決定され、これにより深さ、幅、解像度が個別にではなく固定された比率で確実に増加します。

図2: コンパウンドスケーリングによってモデルの幅、深さ、画像解像度が向上します。(Source)

EfficientNetのアーキテクチャ#

次に、EfficientNetのアーキテクチャを見ていきましょう。

このモデルは、モバイルおよび組み込みデバイス用に最適化された軽量なコンピュータビジョンモデルであるMobileNetV2をベースに構築されています。その中核には、Mobile Inverted Bottleneck Convolution（MBConv）ブロックという特別なレイヤーがあり、標準的な畳み込みと同様に画像データを処理しますが、計算量は少なくなっています。このブロックにより、モデルは高速かつメモリ効率の高いものとなっています。

各MBConvブロックの内部には、Squeeze-and-Excitation（SE）モジュールが組み込まれています。このモジュールは、ネットワーク内の異なるチャンネルの強さを調整します。重要なチャンネルの強度を高め、他の強度を減らします。このモジュールにより、ネットワークは画像の最も重要な特徴に集中し、不要な情報を無視することができます。また、EfficientNetモデルはSwish活性化関数（ネットワークがパターンを学習するのを助ける数学的関数）を使用しており、以前の手法よりも画像内のパターンをより良く検出できるようになっています。

さらに、DropConnectが使用されており、トレーニング中にはネットワーク内の接続の一部がランダムにオフにされます。この確率的正則化法（モデルがデータを単に記憶するのではなく一般化できるようにするためのランダム化技術）は、ネットワークに対してより堅牢な特徴表現（データ内のより強力で一般的なパターン）を学習させることで過学習を抑制し、未知のデータに対する転移性能を向上させます。

図3: EfficientNet-B0のアーキテクチャ (Source)

EfficientNetモデルバリエーションの簡単な概要#

EfficientNetモデルの仕組みについて理解が深まったところで、さまざまなモデルバリエーションについて議論しましょう。

EfficientNetモデルはB0からB7までスケールし、B0が速度と精度のバランスをとるベースラインとなります。各バージョンは深さ、幅、画像解像度を増大させることで精度を向上させますが、同時に要求される計算能力もB1、B2から高パフォーマンスのB6、B7へと増加していきます。

EfficientNet-B3およびB4モデルはより大きな画像に対してバランスをとりますが、B5は精度が必要な複雑なデータセットに対して選ばれることが多くあります。これらのモデルを超えて、最新のモデルであるEfficientNet V2は、トレーニング速度を向上させ、小さなデータセットの扱いを改善し、最新のハードウェア向けに最適化されています。

EfficientNetの用途#

EfficientNetは、他の多くのモデルよりも少ないメモリと計算能力で正確な結果を生み出すことができます。そのため、科学研究から日常的な製品まで、多くの分野で役立てられています。

医療画像解析#

肺のCTスキャンなどの医療画像には、正確な診断に不可欠な微細なディテールが含まれていることがよくあります。AIモデルはこれらの画像の分析を支援し、人間には検出しにくいパターンを発見することができます。この目的のためにEfficientNetを適応させたものの1つが、medical image analysis専用に設計されたMONAI（Medical Open Network for AI）EfficientNetです。

EfficientNetのアーキテクチャを基盤として、研究者らは肺のCTスキャンを分類して腫瘍を検出するモデルであるLung-EffNetも開発しました。このモデルは腫瘍を良性、悪性、または正常に分類でき、実験環境では99%を超える精度が報告されています。

図4: Lung-EffNetを使用した腫瘍の画像分類。(Source)

リアルタイムオブジェクト検出#

Object detectionは、画像内のオブジェクトを見つけ出してその位置を特定するプロセスです。これはセキュリティシステム、自動運転車、ドローンなどのアプリケーションにおける主要な要素です。

EfficientNetがこの分野で重要となったのは、画像から特徴を抽出する非常に効率的な方法を提供したためです。深さ、幅、解像度をスケーリングするその手法は、モデルが過度に重くなったり低速になったりすることなく高精度を実現できることを示しました。これが、EfficientDetをはじめとする多くの検出システムがEfficientNetをバックボーンとして採用している理由です。

Ultralytics YOLO11のような新しいモデルも、速度と精度の両立という同じ目標を共有しています。効率的なモデルに向かうこの傾向は、EfficientNetのようなアーキテクチャのアイデアから強く影響を受けています。

EfficientNetの長所と短所#

コンピュータビジョンプロジェクトでEfficientNetを使用することの利点をいくつか挙げます：

• パラメータ数が少なく高精度： EfficientNetは、ResNetやDenseNetのような古いモデルと同等以上の精度を実現できます。しかし、パラメータ数が少ないため、トレーニングが高速で、デプロイも容易です。
• スケーラブルなモデルファミリー： B0からB7まで取り揃えており、ベースラインネットワークを変更することなく、ハードウェアや精度の要件に合わせてバージョンを選択できます。
• Good for transfer learning: EfficientNet can deliver reliable model performance for transfer learning, which is a process of retraining a pre-trained model for a custom task. It can work as a backbone for a variety of computer vision tasks. It has also shown strong results when fine-tuned. For example, it achieved state-of-the-art accuracy on CIFAR-100, a widely used image classification dataset, with significantly fewer parameters than previous models.

EfficientNetの使用には多くの利点がありますが、留意すべき制限事項もいくつかあります：

• より多くのメモリが必要： EfficientNet-B6やEfficientNet-B7のようなバージョンは、非常に多くのGPUメモリを消費します。
• ImageNet向けに調整されたスケーリング: スケーリング設定はImageNetデータセット向けに設計されているため、ファインチューニングを行わない場合、大きく異なるデータセットではパフォーマンスが低下する可能性があります。EfficientNetのアーキテクチャとスケーリングは、その深さや幅を正当化するのに十分なデータを提供する、ImageNetのような大規模かつ多様なデータセット向けに設計されているため、これは小規模なデータセットにおいて特に顕著です。
• 一部のハードウェアで低速： EfficientNetは、最新のハードウェアでの効率化を目的として設計されたMBConvと呼ばれるレイヤーを使用しています。古いGPUやCPUでは、これらのレイヤーの動作が遅くなる可能性があります。

重要なポイント#

EfficientNetは、深さ、幅、画像解像度のバランスを保つことで、コンピュータビジョンモデルの成長方法を変えました。現在でも重要なモデルであり、新しいアーキテクチャにも影響を与え続けています。特に、コンピュータビジョンの歴史において重要な位置を占めています。

Join our community and GitHub repository to explore more about AI. Check out our solution pages to read about AI in healthcare and computer vision in automotive. Discover our licensing options and start building with computer vision today!