Назад к историям клиентов

Theia Scientific переосмысливает анализ данных микроскопии с помощью моделей Ultralytics YOLO

Проблема

Компания Theia Scientific поставила перед собой задачу найти модель искусственного интеллекта, которая позволила бы повысить скорость, точность и воспроизводимость анализа микроскопических изображений.

Решение

Интегрировав модели Ultralytics YOLO в свою платформу, компания Theia Scientific изменила способ обработки данных микроскопии, сделав анализ более эффективным и надежным.

Научные исследования в таких областях, как материаловедение и нанотехнологии, часто зависят от микроскопии заряженных частиц, сканирующей зондовой и оптической микроскопии для изучения структур, невидимых для человеческого глаза. Например, трансмиссионная электронная микроскопия (ТЭМ) является ключевым инструментом, способным фиксировать мелкие детали в нано- и атомном масштабе.

К сожалению, после получения таких изображений их анализ может быть медленным и сложным, часто требующим значительных ручных усилий и специальных знаний. Чтобы улучшить этот процесс, компания Theia Scientific разработала платформу Theiascope™ - систему анализа микроскопических изображений в режиме реального времени, которая объединяет модели Ultralytics YOLO для автоматизации обнаружения, сегментации и количественных измерений изображений, что делает микроскопию более быстрой, эффективной и воспроизводимой.

Изучение роли искусственного интеллекта в научной визуализации

Компания Theia Scientific, основанная братьями Кевином и Кристофером Филдами, разрабатывает передовые программные инструменты для ускорения исследований в области микроскопии. Обладая опытом в области материаловедения, промышленной автоматизации, электроники и разработки программного обеспечения, они стремятся сократить количество узких мест, с которыми сталкиваются ученые, инженеры и исследователи при анализе сложных данных изображений. 

Их флагманский продукт, платформа Theiascope™, объединяет компьютерное зрение для автоматического обнаружения, сегментирования и измерения особенностей на изображениях, полученных с помощью электронной микроскопии. Полагаясь на искусственное зрение, а не на ручное аннотирование и трассировку, платформа обеспечивает последовательные и воспроизводимые результаты.

Почему микроскопические изображения трудно анализировать вручную?

Микроскопические изображения, особенно полученные с помощью ТЕМ, очень детальны, но сложны для интерпретации. Каждое изображение содержит от сотен до тысяч мелких элементов и структур, таких как зерна и границы, которые необходимо тщательно идентифицировать, аннотировать, проследить и/или измерить, чтобы извлечь значимые данные. Традиционно это делается вручную, что медленно и может варьироваться от человека к человеку. Два исследователя могут по-разному аннотировать одно и то же изображение, что приводит к противоречивым результатам и большим погрешностям.

Этот процесс становится еще более сложным, когда речь идет о больших массивах данных. Чтобы получить достоверные сведения, часто необходимо проанализировать тысячи изображений, что при использовании ручных методов может занять недели или даже месяцы. Кроме того, вариации контраста, шумы и перекрывающиеся структуры еще больше усложняют процесс.

Для исследователей, стремящихся изучить эволюцию микроструктуры или отследить изменения с течением времени, эти проблемы могут замедлить исследования. Компания Theia Scientific признала, что для решения этих проблем необходимо более автоматизированное и надежное решение.

Улучшение рабочих процессов микроскопии с помощью моделей Ultralytics YOLO

Изучив различные подходы к автоматизации анализа данных микроскопии, компания Theia Scientific пришла к выводу, что модели Ultralytics YOLO обеспечивают скорость, точность и гибкость, необходимые для анализа изображений микроскопии в режиме реального времени, позволяя мгновенно получать количественные результаты на микроскопе во время проведения экспериментов. Модели Ultralytics YOLO, такие как Ultralytics YOLO11 и Ultralytics YOLOv8, поддерживают такие задачи компьютерного зрения, как обнаружение объектов (идентификация и определение местоположения отдельных элементов на изображении) и сегментация объектов (выделение каждого элемента на уровне пикселя). Эти задачи позволяют обнаруживать наноразмерные структуры, такие как зерна и границы, непосредственно на ТЕМ-изображениях в момент их получения.

Рис. 1. Современный рабочий процесс анализа изображений и данных микроскопии. Ученые, инженеры и исследователи в конечном итоге стремятся к открытиям и ответам в конце рабочего процесса. Между тем рабочий процесс разрознен и трудоемок, а относительное время/труд, необходимые для каждого этапа, показаны внизу. Обнаружение и агрегирование признаков - самые трудоемкие этапы рабочего процесса. Серые стрелки, ведущие обратно к сбору данных, означают необходимость повторного сбора данных, поскольку текущие данные не пригодны. Источник: Theia Scientific.

Например, в недавнем исследовании поликристаллических тонких пленок модели Theiascope™ и Ultralytics YOLO были использованы для выявления и измерения зернистых структур, влияющих на свойства материалов, используемых в электронике, покрытиях и энергетических устройствах. Точное распределение размеров зерен имеет решающее значение для понимания того, как эти пленки изменяются в ходе экспериментов. 

Одна из ключевых причин, по которой модели Ultralytics YOLO так эффективны в этих случаях, - их способность к интерполяции в больших наборах данных. Вместо того чтобы маркировать каждый кадр эксперимента, исследователи могут аннотировать лишь небольшую часть изображений, обучить модель YOLO, а затем позволить ей надежно проанализировать тысячи дополнительных кадров. Это позволяет отслеживать рост зерен и изменения границ во время экспериментов с использованием ТЭМ с минимальным ручным вмешательством.

Почему стоит выбрать модели YOLO от Ultralytics?

В исследовании поликристаллических тонких пленок, о котором говорилось ранее, Ultralytics YOLOv8 оказался в 43 раза быстрее, чем U-Net (модель, часто используемая для анализа научных изображений). Такая скорость позволяет использовать YOLO для анализа в реальном времени на микроскопе. 

В то время как U-Net точен, но медлителен, YOLO сочетает скорость с точностью, обеспечивая соответствие измерений размера зерна с точностью до 3% от истинного положения дел. Кроме того, его конструкция делает его более гибким, позволяя с легкостью работать с различными масштабами и учебными установками. Для исследователей это означает более быстрые результаты без ущерба для надежности, что идеально подходит для ускорения рабочих процессов микроскопии.

Рис. 2. По сравнению с ручной трассировкой (b) и U-Net (c), сегментация YOLOv8 (d) обеспечивает более четкие и точные контуры на микроскопических изображениях.(Источник)

Уменьшение погрешностей и повышение согласованности в микроскопии с помощью YOLO

С помощью платформы Theiascope™ компания Theia Scientific продемонстрировала, что модели Ultralytics YOLO могут ускорить анализ микроскопических изображений и эксперименты с ТЭМ, поддерживая воспроизводимые долгосрочные исследования. Платформа разработана с учетом специфики микроскопов, то есть модели YOLO используются для анализа изображений, полученных с помощью различных приборов, не требуя специальных конвейеров. Благодаря такой гибкости рабочие процессы остаются неизменными в разных экспериментах, при разных операторах и средах.

Воспроизводимость - еще один ключевой результат. Научные исследования часто требуют пересмотра и подтверждения результатов спустя годы. Благодаря различным моделям YOLO, интегрированным в Theiascope™, исследователи могут повторно запустить старые модели, такие как Ultralytics YOLOv5, на архивных наборах данных и получить последовательные результаты, а затем сравнить их непосредственно с результатами более новых моделей, таких как Ultralytics YOLO11. Это позволяет легко проверять полученные результаты даже по мере развития методов искусственного интеллекта.

Рис. 3. Платформа Theiascope™. Изображения электронной микроскопии захватываются и передаются с компьютера для сбора данных на устройство с GPU, на котором установлено веб-приложение, база данных временных рядов и модели Ultralytics YOLO. Обновления и новые модели Ultralytics YOLO могут быть добавлены в платформу с помощью OTA-обновлений. Источник: Theia Scientific.

Кроме того, модели Ultralytics YOLO обеспечивают платформе масштабируемость, необходимую для работы с большими массивами данных. Их возможности вывода в реальном времени позволяют анализировать тысячи ТЕМ-изображений за то время, которое потребовалось бы для ручного анализа всего нескольких. Это позволяет исследователям отслеживать динамические процессы, такие как рост зерен, на протяжении всего эксперимента, генерируя новые идеи и открывая новые эксперименты в масштабе и со скоростью, необходимыми для передовых исследований.

Интеграция передового искусственного интеллекта в исследовательские инструменты нового поколения

Компания Theia Scientific рассматривает модели Ultralytics YOLO как основу для будущего микроскопии. Продолжая совершенствовать методы обучения и подходы к калибровке, они стремятся к дальнейшему повышению точности в разных масштабах и экспериментальных условиях. 

В дальнейшем Theia Scientific планирует расширить возможности Theiascope™ для поддержки более сложных экспериментов in-situ и мультимодальных наборов данных. Они считают, что Vision AI станет стандартной частью исследовательских рабочих процессов следующего поколения, обеспечивая более быстрое обнаружение и более глубокое понимание в научных областях.

Хотите оптимизировать рабочие процессы в своей компании? Ознакомьтесь с нашим репозиторием GitHub, чтобы узнать больше о Vision AI. Узнайте, как модели YOLO способствуют инновациям в таких областях, как искусственный интеллект в здравоохранении и компьютерное зрение в розничной торговле. Чтобы начать работать с YOLO, узнайте, как наши варианты лицензирования могут поддержать ваши идеи.

Наше решение для вашей отрасли

Смотреть все

Часто задаваемые вопросы

Что такое модели YOLO от Ultralytics?

Модели Ultralytics YOLO - это архитектуры компьютерного зрения, разработанные для анализа визуальных данных, полученных из изображений и видео. Эти модели можно обучать для решения таких задач, как обнаружение объектов, классификация, оценка позы, отслеживание и сегментация объектов.Модели Ultralytics YOLO включают:

  • Ultralytics YOLOv5
  • Ultralytics YOLOv8
  • Ultralytics YOLO11

В чем разница между моделями Ultralytics YOLO?

Ultralytics YOLO11 - это последняя версия наших моделей компьютерного зрения. Как и предыдущие версии, она поддерживает все задачи компьютерного зрения, за которые сообщество Vision AI полюбило YOLOv8. Однако новая YOLO11 отличается большей производительностью и точностью, что делает ее мощным инструментом и идеальным союзником для решения реальных задач в промышленности.

Какую модель Ultralytics YOLO выбрать для своего проекта?

Выбор модели зависит от конкретных требований проекта. Важно учитывать такие факторы, как производительность, точность и потребности в развертывании. Вот краткий обзор:

  • Некоторые из ключевых особенностей Ultralytics YOLOv8:
  1. Зрелость и стабильность: YOLOv8 - это проверенный, стабильный фреймворк с обширной документацией и совместимостью с предыдущими версиями YOLO, что делает его идеальным для интеграции в существующие рабочие процессы.
  2. Простота использования: Благодаря удобной для новичков настройке и простой установке YOLOv8 идеально подходит для команд любого уровня подготовки.
  3. Экономичность: Она требует меньше вычислительных ресурсов, что делает ее отличным вариантом для проектов с ограниченным бюджетом.
  • Некоторые из ключевых особенностей Ultralytics YOLO11:
  1. Более высокая точность: YOLO11 превосходит YOLOv8 в бенчмарках, достигая более высокой точности при меньшем количестве параметров.
  2. Расширенные возможности: Он поддерживает такие передовые задачи, как оценка положения, отслеживание объектов и ориентированные ограничительные рамки (OBB), предлагая непревзойденную универсальность.
  3. Эффективность в реальном времени: Оптимизированный для приложений реального времени, YOLO11 обеспечивает более быстрое получение выводов и превосходно работает с пограничными устройствами и задачами, чувствительными к задержкам.
  4. Адаптивность: Благодаря широкой аппаратной совместимости YOLO11 хорошо подходит для развертывания на пограничных устройствах, облачных платформах и графических процессорах NVIDIA.

Какая лицензия мне нужна?

Репозитории Ultralytics YOLO, такие как YOLOv5 и YOLO11, по умолчанию распространяются по лицензии AGPL-3.0. Эта лицензия, одобренная OSI, предназначена для студентов, исследователей и энтузиастов, поощряет открытое сотрудничество и требует, чтобы любое программное обеспечение, использующее компоненты AGPL-3.0, также было открыто. Хотя она обеспечивает прозрачность и способствует инновациям, она может не соответствовать коммерческим сценариям использования.
Если ваш проект предполагает внедрение программного обеспечения Ultralytics и моделей искусственного интеллекта в коммерческие продукты или услуги, и вы хотите обойти требования AGPL-3.0 к открытому исходному коду, корпоративная лицензия - идеальный вариант.

‍ Преимуществакорпоративной лицензии включают:

  • Коммерческая гибкость: Модифицируйте и внедряйте исходный код и модели Ultralytics YOLO в собственные продукты без соблюдения требования AGPL-3.0 об открытом исходном коде вашего проекта.
  • Собственные разработки: Получите полную свободу в разработке и распространении коммерческих приложений, включающих код и модели Ultralytics YOLO.

Чтобы обеспечить беспрепятственную интеграцию и избежать ограничений AGPL-3.0, запросите лицензию Ultralytics Enterprise License, используя приведенную форму. Наши сотрудники помогут вам подобрать лицензию в соответствии с вашими конкретными потребностями.

Зарядитесь энергией с помощью Ultralytics YOLO

Получите передовое видение ИИ для своих проектов. Найдите подходящую лицензию для своих целей уже сегодня.

Изучите варианты лицензирования
Ссылка копируется в буфер обмена