Глоссарий

Умозаключение в реальном времени

Узнай, как умозаключения в реальном времени повышают уровень ИИ, позволяя мгновенно прогнозировать в таких приложениях, как самодвижущиеся автомобили и здравоохранение, с помощью Ultralytics.

Обучай модели YOLO просто
с помощью Ultralytics HUB.

Узнай больше

Под выводами в реальном времени понимается способность моделей машинного обучения обрабатывать данные и делать предсказания практически мгновенно. Это очень важно для приложений, требующих немедленного принятия решений, таких как автономные транспортные средства, мониторинг состояния здоровья и анализ видео в реальном времени. В отличие от пакетной обработки, когда данные собираются в течение определенного времени и обрабатываются вместе, вывод в реальном времени обрабатывает каждую точку данных по мере ее поступления, предоставляя немедленные результаты.

Важность в искусственном интеллекте и ML

Умозаключения в реальном времени играют ключевую роль в том, чтобы системы ИИ могли своевременно взаимодействовать с реальным миром. Например, самодвижущиеся автомобили полагаются на данные, получаемые в реальном времени от датчиков, чтобы принимать решения о навигации за доли секунды. Аналогично, в ИИ в здравоохранении непрерывный мониторинг жизненных показателей пациента может мгновенно вызывать оповещения при обнаружении аномалий.

Возможности реального времени улучшают пользовательский опыт в таких приложениях, как решения для умного дома с поддержкой ИИ, где системы на базе ИИ динамически регулируют освещение, температуру и настройки безопасности, основываясь на поведении пользователя.

Как это работает

Выводы в реальном времени обычно предполагают развертывание обученных моделей на мощном оборудовании, таком как GPU или TPU, которое способно справиться с вычислительными требованиями. Такие модели, как Ultralytics YOLO оптимизированы для скорости, что позволяет им выполнять обнаружение объектов в режиме реального времени на различных платформах.

Интеграция с пограничными вычислениями, где вычисления производятся в непосредственной близости от источника данных, еще больше повышает эффективность выводов в реальном времени за счет снижения задержек. Узнай больше о развертывании моделей на пограничных устройствах с помощью Ultralytics HUB for Seamless Machine Learning.

Применение в реальном мире

Автономные транспортные средства

Одно из самых сложных применений выводов в реальном времени - автономное вождение. AI in Self-Driving Cars демонстрирует, как самодвижущиеся автомобили используют датчики и модели искусственного интеллекта для мониторинга окружающей среды, обнаружения препятствий и мгновенного принятия решений по управлению.

Розничная торговля и управление запасами

В розничной торговле умозаключения в реальном времени могут оптимизировать управление запасами, повышая эффективность систем инвентаризации, управляемых ИИ. Визуальные системы ИИ помогают предприятиям поддерживать точный уровень запасов, сокращать потери и эффективно удовлетворять запросы покупателей.

Отличие от схожих концепций

В то время как умозаключения в реальном времени сосредоточены на немедленной обработке данных, такие концепции, как пакетная обработка в вычислениях, собирают и обрабатывают данные группами в запланированное время. Системы реального времени, напротив, всегда активны, обрабатывая данные непрерывно.

Понимание развертывания моделей включает в себя подготовку ML-моделей к использованию, в том числе настройку окружения для работы в реальном времени, отличая ее от вывода в реальном времени.

Достижения и проблемы

Постоянное совершенствование аппаратных возможностей и методов оптимизации моделей, таких как оптимизация моделей с помощью обрезки и квантования, способствуют более быстрому выводу в реальном времени. Однако проблемы остаются, особенно в том, что касается размера модели, энергопотребления и обеспечения точности без задержек. Изучи методы достижения более высокой скорости вычислений с помощью Ultralytics YOLOv8 и OpenVINO.

Умозаключения в реальном времени необходимы для использования всего потенциала ИИ в динамичных средах. По мере развития технологии ее применение будет расширяться, предлагая инновационные решения в различных отраслях. Те, кто заинтересован в изучении этих методов, могут поэкспериментировать с Ultralytics HUB for Model Deployment- платформой, которая упрощает обработку данных в реальном времени.

Читать полностью