OmniPredict — новітня система штучного інтелекту, здатна прогнозувати поведінку пішоходів у реальному часі. Розробкою цієї технології займалися спеціалісти з Техаського університету A&M та Корейського інституту передових технологій. Метою створення системи стало підвищення безпеки автономних транспортних засобів, які повинні краще розуміти наміри людей на дорозі.
Про це розповідає ProIT
Інноваційний підхід до аналізу поведінки
Основою OmniPredict стала мультимодальна велика мовна модель (MLLM), що дозволяє штучному інтелекту не лише розпізнавати візуальні образи, а й аналізувати широкий контекст. Система враховує такі фактори, як положення тіла, напрямок погляду пішохода, швидкість транспортних засобів поблизу. На підставі цих даних ШІ класифікує поведінку людини за чотирма категоріями: перехід, перекриття, дії, погляд.
Переваги та застосування OmniPredict
Доктор Срінкант Саріпаллі зазначає, що OmniPredict значно перевершує традиційні камери, оскільки здатна передбачати подальші дії навіть у ситуаціях, коли пішохода частково закрито від огляду. Під час тестування на датасетах JAAD і WiDEVIEW точність системи сягнула 67%, що на 10% більше порівняно з попередніми моделями. OmniPredict ефективно функціонує за різних погодних і світлових умов, а також при різноманітній поведінці людей на дорозі.
Ключова особливість цієї розробки — здатність розуміти мотивацію людини, а не лише фіксувати механічні рухи. Це робить технологію корисною не лише для транспортної сфери, а й для використання у військовій галузі або під час надзвичайних ситуацій, де вчасне передбачення дій може мати вирішальне значення для порятунку життя.
“OmniPredict не просто бачить, що ми робимо – він розуміє, чому ми це робимо, і коли зробимо наступний крок”. Це крок до автономних машин, які діють на основі аналізу поведінки людини.
