AI анализирует изображения 

Когда GPT получит доступ к анализу изображений (а он уже) может произойти много всего интересного. В чат-бота OpenAI недавно добавили эту фичу и это замечательно, но речь больше про концептуальные возможности. Нейросети уже давным давно умеют размечать изображения, но, что они смогут делать, если у них появится возможность анализировать изображения с помощью языковых моделей?

Подписывайтесь на мой Телеграм.

Например, определение диагноза по рентгенам 🩺 — модель, обученная на тысячах диагнозах, сможет это делать достаточно точно. Не знаю насколько это нужно, потому что процесс снятия рентгена трудоемкий и в любом случае подразумевает наличие врача/лаборанта. И не вижу особого смысла в исключении человека в этом процессе, но как как второе мнение может и имеет смысл. Алгоритм сможет перепроверить заключение или все же его и заменить, когда самого врача действительно рядом нет. Представьте кабинет в поликлинике, где проходит куча народу, а потом врач получает первыми результаты тех, которые AI посчитал самыми приоритетными для вмешательства специалиста.

Возьмем еще анализ схем для строительных проектов 🏗️. Например, вы нарисовали план своей будущей квартиры или офиса и хотите понять, где могли ошибиться. Модель проанализирует схему, покажет, что не учел человек, где план может нарушать законы и прочие нюансы.

Ну и самое футуристичное, что наверняка уже сделали китайцы. 🎦 Камеры наблюдения могут искать паттерны странного поведения. Например, кто-то оставил сумку на долгое время — алерт службе безопасности. Сейчас это делают люди и качество такого анализа в многолюдных местах, типа аэропортов, естественно оставляет желать лучшего. Не знаю нужен ли конкретно такой кейс (когда последний раз вообще было какое-либо подобное событие в общественных местах?), но модель вполне можно натренировать выявлять самые частые нарушения.