Как компьютер оценивает внешнее состояние POS-терминалов

30.07.2024

Привет, Хабр. Меня зовут Дмитрий Жариков. Я исследователь данных в команде эквайринга Сбера и занимаюсь моделями искусственного интеллекта. Эквайринг — это подразделение банка, которое занимается различными способами безналичной оплаты. Кроме того, в группу компаний «Сбер» входит компания федерального значения «Сберсервис», которая занимается настройкой офисного оборудования, в том числе устанавливает и обслуживает POS-терминалы. Я расскажу вам про один из наших проектов — определение состояния POS-терминалов по фотографиям.

Постановка задачи

Заявки на выезд инженеров бывают следующих типов:

  • Восстановление работоспособности POS терминалов.

  • Замена терминалов и их частей.

  • Организация ремонтных работ ТО.

  • Установка POS-терминалов.

  • Планово-профилактические работы.

Когда инженер приезжает на место, он должен сделать несколько фотографий. Во-первых, это сам POS-терминал, чтобы можно было судить о качестве сделанной работы. 

Ещё нужно сфотографировать бумажный чек с тестовой транзакцией. Это позволяет удостовериться, что терминал работает. Если снять бумажный чек по каким-то причинам нельзя (например, кончилась чековая лента), то инженер фотографирует электронный чек на экране смартфона или ноутбука. 

Со всей страны к нам поступает в среднем больше 10000 заявок в день, и в каждой заявке обычно 3-5 фотографий. Ручная проверка по выполнению работ занимает большое количество времени, и поэтому мы разработали решение с использованием алгоритмов машинного обучения, которое обрабатывает фотографии и выдает результат за ~2 часа.

Читать дальше на Хабре