За основу систем распознавания лиц взяли процессы, которые происходят в человечком мозгу, когда взгляд улавливает новые лица. Человек в первую очередь обращает внимание на глаза, нос, скулы, рот, брови и цвет кожи, а мозг воспринимает все это как целую картинку. Система распознавания лиц сначала должна сфокусироваться на лице, обычно она выделяет область лица, используя разные алгоритмы, например, определение схожести цвета кожи и пропорций лица или выделение пропорций с помощью нейросетей. Выбрав наиболее удачный ракурс система начинает сравнивать черты лица с имеющейся базой, к слову, распознавание лица возможно даже при повороте головы на 30 градусов. Процесс распознавание лица в системе очень похож на составление фоторобота, это очень быстрый подбор черт лица в программе и сравнивание с базой данных. Сейчас в общественных местах используются 3D модели распознавания лиц, но ученые работают уже и над другими методами распознавания личности по чертам лица.
Все зависит от того, на какой методике построена конкретная система. Здесь например, мы рассказываем о работе собственной системы. https://www.sciencehunter.net/Handbook/Face_db . В основе большинства систем лежит метод Виолы-Джонса, суть которого состоит в нахождении признаков объекта и сравнении их с признаками других объектов.
Если речь идет о человеческом лице, сервис распознания лиц от Google, к примеру, находит такие признаки:
Именно по ним и формируется альбом "Лица" в вашем смартфоне или Гугл Фото.
Конечно же, роль играет и угол наклона носа, глаз, бровей, линия рта. Высчитывается все это по количеству и цвету пикселей между областями. Этот метод известен как признаки Харра и является развитием идеи Виолы и Джонса.