Под влиянием народа вокруг, почитал как работает современный face recognition и, как всегда, рассказываю это на пальцах - у меня профессора в команде очень много им занимались и много бесед на обедах все еще про это.
Краткое резюме - по годам прямо можно проследить процесс отказа от структуры, которую придумывают люди (искать какие-то keypoints на лицах, вычислять овалы, корректировать освещение итд итп) к машинному обучению на всех уровнях.
Приведенный ниже разбор статьи из Google и статьи из Facebook - описание текущего состояния, когда тренировка начинается от raw pixel values и заканчивается уже идентификацией человека. Если кому-то интересно, могу в другой раз рассказать про предыдущие шаги.
http://public.closedcircles.com/posts/face-recognition-through-deep-learning