TU Darmstadt / ULB / TUbiblio

Efficient and High Performing Biometrics: Towards Enabling Recognition in Embedded Domains

Boutros, Fadi (2022)
Efficient and High Performing Biometrics: Towards Enabling Recognition in Embedded Domains.
Technische Universität Darmstadt
doi: 10.26083/tuprints-00021571
Dissertation, Erstveröffentlichung, Verlagsversion

Kurzbeschreibung (Abstract)

The growing need for reliable and accurate recognition solutions along with the recent innovations in deep learning methodologies has reshaped the research landscape of biometric recognition. Developing efficient biometric solutions is essential to minimize the required computational costs, especially when deployed on embedded and low-end devices. This drives the main contributions of this work, aiming at enabling wide application range of biometric technologies.

Towards enabling wider implementation of face recognition in use cases that are extremely limited by computational complexity constraints, this thesis presents a set of efficient models for accurate face verification, namely MixFaceNets. With a focus on automated network architecture design, this thesis is the first to utilize neural architecture search to successfully develop a family of lightweight face-specific architectures, namely PocketNets. Additionally, this thesis proposes a novel training paradigm based on knowledge distillation (KD), the multi-step KD, to enhance the verification performance of compact models. Towards enhancing face recognition accuracy, this thesis presents a novel margin-penalty softmax loss, ElasticFace, that relaxes the restriction of having a single fixed penalty margin.

Occluded faces by facial masks during the recent COVID-19 pandemic presents an emerging challenge for face recognition. This thesis presents a solution that mitigates the effects of wearing a mask and improves masked face recognition performance. This solution operates on top of existing face recognition models and thus avoids the high cost of retraining existing face recognition models or deploying a separate solution for masked face recognition.

Aiming at introducing biometric recognition to novel embedded domains, this thesis is the first to propose leveraging the existing hardware of head-mounted displays for identity verification of the users of virtual and augmented reality applications. This is additionally supported by proposing a compact ocular segmentation solution as a part of an iris and periocular recognition pipeline. Furthermore, an identity-preserving synthetic ocular image generation approach is designed to mitigate potential privacy concerns related to the accessibility to real biometric data and facilitate the further development of biometric recognition in new domains.

Typ des Eintrags: Dissertation
Erschienen: 2022
Autor(en): Boutros, Fadi
Art des Eintrags: Erstveröffentlichung
Titel: Efficient and High Performing Biometrics: Towards Enabling Recognition in Embedded Domains
Sprache: Englisch
Referenten: Kuijper, Prof. Dr. Arja ; Fellner, Prof. Dr. Dieter W. ; Raja, Prof. Dr. Kiran
Publikationsjahr: 2022
Ort: Darmstadt
Kollation: xvi, 219 Seiten
Datum der mündlichen Prüfung: 14 Juni 2022
DOI: 10.26083/tuprints-00021571
URL / URN: https://tuprints.ulb.tu-darmstadt.de/21571
Kurzbeschreibung (Abstract):

The growing need for reliable and accurate recognition solutions along with the recent innovations in deep learning methodologies has reshaped the research landscape of biometric recognition. Developing efficient biometric solutions is essential to minimize the required computational costs, especially when deployed on embedded and low-end devices. This drives the main contributions of this work, aiming at enabling wide application range of biometric technologies.

Towards enabling wider implementation of face recognition in use cases that are extremely limited by computational complexity constraints, this thesis presents a set of efficient models for accurate face verification, namely MixFaceNets. With a focus on automated network architecture design, this thesis is the first to utilize neural architecture search to successfully develop a family of lightweight face-specific architectures, namely PocketNets. Additionally, this thesis proposes a novel training paradigm based on knowledge distillation (KD), the multi-step KD, to enhance the verification performance of compact models. Towards enhancing face recognition accuracy, this thesis presents a novel margin-penalty softmax loss, ElasticFace, that relaxes the restriction of having a single fixed penalty margin.

Occluded faces by facial masks during the recent COVID-19 pandemic presents an emerging challenge for face recognition. This thesis presents a solution that mitigates the effects of wearing a mask and improves masked face recognition performance. This solution operates on top of existing face recognition models and thus avoids the high cost of retraining existing face recognition models or deploying a separate solution for masked face recognition.

Aiming at introducing biometric recognition to novel embedded domains, this thesis is the first to propose leveraging the existing hardware of head-mounted displays for identity verification of the users of virtual and augmented reality applications. This is additionally supported by proposing a compact ocular segmentation solution as a part of an iris and periocular recognition pipeline. Furthermore, an identity-preserving synthetic ocular image generation approach is designed to mitigate potential privacy concerns related to the accessibility to real biometric data and facilitate the further development of biometric recognition in new domains.

Alternatives oder übersetztes Abstract:
Alternatives AbstractSprache

Der wachsende Bedarf an verlässlichen und genauen Erkennungsmethoden zusammen mit den kürzlichen Fortschritten im Bereich des Deep Learning haben den Forschungsbereich der biometrischen Erkennung grundlegend verändert. Die Entwicklung von effizienten biometrischen Lösungen, die den benötigten Rechenaufwand minimieren ist wichtig, vor allem wenn die biometrischen Methoden auf eingebetteten Systemen oder Low-End-Geräten eingesetzt werden. Hintergrund dieser Arbeit ist daher, einen breiten Anwendungsbereich für biometrische Technologien zu erschließen.

Um eine breitere Anwendung von Gesichtserkennung in Szenarien mit starker Limitierung bezüglich des Rechenaufwands zu ermöglichen, präsentiert diese Thesis eine Reihe von effizienten Gesichtserkennungsmodellen namens MixFaceNets. Mit Fokus auf automatisiertem Netzwerkarchitektur-Design ist diese Thesis die erste, welche Neural Architecture Search einsetzt, um eine Reihe von kompakten Netzwerkarchitekturen, PocketNets, für die Gesichtserkennung zu entwickeln. Des Weiteren präsentiert diese Thesis ein neues auf Knowledge Distillation aufbauendes Trainingsparadigma namens multi-step KD, welches die Verifizierungsperformanz von kompakten Modellen verbessert. Um die Gesichtserkennungsgenauigkeit zu erhöhen, präsentiert diese Thesis zudem eine neuartige margin-penalty softmax loss Funktion, ElasticFace, welche die Einschränkung bezüglich einer festen penalty margin aufhebt.

Die Verdeckung von Teilen des Gesichts durch Gesichtsmasken während der jüngsten COVID-19 Pandemie stellt eine neue Herausforderung für Gesichtserkennungssysteme dar. Diese Thesis präsentiert einen Ansatz, welcher die Effekte der Maske auf die Erkennungsperformanz abschwächt und so die Performanz verbessert. Der vorgestellte Lösungsansatz setzt auf existierende Gesichtserkennungsmodelle auf und vermeidet so zusätzlichen Rechenaufwand aufgrund des erneuten Trainierens oder der Umsetzung eines separaten Lösungskonzepts für maskierte Gesichter.

Mit dem Ziel, biometrische Erkennung in neue eingebettete Domänen einzuführen, wird in dieser Thesis erstmals vorgeschlagen, Head-Mounted Displays für die Identitätsverifizierung von Benutzern von Virtual und Augmented Reality Anwendungen zu benutzen. Hierfür wird zudem eine kompakte Lösung zur Segmentierung der Augen als Teil der Erkennungspipeline vorgeschlagen. Darüber hinaus wird ein identitätserhaltender Ansatz zur Erzeugung synthetischer Bilder von Augen entwickelt, um potenzielle Datenschutzbedenken im Zusammenhang mit dem Zugang zu echten biometrischen Daten zu entkräften und die Weiterentwicklung der biometrischen Erkennung in neuen Bereichen zu erleichtern.

Deutsch
Status: Verlagsversion
URN: urn:nbn:de:tuda-tuprints-215713
Sachgruppe der Dewey Dezimalklassifikatin (DDC): 000 Allgemeines, Informatik, Informationswissenschaft > 004 Informatik
Fachbereich(e)/-gebiet(e): 20 Fachbereich Informatik
20 Fachbereich Informatik > Graphisch-Interaktive Systeme
Hinterlegungsdatum: 15 Jul 2022 09:12
Letzte Änderung: 08 Aug 2022 12:42
PPN: 497909480
Referenten: Kuijper, Prof. Dr. Arja ; Fellner, Prof. Dr. Dieter W. ; Raja, Prof. Dr. Kiran
Datum der mündlichen Prüfung / Verteidigung / mdl. Prüfung: 14 Juni 2022
Export:
Suche nach Titel in: TUfind oder in Google
Frage zum Eintrag Frage zum Eintrag

Optionen (nur für Redakteure)
Redaktionelle Details anzeigen Redaktionelle Details anzeigen