Collaborative Face Recognition
With Picture Annotation for Archives
Les Archives photographiques de la Société des Nations (SDN) --- ancêtre de l'actuelle Organisation des Nations Unies (ONU) --- consistent en une collection de plusieurs milliers de photographies des assemblées, délégations, commissions, secrétariats ainsi qu'une série de portraits de diplomates. Si ces photographies, numérisées en 2001, ont été rendues accessible sur le web par l'Université de l'Indiana, celles-ci sont dépourvues de métadonnées et sont difficilement exploitables pour la recherche.
Notre projet est de valoriser cette collection en créant une infrastructure qui soit capable de détecter les visages des individus présents sur les photographies, de les classer par similarité et d'offrir une interface qui permette aux historiens de valider leur identification et de leur ajouter des métadonnées.
Le projet s'est déroulé sur deux sessions de travail, en mai (Geneva Open Libraries) et en septembre 2017 (3rd Swiss Open Cultural Data Hackathon), séparées ci-dessous.
Session 2 (sept. 2017)
L'équipe
| Université de Lausanne | United Nations Archives | EPITECH Lyon | Université de Genève |
|---|---|---|---|
| Martin Grandjean | Blandine Blukacz-Louisfert | Gregoire Lodi | Samuel Freitas |
| \ | |||
| Colin Wells | \ | ||
| \ | |||
| \ | |||
| \ | |||
| Adrien Bayles | \ | ||
| \ | |||
| \ | |||
| Sifdine Haddou | \ | ||
Compte-Rendu
Dans le cadre de la troisième édition du Swiss Open Cultural Data Hackathon, l'équipe qui s'était constituée lors du pre-event de Genève s'est retrouvée à l'Université de Lausanne les 15 et 16 septembre 2017 dans le but de réactualiser le projet et poursuivre son développement.
Vendredi 15 septembre 2017
Les discussions de la matinée se sont concentrées sur les stratégies de conception d'un système permettant de relier les images aux métadonnées, et de la pertinence des informations retenues et visibles directement depuis la plateforme. La question des droits reposant sur les photographies de la Société des Nations n'étant pas clairement résolue, il a été décidé de concevoir une plateforme pouvant servir plus largement à d'autres banques d'images de nature similaire.
Samedi 16 septembre 2017
Découverte : Wikimedia Commons dispose de son propre outil d'annotation : ImageAnnotator. Voir exemple ci-contre.
Code
Organisation
https://github.com/PictureAnnotation
Repositories
https://github.com/PictureAnnotation/Annotation
https://github.com/PictureAnnotation/Annotation-API
Data
Images en ligne sur Wikimedia Commons avec identification basique pour tests :
A (1939) https://commons.wikimedia.org/wiki/File:League_of_Nations_Commission_075.tif
B (1924-1927) https://commons.wikimedia.org/wiki/File:League_of_Nations_Commission_067.tif
Session 1 (mai 2017)
L'équipe
| Université de Lausanne | United Nations Archives | EPITECH Lyon | Archives d'Etat de Genève |
|---|---|---|---|
| Martin Grandjean martin.grandjean@unil.ch | Blandine Blukacz-Louisfert bblukacz-louisfert@unog.ch | Adam Krim adam.krim@epitech.eu | Anouk Dunant Gonzenbach anouk.dunant-gonzenbach@etat.ge.ch |
| \ | |||
| Colin Wells cwells@unog.ch | \ | ||
| \ | |||
| \ | |||
| Maria Jose Lloret mjlloret@unog.ch | Adrien Bayles adrien.bayles@epitech.eu | \ | |
| \ | |||
| \ | |||
| Paul Varé paul.vare@epitech.eu | \ | ||
Ce projet fait partie du Geneva Open Libraries Hackathon.
Compte-Rendu
Vendredi 12 mai 2017
Lancement du hackathon Geneva Open Libraries à la Bibliothèque de l'ONU (présentation du week-end, pitch d'idées de projets, ...)\ Premières idées de projets:\ - Site avec tags collaboratifs pour permettre l'identification des personnes sur des photos d'archives.\ - Identification des personnages sur des photos d'archives de manière automatisée.\ → Identifier automatiquement toutes les photos où se situe la même personne et permettre l'édition manuelle de tags qui s'appliqueront sur toutes les photos du personnage (plus besoin d'identifier photo par photo les personnages photographiés).
Samedi 13 mai 2017
Idéalisation du projet: que peut-on faire de plus pour que le projet ne soit pas qu'un simple plugin d'identification ? Que peut-on apporter de novateur dans la recherche collaborative ? Que peut-on faire de plus que Wikipédia ? Travailler sur la photo, la manière dont les données sont montrées à l'utilisateur, etc...
Problématique de notre projet: permettre une collaboration sur l'identification de photos d'archives avec une partie automatisée et une partie communautaire et manuelle.
Analyser les photos → Identifier les personnages → Afficher la photo sur un site avec tous les personnages marqués ainsi que tous les liens et notes en rapports.\ Utilisateur → Création de tags sur la photographie (objets, scènes, liens historiques, etc..) → Approbation de la communauté de l'exactitude des tags proposés.
Travail en cours sur le P.O.C.:\ - Front du site: partie graphique du site, survol des éléments...\ - Prototype de reconnaissance faciale: quelques défauts à corriger, exportation des visages...\ - Poster du projet
Dimanche 14 mai 2017
Le projet ayant été sélectionné pour représenter le hackathon Geneva Open Libraries lors de la cérémonie de clôture de l'Open Geneva Hackathons (un projet pour chacun des hackathons se tenant à Genève ce week-end), il est présenté sur la scène du Campus Biotech.
Data
Poster Genève - Mai 2017
Version PDF grande taille disponible ici. Version PNG pour le web ci-dessous.
Poster Lausanne - Sepembre 2017
Version PNG
Code
No longer available.