Parlez-nous de votre travail.
Je suis Senior Research Staff au Barcelona Supercomputing Center (BSC-CNS)et chercheur principal de trois projets de notre groupe. L'un d'entre eux - Saint George on a Bike - est un projet CEF Telecom (Public Open Data) sur lequel nous travaillons avec la Fondation Europeana. Il s'écarte de notre approche plus typique des villes intelligentes pour explorer comment la technologie, et l'intelligence artificielle en particulier, peuvent améliorer notre connaissance du patrimoine culturel et le rendre plus accessible aux non-spécialistes. Notre approche s'appuie sur les réseaux neuronaux, les modèles de langage et l'inférence sémantique pour générer automatiquement des métadonnées et des légendes enrichies pour les peintures iconographiques du XIIe au XVIIIe siècle.
Quel a été votre cheminement de carrière dans votre rôle?
Ma carrière de chercheur a couvert plusieurs domaines différents, reliés par le sujet commun de la conception de langage de programmation. Mon expérience m'a permis d'appliquer mes connaissances du matériel (synthèse automatique des systèmes pendant mon doctorat et mon PostDoc au MIT) à des systèmes largement distribués, à des modèles d'acteurs et à l'ingénierie logicielle tout en travaillant chez IBM Research, et aux systèmes embarqués pendant mon temps en tant que professeur invité à l'Université Carlos III de Madrid. J'ai également appliqué des techniques d'apprentissage automatique pour apprendre des modèles expressifs pour les chanteurs d'opéra en collaboration avec l'Universitat Pompeu Fabra, et construit conjointement un simulateur pour les maladies infectieuses, que nous avons maintenant réglé pour COVID-19 en collaboration avec l'Université Carlos III et l'Institut de santé Carlos III à Madrid.
Sur quoi travaillez-vous en ce moment?
Nous sommes à mi-chemin de Saint George on a Bike, et au point où nous nous concentrons sur la connexion des résultats de l'exploration de données et de l'approche d'apprentissage profond. Nous avons développé cela avec une inférence sémantique descendante pour générer des relations visuelles et améliorer les étiquettes des objets que nous détectons dans les peintures. C'est une période passionnante qui ouvre des questions de recherche de plus en plus intéressantes!
En tant que groupe, nous trouvons que le patrimoine culturel est un domaine extrêmement riche avec un énorme potentiel pour l'intelligence artificielle. Bien qu'il s'agisse d'un domaine auquel nous pouvons tous nous intéresser, aucun d'entre nous n'est un spécialiste et le travail conjoint avec des experts du patrimoine culturel est fondamental. Jusqu'à présent, notre collaboration avec Europeana a été très positive à cet égard. Ce projet est une porte ouverte sur un domaine que nous n'avions pas envisagé auparavant, et nous sommes très enthousiasmés par les opportunités et les collaborations possibles avec différents types d'intervenants pour ce travail - des musées aux personnes handicapées ou à l'éducation.
Selon vous, quelle est la plus grande opportunité que l'IA présente pour le secteur du patrimoine culturel?
L'exploration de données est généralement utilisée lorsque de grandes quantités de données sont disponibles et que nous voulons en extraire des connaissances. Ce n'est pas le cas du patrimoine culturel, qui a un nombre limité de points de données (artefacts), de nombreux styles différents. Cela crée à la fois un défi et une opportunité pour des approches mixtes qui travaillent ensemble pour s'affiner ou détecter les incohérences. C'est l'approche que nous essayons actuellement à Saint George on a Bike, avec des résultats prometteurs en termes de génération de métadonnées riches sur les objets, les sujets et les actions représentés dans les peintures.
Je crois que la plus grande opportunité que ces riches métadonnées peuvent apporter au secteur du patrimoine culturel réside dans leur impact sur les consommateurs de culture, en ravivant et en élargissant l'intérêt pour la culture, en la rendant plus digeste, relatable et omniprésente. Cela peut commencer par l'éducation scolaire et s'étendre à des domaines tels que les industries créatives ou le tourisme culturel. À un niveau plus profond, la culture reflète l'identité des personnes et des sociétés à travers le temps et une meilleure compréhension de notre passé, de ses préjugés et de ses inégalités pourrait nous aider à devenir une société plus inclusive et tolérante.
Quel est le plus grand défi?
Je crois que techniquement, l'aspect le plus difficile pour l'IA dans le patrimoine culturel est de saisir le sens, les symboles et le bon sens. Il s'agit fondamentalement d'efforts humains et constituent des problèmes plus difficiles que de simples corrélations d'apprentissage, car ils modélisent le raisonnement sur la base de connaissances qui font rarement partie des données d'entrée.
La ligne de travail que nous suivons à Saint George on a Bike aborde le problème technique intéressant de doter l'IA d'une vision culturelle. Le principal défi est de comprendre le contexte au moment où une image a été créée, le contexte en dehors duquel les symboles, les traditions et les règles qu'elle reflète perdent leur sens.
Une étude de 2018 suggère que seulement 12% des chercheurs en apprentissage automatique sont des femmes. Que pensez-vous que l'on puisse faire pour encourager davantage de femmes sur le terrain?
Mon expérience est dans les systèmes informatiques plutôt que l'IA et quand j'étais à l'école supérieure, la plupart des femmes dans notre bâtiment étaient en fait dans l'IA et les chiffres étaient raisonnablement élevés. Néanmoins, le pourcentage que vous mentionnez fait référence à l'apprentissage automatique, qui n'est qu'un domaine de l'IA. Il est vrai que si nous examinons le grand nombre de documents, il peut sembler qu'il a repris tout le domaine!
L'informatique a toujours été dominée par les hommes; Je pense que les domaines où la majorité des travailleurs sont des hommes soulèvent des problèmes non seulement pour les femmes, mais pour toute personne qui n'est pas super-compétitive, (semble) agressive, assertive ou simplement assez forte. Cela dit, je pense que l'action positive doit être appliquée avec beaucoup de soin. Tout le monde n'apprend pas ou ne travaille pas mieux en suivant les mêmes processus, et ils ne considèrent pas nécessairement la même chose comme une force ou une faiblesse. Je crois que nous devons non seulement donner plus d'opportunités aux gens qui ne correspondent pas aux canons, mais plutôt leur permettre de faire les choses différemment et d'être évalués différemment pour ce qu'ils peuvent apporter à la table.
Dans mon expérience dans le milieu universitaire et l'industrie, j'ai vu à plusieurs reprises que la plupart - pas toutes - les femmes sont très motivées par la façon dont leur travail sera appliqué, et ont tendance à rejoindre des domaines qui ont un lien avec la société ou l'individu. Dans l'IA, il peut s'agir de reconnaissance (voix, visage), de langage, de processus cognitifs, de raisonnement ou d'applications pour l'éducation, la santé ou la culture. Je n'ai pas de recette pour attirer les femmes sur le terrain, mais je pense que l'IA est mieux équipée que d'autres domaines de l'informatique pour le faire. Je suppose que ce n'est pas le point de vue le plus optimiste, compte tenu des chiffres.
Merci à Maria-Cristina pour le partage de ses expériences et de sa perspicacité! Vous pouvez en savoir plus sur son travail sur Saint George on a Bike dans une interview sur le site web du projet et explorer notre focus sur l’IA.