Présentation au Colloque “Analyser l’archive visuelle par l’image” Organisateurs : M.G. Dondero, M. Hagelstein, T. Lenain, J. Portela 8 et 9 décembre 2016 | Université de Liège, Belgique

1. Enjeux des "cultural analytics”
et sémiotique visuelle
Everardo REYES
Université Paris 8 / Lab. Paragraphe
Colloque “Analyser l’archive visuelle par l’image”
Organisateurs : M.G. Dondero, M. Hagelstein, T. Lenain, J. Portela
8 et 9 décembre 2016 | Université de Liège, Belgique

2. Sémiotique des images
Méthodes

3. • Méthode linguistique / Analyse des textes
• Méthode philosophique / Analyse du système
• Méthode expérimentale
• Analyse combinatoire
[ Sonesson, 1988, 1992 ]

4. • Méthode linguistique / Analyse des textes
• Méthode philosophique / Analyse du système
• Méthode expérimentale
• Analyse combinatoire
• Méthode numérique / Analyse des données

5. Plusieurs niveaux :
Quels aspects du numérique ?
Dispositifs d’affichage et capture
Visualisations, représentations
Interfaces graphiques
Langages de programmation
Formats
Algorithmes
Structures de données
Types de données

6. • Social Computing
• Digital Humanities
• Digital Studies
• Digital Methods
• { Platform, Software, Critical Code } Studies
• Cultural Analytics
Quelques initiatives

7. Apport méthodologique
Cultural Analytics

8. • Curation de grandes collections de médias et données
• Utilisation des techniques en traitement d’image
• Méthodes d’analyse des sciences humaines
• Construction de nouvelles images et cartes analytiques
Cultural Analytics

9. • Circuits de distribution : souvent artistiques
• Usage scientifique : manquent des projets en collaboration avec
des spécialistes du domaine
• Accessibilité : outils, modèles, méthodes encore instables
• Multiple médiations :
• Pas d’accès aux “tableaux” mais à des images
• Pas d’accès aux “données” mais aux interfaces
Quelques enjeux

10. • Statistique bayésienne et géométrie euclidienne : formes graphiques
• Dimensionalité : réduction à espaces 2D
• Shape descriptors : extraction / description des formes
Approche quantitative

11. Graphiques hybrides, émergents
Image Plot
Image Montage
Image Histogram
Growing Entourage Plot
Image Cartesian 360 Transformations

12. Image Plot : Paul Klee Viz
E. Reyes, 2015, http://ereyes.net/kleeviz/
Blumen Mythos
Date
Saturation

13. Image Montage : Visualize the Public Domain
Brian Foo & NYPL Labs, 2016, http://publicdomain.nypl.org/pd-visualization/

14. Image Histogram
D. Crockett, 2016

15. Slice Histogram
D. Crockett, 2016

16. Growing Entourage Plot
D. Crockett, 2016

17. Expériences et
implémentations

18. • Image Cartesian 360 Transformation
• Des espaces 2D ➜ 3D
• Analyse ➜ Synthèse
Expériences implémentation

19. Image Cartesian 360 Transformation
E. Reyes, 2016

20. 3D Viz de couleurs selon le modèle RVB
E. Reyes, 2016

21. Visualisation 3D interactive
http://ereyes.net/rothkoviz/rothkoviz.html
E. Reyes, 2016

22. Segmentation des images
Analyse des compositions

23. Exemples filtre motion blur
Google Nike Collection Plugin
Simulation de filtres optiques
Adobe Photoshop
Exemples de
filtres numériques

24. Organisation de plages de Sans Titre de Rothko /
Sonesson, 1994

25. Shape Descriptors
Form factor
4𝝅 area
Perimeter2 4 PI * area /sqr (perimeter)
Roundness
4 area
𝝅 Max diameter2
4 * area / PI * sqr (major axis)
Compactness
√4/𝝅 area
Max Diameter
sqrt ( (4/pi) * area) / major axis
Aspect Ratio
Max dimension
Min dimension
major axis / minor axis
[ Russ, 2011:600 ] ImageJ

26. Multiples dimensions

27. Principal Component Analysis Plot
Réduction de 56 propriétés visuelles à 2D
E. Reyes, 2016

28. Principal Component Analysis Plot
Réduction de 56 propriétés visuelles à 2D
E. Reyes, 2016

29. Shape descriptors et Deep learning
https://www.nextrembrandt.com/
ING, Microsoft, 2016

30. Shape descriptors et Deep learning
https://artsexperiments.withgoogle.com/
Google Arts & Culture, 2016

31. [ Blanciak, 2008 ]
Grammaires de formes
[ Kirsch & Kirsch, 1986 ]

32. Descriptions des tableaux de
Rothko, 1949-1970
Pour une implémentation avec des
langages web
E. Reyes, 2016
Description of shape
relationships: inclusion,
proximity/repulsion, framing,
width-height, blurriness, area

33. Images générées selon le style de Rothko
Simulateur pour méthodes expérimentales
E. Reyes, 2016

34. • “Sémiotiser” des interfaces et des nouvelles images
• Aller aux sources du sens des la description numérique
• Créer, expérimenter, questionner les modèles
Méthode numérique

35. Merci de votre attention
Everardo REYES
Université Paris 8 / Lab. Paragraphe
ereyes.net