• OpenCV, bibliothèque de Computer Vision : Dans un premier temps, nous utiliserons OpenCV pour montrer rapidement certains algorithmes de traitement d'images mais aussi pour sa facilité d'usage comme bibliothèque de gestion de fenêtres, de chargement de différents types d'images et de gestion des devices de capture vidéo. Ce dernier point restera utile le long du cours.

• Site de la SDL - Simple DirectMedia Layer : Nous utiliserons la SDL-2 comme bibliothèque donnant accès à un contexte OpenGL 3.2 ou plus et aussi comme bibliothèque de gestion des évènements et des interactions utilisateur. Elle pourra, si besoin, être utilisée pour la gestion des threads, des fonts, au chargement de divers formats d'images ou de sons.

• Site d'OpenGL - Open Graphics Library : OpenGL sera utilisé en version CORE 3.2 et + (voire 3.3 et +). Nous utiliserons la documentation des Reference Pages d'OpenGL 3.3, au moins pour les premiers exemples donnés, nous fournissons les Projets/Makefiles pour un fonctionnement sous Linux (Makefile), Windows (Code::Blocks, Visual C++ 2010 express, DevC++ 5 ou Makefile sous cygwin/MingW32) et Mac OS X (Makefile).

• GL4Dummies : nous développons une bibliothèque permettant une gestion uniforme et facile des ressources OpenGL via la SDL2. Cette bibliothèque est accompagné d'un manuel d'apprentissage de la synthèse d'images.

• wiki_Luminance.pdf : wiki traitant de la Luminance (perception de luminosité).

• RGB2HSV.pdf : conversion du RGB vers le HSV.

• wiki_Image_segmentation.pdf : wiki traitant de la segmentation d'images.

• wiki_K-means.pdf : wiki traitant de l'algorithme de clusterisation K-means.

• wiki_matrices_convolution.pdf : wiki traitant des matrices de convolution.

• wiki_Filtre_median.pdf : wiki traitant du filtre médian.

• haar_classifier.pdf : résumé OpenCV sur le Haar Cascade Classifier.

• viola-cvpr-01.pdf.pdf : Article de Paul Viola sur la detection d'objets.

• En partant du code GLSLExample-00.0 :
  • Modifier la donnée du VAO afin d'ajouter une couleur à chaque sommet, puis modifier les shaders afin d'afficher cette couleur.
  • Dans le GLSL, essayer le mode flat pour la transmission de la couleur entre le Vertex Shader et le Fragment Shader.
  • Modifier la donnée du VAO afin de dessiner un quadrilatère (pas de modification au niveau des shaders).
  • Passer la donnée du VAO en mode Interleaved Array (données entrelacées).
• En partant du code GLSLExample-01.1 :
  • Créer une matrice de projection et une matrice de modélisation (gl4duGenMatrix), toutes deux initialisées à identité (gl4duLoadIdentityf). Les envoyer (gl4duSendMatrices) et les utiliser dans le Vertex Shader.
  • Ajouter une rotation (gl4duRotatef) autour de y dans la matrice de modélisation. L'angle de rotation doit croitre en fonction du temps.
  • Ajouter une projection en perspective (gl4duFrustumf) dans la matrice de projection. Vous serez obligés d'ajouter une translation (gl4duTranslatef) dans la matrice de modélisation afin de visualiser votre plan.
  • Créer une autre géométrie à l'aide d'une des fonctions gl4dgGen... et la faire tourner en orbite autour du plan (le laisser statique). Vous pouvez plaquer la même texture (caméra ou autres) sur la nouvelle géométrie créée.

• En partant du code GLSLExample-01.1, réaliser un enchainement de filtres comparable au résultat de l'image ci-contre, soit :
  • En utilisant les fonctions de filtre de GL4D : gl4dfScattering, gl4dfMedian et gl4dfSobel.
  • En codant vous-même les permutations, le médian et le sobel en GLSL : l'utilisation des FBOs (Frame Buffer Objects) est recommandée.

• En partant du code GLSLExample-01.1, GLSLExample-06.0 et sample_3d_02 faire la détection temps-réel des visages et ajouter une géométrie 3D au dessus des visages détectés.

Farès Belhadj