Image, Vision, Apprentissage (IVA)

Filière IVA

La filière Image, Vision et Apprentissage (IVA) permet d'approfondir vos compétences dans les domaines de: La filière IVA est mixte entre cours du département INF & MAP.

L'ensemble des cours proposés en IVA sont au choix. En fonction de vos intérêts propres et projet professionnel à plus long terme, vous pouvez choisir de plus ou moins vous focaliser sur de l'image et/ou apprentissage, ou encore de panacher vos cours sur des domaines globalement variés et généralistes et pluridisciplinaires.

La plupart des cours sont intrinsèquement liés aux thématiques techniques de l'analyse de données, de l'algorithmique efficace, et des mathématiques appliquées (géométrie 3D, optimisation numérique, probabilité). D'autres cours sont particulièrement ouverts au développement d'idées créatives et/ou artistique par la mise en place de solutions personnelles lors de projets.


Pour toutes questions sur le PA, n'hésitez pas à envoyer un email à: damien.rohmer@polytechnique.edu
Pensez également à regarder la FAQ IVA qui recense des questions classiques.

Listing des cours

Période 1

Lundi Mardi Mercredi Jeudi Vendredi
am
08h30-12h45
APM 51053 CSC 51073 CSC 51055 CSC 51052 CSC 51056 APM 51055
pm
14h00-18h15
CSC 51054 CSC 51074 CSC 51085 CSC 51050 APM 51055

Période 2

Lundi Mardi Mercredi Jeudi Vendredi
am
08h30-12h45
CSC 52062 CSC 52084 CSC 52082 APM 52066
pm
14h00-18h15
CSC 52002 CSC 52087 CSC 52081 CSC 52080

Détails

Période 1

ID
Titre
Responsable
Créneau
Langage TP
APM 51053
Foundation of Machine Learning
Erwan Le Pennec
Lundi am
N/A
CSC 51054
Machine and Deep Learning
Michalis Vazirgiannis
Lundi pm
Python
CSC 51074
Digital representation and analysis of shapes
Mathieu Desbrun / Pooran Memari
Mardi pm
C++
CSC 51073
Image Processing & Computer Vision
Mathieu Brédif
Mercredi am
Python
CSC 51085
Computer Animation
Marie-Paule Cani / Mathieu Desbrun
Mercredi pm
C++
CSC 51050
Advanced Algorithmics
Gilles Schaeffer
Mercredi pm
N/A
CSC 51055
Constraint-based Modeling and Algorithms for Decision Making Problems
François Fages
Mercredi am
Prolog
CSC 51052
Data Visualization
Emmanuel Pietriga
Vendredi am
JavaScript/d3
CSC 51056
Topological Data Analysis
Steve Oudot
Vendredi am
Python/C++
APM 51055
Signal Processing
Rémi Flamary
Vendredi am/pm
Python

Période 2


ID
Titre
Responsable
Créneau
Langage TP
CSC 52062
Computational Geometry
Luca Castelli
Lundi am
C++
CSC 52002
Multimodal AI
Vicky Kalogeiton
Lundi pm
Python
CSC 52087
Advanced Deep Learning
Vicky Kalogeiton, J. Lutzenberger, M. Vazirgiannis
Mardi pm
Python
CSC 52081
Advanced ML and RL
Jesse Read
Mercredi pm
Python
CSC 52084
Image Synthesis
Tamy Boubekeur
Mercredi am
C++
CSC 52082
Introduction to Text Mining and NLP
Michalis Vazirgiannis
Vendredi am
Python
APM 52066
Statistics in Action
Marc Lavielle
Vendredi am/pm
R
CSC 52080
Large-scale mathematical optimization
Leo Liberti
Mercredi pm
N/A

Aide pour vos choix de cours

Thèmes d'applications et cours

Règles de choix

Règles communes à tous les PA informatique

Règles spécifiques au parcours IVA

Il n'y a pas de cours obligatoire. Par contre, il faut que vous suiviez au moins:

Remarques:

Specialisation et panachage

Suggestion de sous-programmes possibles en fonction de vos intérêts
xxx = Cours de votre choix.
Rem: Les panachages ne sont que des propositions et pas des obligations.

Visual Computing generalist (defaut)

Data scientist avec background en CV:

Optionnels:

Jeux vidéo:

Optionnels:

Imagerie Biologique/Médicale:

Optionnels:

Art & Science:

Création 3D:

Robotique:

Optionnel: CSC51057 (From the Internet to the IoT)

Environment et IA:

Géométrie et math:

Optimisation algorithmique et prise de décision:

Analyse d'Image et Signal

Description des cours d'images spécifiques IVA

Les 5 cours "images" CSC51073, CSC51074, CSC51085, CSC52084, CSC52002, sont coordonnés spécifiquement par le programme Image, Vision, Apprentissage.

CSC 51073 - Image Analysis & Computer Vision

inf573

Ce cours a pour objectif d'introduire les approches fondamentales de la représentation, l'analyse, et le traitement d'images 2D et reconstruction 3D.
Les thèmes abordés sont les notions d'optiques et de représentation d'espaces couleurs; d'échantillonnage et de filtrage d'images; d'extraction de charactéristiques sur images et vidéos; segmentation d'images; détection d'objets par deep learning; la mise en correspondance d'image ainsi que la vision stéréo et multivues.

Ce cours est conseillé à tout étudiant souhaitant découvrir l'analyse d'image pour tout type d'application, et est fondamental pour poursuivre en master dans le domaine de la vision.
Les parties pratiques se déroulent en Python et utilisent OpenCV. Un projet est également inclus dans le déroulement du module. La poursuite avancée de ce cours spécialisé en Deep Learning est proposé en P2 avec INF597.


CSC 51074 - Digital Representation and Analysis of Shapes

inf574

Ce cours se focalise sur les approches de représentations et de calculs sur des formes et surfaces 3D.
Le cours présente les différents modèles standards de représentation de surface: modèles paramétriques utilisés typiquement en CAO (Bézier, NURBS), les maillages et leurs subdivisions, et les ensembles de points (données de scanners laser).
Le cours introduit également les méthodes dites de "Geometry Processing", à savoir le calcul robuste de propriétés globales ou locales (distance, courbures, etc.) sur des représentations discrètes tels que des maillages ou des ensembles de points. Ainsi que la mise en correspondance et recalage entre formes 3D.

Ce cours est conseillé à tout étudiant souhaitant comprendre en détail les différentes manières de représenter une forme 3D, et souhaitant poursuivre dans le domaine des représentations 3D ou de la reconstruction par vision.
Les sessions pratiques se déroulent en C++ et un projet est inclus dans le déroulement.


CSC 51085 - Computer Animation

inf585

Ce cours présente les modèles d'animation et de simulation de modèles virtuels 3D en temps-réel. Les thèmes abordés sont les méthodes de déformations géométriques interactives, l'animation de personnage, le pipe-line de production dans le contexte professionnel de création au cinéma, la simulation physique d'objets en collisions, la simulation de vêtements, et la simulation de fluides.
Les approches vues dans ce cours s'orientent principalement vers les applications du cinéma d'animation, les effets spéciaux (VFX), et le jeu vidéo.
Ce cours est conseillé à tout étudiant souhaitant découvrir ou approfondir sa compréhension des méthodes d'animation, de simulation et d'interactions avec les mondes 3D virtuels, ainsi que le lien entre la création artistique et la technique.


CSC 51084 - Image Synthesis

inf584

L'objectif de ce cours est de présenter en détails les méthodes de rendus d'images photoréaliste, et expressif.
Les thèmes abordés concernent l'équation fondamental de transport de la lumière et sa mise en oeuvre par lancé de rayons, les d'effets d'illuminations (ombrage, illumination globales), et les structures accélératrices de calcul d'intersection. Dans un second temps, les méthodes temps-réelles seront également présentés: shaders avancés (ombrage, mutli-texturing, bump mapping, etc.); modélisation de BRDF; rendus expressifs.

Ce cours est conseillé à tout étudiant souhaitant approfondir sa compréhension technique de la création d'images à partir de scène 3D, ainsi que les méthodes utilisés dans les rendus graphiques des jeux vidéos. Rem. Les sessions pratiques sont techniques, et demandent un investissement personnel à ce niveau.
Les sessions pratiques se déroulent en C++ et un projet est inclus dans le déroulement.


CSC 51084 - Multimodal AI

inf597

Ce cours se focalise sur les approches modernes de Deep Learning appliquées en Vision. Il reprend les fondamentaux des réseaux de convolutions et parcours une série d'applications utilisant les architectures avancées: Semantic segmentation, Medical imaging, Video Understanding, Vision Transformers. Le cours propose également un parcours des méthodes d'IA génératives jusqu'aux modèles de diffusion.

Ce cours est fortement conseillé à tous les étudiants souhaitant approfondir leur connaissance en Computer Vision.
Les sessions pratiques se déroulent en Python avec PyTorch. Pré-requis: INF554 (ou équivalent).


Poursuite en 4A/Emplois

4A

Vous pouvez poursuivre les thèmes de ce PA dans différentes options de 4A classiques telles que les
=> Statistiques détaillés 4A

Emplois des anciens

Statistiques des thèmes d'emplois des anciens depuis X2015 (128 personnes):
Vision and Graphics
Adobe
Technicolor
Unity
Disney Research
Fujitsu
BUF
Snap Inc.
DxO
MocapLab
Dreamworks
...
Software Eng. & ML
Google
Facebook/Meta
Ubisoft
Nintendo
AMD
Apple
NVIDIA
Dassault Systèmes
SNCF
EDF
Owkin
Criteo
...
Finance and Consulting
Credit Agricole
BNP
Jump Trading
Citadel Securities
Artefact
...
=> Listing détaillé des anciens
Accès au listing individuel restreint: demandez le mot de passe à Damien Rohmer.

Masters IP Paris

ip_paris Notez la possibilité de réaliser votre Master/4A ou PhD track d'informatique dans les offres d'IP Paris proposant de larges choix de cours dans les différentes écoles (Polytechnique, Telecom, Telecom Sud Paris, ENSTA, ENSAE):

Msc&T de l'Ecole polytechnique

polytechnique La possibilité d'intégrer directement le niveau M2 des MSc&T (masters internationaux appliqués bénéficiant de partenaires industriels) de l'Ecole polytechnique.

4A et césures avec des écoles appliquées

La possibilité récente de faire une césure ou une 4A dans une école orienté jeu vidéo ou cinéma d'animation vous sont également proposés:
logo logo logo

Partenaires et positionnement du programme

Equipes enseignantes et collaborateurs

Les enseignements en image et graphiques sont en lien avec les équipes de recherches et entreprises suivantes:

vista La coordination du programme IVA, et enseignants d'INF574, INF581A et INF585, sont chercheurs dans l'équipe Vista (Visual Worlds) et GeomeriX (Geometry for Numerics) du LIX. Il s'agit d'équipes de recherche en Informatique Graphique et Vision qui traitent de problématiques d'analyse, de modélisation et d'animation de formes, vidéos, et phénomènes 3D.


adobe Le cours CSC52084 est enseigné Tamy Boubekeur, directeur de la recherche 3D & Immersive chez Adobe, et professeur à Telecom Paris.


dascim Les cours d'apprentissages et d'optimisation du département informatique CSC51054, CSC51080, CSC52081, CSC52082 sont gérés par des membres de l'équipe DaSCiM (Data Science and Mining) du LIX. Il s'agit d'une équipe spécialisée en classification, analyse de texte, management et indexation de données, et prise de décisions par optimisation mathématique.


cmap Les cours d'apprentissages du département de mathématiques appliquées sont gérés par des chercheurs du CMAP, membres de l'équipe SIMPAS (Statistique, Apprentissage, Simulation, Image).

Positionnement par rapport aux autres PA

Le programme IVA a de nombreux cours en commun avec les deux programmes:

Relation avec le Master AI-ViC

Le MSc&T ViCAI (Master of Science and Technology in Visual and Creative AI) est un master international sur 2 ans dont le diplome est délivré par l'école Polytechnique. Ce master est ouvert à vous ainsi qu'aux étudiants internationaux sélectionnés sur dossiers.

Les cours de la première année du Master s'appuient en totalité sur un sous-ensemble de cours proposés en P3A IVA. Dans ces cours, vous êtes en commun, sans distinction de programme ni d'évaluation. Le profil des étudiants inscrits en IVA et ceux de la 1ère année du master seront donc similaires, et mixtes entre image, graphique, et apprentissage.
Si vous êtes intéressés par les thèmes du master, vous avez le choix entre faire IVA en 3A, puis faire postuler en deuxième année du master pour votre 4A, ou vous inscrire dans le master dès la 3A (Voir FAQ sur les différences entre ces deux choix).

D'une manière générale, vous bénéficiez de l'intérêt des entreprises et instituts partenaires du Master (Google, IDEMIA, Enedis, Inria) dans les thèmes communs couverts par IVA.

google
idemia
enedis
inria
anatoscope
idemia
enedis
init

Domaines d'applications professionnels

Les applications et principes des cours du programme IVA, typiquement en image, graphique et apprentissage, peuvent vous permettre une introduction à différents domaines d'applications que vous pouvez envisager de poursuivre dans votre projet professionnel.

Voici un listing qui vous permet de vous donner des idées. Ce listing n'est évidemment pas exclusif au programme IVA, et n'est pas exhaustif non plus.

Loisirs numériques et artistiques

  • Le jeu vidéo
  • Le cinéma d'animation
  • Les effets spéciaux/visuels (VFX)
  • Les applications multimédias
  • Les arts créatifs numériques, Art/Science

L'immersion et l'interaction entre monde virtuel et réel

  • Conception d'experience immersive, video mapping
  • La réalité virtuelle et augmentée
  • Les scanners 3D optiques, lasers, la motion capture
  • Les serious games, Metaverse

La création digital, design, simulation, et fabrication

  • Outils de design numérique
  • Fabrication 3D: additive, découpe laser
  • La Conception Assistée par Ordinateur (CAO - automobile, aéronotique, etc)

L'imagerie en sciences naturelles

  • Imagerie médicale, biologique, satellitaire, astronomique, radar, etc.
  • La visualisation et la simulation en sciences physiques.

La prise de décision avec des données visuelles

  • La robotique, les véhicules autonomes, les drones, etc.
  • Les applications des GAFA: images/vidéos, etc.
  • La reconnaissance d'objets, faciale, le tracking
  • La défense
applications

FAQ IVA

Lien vers le "Forum de Questions IVA": Questions/Réponses à des interrogations classiques sur le programme et/ou votre poursuite.