Python pour un Data Scientist / Economiste
ENSAE - OMI2F2
Ce cours s’étale sur 24 heures de cours/TD.
Les outils proposés sont en langage Python. Ils sont tous open source,
pour la plupart disponibles sur GitHub et en développement actif.
Python est devenu le premier langage pour les scientifiques
et comme c’est un langage générique, il est possible de gérer
l’ensemble des traitements appliqués aux données, depuis
le traitements des sources de données jusqu’à leur visualisation
sans changer de langage.
Le cours est prévu pour des profils plutôt statistiques 
ou plutôt économiques 
. Ces images reviendront pour indiquer
si les contenus s’adressent plutôt aux uns ou aux autres.
Il est évalué par un projet de datascience et d’un exposé
fait à plusieurs sur un sujet tiré d’articles de recherche récents.
Le terme cheat sheet est un mot-clé plutôt efficace sur Internet pour
retrouver les bout de codes les plus fréquents. Cette page regroupe des
cheat sheets sur beaucoup de sujet évoqués ci-dessous :
Essential Cheat Sheets for Machine Learning and Deep Learning Engineers.
Le site Kaggle recense de nombreuses compétitions de machine learning
qui permettent de s’exercer ou de se mesurer à d’autres data scientists.
Quelques compétitions ont aussi été créées pour ce cours :
Compétitions.
Le cours est organisé sous forme de thèmes,
tous associés à un problème de données et
ou de machine learning. Les thèmes sont de difficultés croissantes
et sont abordés invariablement par,
des exercices sous la forme de notebooks (énoncé / correction),
des articles, des modules connus.
Thèmes
Il est indispensable de savoir manipuler les données
avant de pouvoir faire du machine learning. Filtrer,
fusionner, concaténer, il faut savoir faire cela vite
pour passer plus de temps sur les problèmes intéressants.
Un problème de données est rarement résolu avec un seul modèle,
un seul algorithme et plus souvent un assemblage.
La première étape consiste à analyser un problème
concret à l’aide d’une grille de problèmes formalisés.
C’est cette grille qui est parcourue dans les paragraphes
svuiants.
Les données ne sont pas toujours organisés sous la forme
d’une table de données où il s’agit de prédire Y
en fonction de X. Il faut parfois prendre en compte
une dépendance temporelle ou spatiale. Cette section
étend la grille précédente et proposent des modèles
parfois récents.
Il faut voir la page
Galleries de problèmes résolus ou presque.
Ces problèmes sont principalement résolus à l’aide
de deep learning. Chaque problème n’est pas
nécessairement compliqué en soi mais chaque modèle
nécessite des outils de machine learning puissant
et beaucoup de ressources de calculs pour apprendre
des réseaux de neurones parfois pendant des mois.
Plus les données sont volumineuses, plus les contraintes sont
nombreuses, plus il faut se montrer inventif. Ecrire un code efficace
est souvent utile et parfois impératif simplement
pour obtenir un résultat. Néanmoins, il arrive régulièrement
que le premier besoin soit celui de collecter des données
qui ne sont pas encore disponibles.
La plupart des articles sont référencés dans la section du thème
auquel ils sont reliés. Les suivants sont en quelque sorte
des inclassables.
Ce cours a commencé en 2014 et n’a cessé de s’enrichir.
Il est animé par Xavier Dupré (ENSAE 1999)
et Anne Muller (ENSAE 2012).
Le cours qui a pour objectif de vous présenter les
notions suivantes.
Auteurs et Contributeurs
Ce cours a bénéficié de nombreuses contributions dont les auteurs sont :
Xavier Dupré, Anne Muller (API, scrapping, tutoriels, …),
Elodie Royant (API, scrapping, tutoriels, …),
Matthieu Bizien (deep learning),
Nicolas Rousset (itérateurs),
Jérémie Jakubowicz (puzzle algorithmique),
Gilles Drigout (streaming),
Gaël Varoquaux (machine learning avec scikit-learn)
et bien sûr les étudiants de l”ENSAE.
Feuilles de route et compétitions passées :
.
0.8