Créer des cartes choroplèthes interactives

Session du 10 novembre 2022 à 20h00

Data Science & IA

Frontend & UI

Deviens membre Premium

Cette session de mentorat est réservée aux membres Premium. Rejoignez-nous pour accéder à toutes les rediffusions des sessions de mentorat !

Premium

+100h de formations
+180 exercices de code
+100h de mentorats en rediffusion
20 projets
Mentorats groupés hebdomadaires
Support individuel avec nos mentors

Découvrir les formules

Voir le détail des fonctionnalités

Créer des cartes choroplèthes interactives

Découverte des cartes choroplèthes avec Plotly en Python et échanges autour de questions pratiques, y compris un peu d’interface graphique avec Tkinter.

Rechercher dans la transcription

00:00:00 :Les problèmes concrets que vous avez quoi.Ouais désolé je suis un peu chiant.Non non bah non bah t'es là pour ça.On est là pour ça, t'es là pour ça, on est tous là pour ça donc c'est super.

00:00:10 :J'ai vu t'avais une question JavaScript aussi, là je vais aller voir ça.C'est intéressant pour tout le monde tes questions.Bah c'est ça ouais.Non mais j'ai pas envie d'abuser non plus alors c'est un peu chiant.

00:00:19 :Mais comme là je...ça commence à s'accélérer donc c'est pour ça.Ouais ouais bah t'inquiète pas on est là pour ça.Donc on est une petite petite dizaine, quinzaine je crois.

00:00:30 :14, 14 personnes.Moi je vais pas rester, je vais laisser PA faire la présentation des je sais plus c'est quoi le nom de ton truc là les shlokatines.

00:00:38 :Coromplettes, coromplettes.Coromplettes. On dirait un nom de cafard ou un nom de diogen.On a tous appris je crois un nouveau mot cette semaine qu'on pourra sortir au dîner de famille à Noël.

00:00:48 :Ah bah ça marche bien vous allez voir.Donc je te laisse explorer tout ça et puis répondre aux questions.Et bonne séance à tout le monde.

00:00:56 :T'as lancé l'enregistrement?Ouais ouais c'est lancé.Ah oui c'est marqué. Et moi je pense que c'est bon.Niveau partage ça a l'air bon.Ok j'ai réduit le hallo. Parce qu'en fait maintenant on est directement

00:01:06 :intégré dans je sais pas si c'était comme ça avant dans le doc screen j'ai réduit la barre sur la gauche là.Ah ouais si tu t'es connecté par là oui.

00:01:14 :Toi tu peux te connecter avec le lien que t'as sur whereabouts sinon effectivement c'est intégré.Ouais.Avec la barre sur le côté en minuscule là c'est pas de soucis.

00:01:24 :Hum ça marche. Bon bah merci Thibault.Euh juste faut vraiment que j'arrête à 21h la session donc si vous avez des questions puis même de toute façon c'est mieux qu'on fasse les questions d'abord.

00:01:40 :Donc avant de commencer est-ce que vous avez des questions? Quelles qu'elles soient ça peut intéresser tout le monde.Si je peux pas y répondre je regarderai plus tard mais en tout cas si vous avez des questions c'est maintenant si vous voulez.

00:01:52 :Après bien sûr pendant tout le moment t'auras.Mais hésitez pas.Comme ça on peut prendre un peu de temps pour la question et c'est moins grave si on n'aborde pas le programme prévu.

00:02:02 :J'attends un petit peu sur le chat voir s'il y a des questions mais Euh ok bon bah ok bah de toute façon hésitez pas si pendant le truc vous avez une question on peut l'aborder.

00:02:22 :Du coup on va commencer par ce fameux mot dont on a parlé.Je vais aussi le faire en live parce que j'ai pas eu le temps de tout préparer comme je voulais. Donc je le ferai

00:02:36 :en live en même temps.Dites moi dans le chat si vous voyez bien l'écran. Je vais peut-être réduire ça pour l'instant.Je vais réduire l'écran et vous avez bien le son.

00:02:50 :J'ai désactivé ma caméra.C'est normal, c'est parce que je vais faire des aller-retour avec ma correction.Du coup ce sera moins grave pour vous.Vous allez voir ma tête bouger.

00:03:00 :C'est pour ça que j'ai désactivé la caméra.Alors du coup une carte choroplette c'est un bien grand mot mais en fait c'est pour parler d'une carte que ça soit locale, mondiale ou d'un pays qui varie en fonction d'une statistique.

00:03:20 :Par exemple sur une carte météorologique de la France, quand vous voyez pendant les canicules ou des choses comme ça quand la température est plus ou moins importante, vous voyez du rouge qui est plus ou moins foncé et en fait la couleur elle dépend de la variable température. Donc c'est tout simplement ça en fait

00:03:38 :une carte choroplette.Choro comme c'est du... je sais pas du latin mais dans les origines ici vous reconnaissez les couleurs.Donc voilà d'où ça vient.

00:03:50 :Donc en fait ça c'est directement implémenté dans dans Plotly, la librairie qu'on a déjà évoqué et en fait tout le process pour faire ce type de carte est déjà implémenté.

00:04:04 :Donc ici vous pouvez facilement importer le module avec Plotly en fait Plotly il offre le module express qui est en fait un raccourci pour faire des graphes facilement parce qu'en fait dans Plotly c'est un peu compliqué à mettre en place des graphes parfois pour les gens qui ont déjà fait du matplotlib ou des choses

00:04:26 :comme ça vous pouvez vous dire bah c'est vachement compliqué pour mettre en place mais du coup Plotly met à disposition ce module express pour que ça soit un peu plus simple express comme son nom l'indique.

00:04:36 :J'ai entendu que... non c'est bon?Du coup tout simplement comment on fait pour faire une carte de ce type là? Il suffit de définir une figure, c'est une instance du module on utilise ici la méthode coroplet on définit en anglais c'est locations pour dire qu'est-ce qu'on veut faire apparaître

00:05:06 :et donc ici on dit je veux faire apparaître la France les USA, l'Inde et l'Allemagne ici vous dites location mode ISO 3 c'est la manière dont vous décrivez votre pays parce qu'en fait des fois vous pouvez par exemple si vous disiez juste FR, US etc c'est un autre type de

00:05:24 :code mais ici comme on définit par 3 lettres les pays c'est juste ISO 3 et ici quand vous faites fig update layout donc en fait vous dites, vous désactivez ces options là qui sont par défaut on va les utiliser après vous verrez et ensuite ici tout simplement fig show

00:05:44 :ok j'ai été c'est bon donc voilà c'est parti et donc là normalement tout ça en fait vous voyez il vous affiche une carte une map monde en fait où vous avez vraiment la localisation de tout des pays que vous avez demandé donc ce qui est pas mal aussi c'est que vous voyez il vous met aussi toutes les

00:06:20 :les territoires enfin pas tous les territoires outre mer vous voyez pour la France il ne met pas outre mer mais ici pour les USA etc il met tout ce qu'il faut pour l'Inde là ici vous voyez un peu la Corse ici vous pouvez, et vous avez un peu une interactivité avec la carte vous pouvez passer

00:06:38 :ici votre souris et vous avez vous avez ici les voilà ça s'affiche l'ISO code 3 qu'on avait vu tout à l'heure donc ça déjà rien que ça je trouve que c'est quand même assez puissant ouais c'est ça ici il me semble, je ne suis pas expert en géographie mais

00:07:00 :en fait je trouve que c'est assez puissant vous voyez en deux lignes de code on a ça et vous pouvez imaginer, moi je me souviens quand j'étais petit j'avais un jeu sur ordinateur et c'était en gros il y avait une carte comme ça et il y avait les pays qui s'illuminaient

00:07:18 :en couleur et il fallait dire quel était le pays donc vous me pourrez très bien imaginer créer vraiment facilement ce type d'exercice avec ça en fait on peut mettre un wild trou par exemple et puis on y terre et puis on fait varier les localisations et puis l'étudiant il doit essayer de trouver

00:07:34 :de quel pays on parle ok et juste un point à noter, donc vous voyez ici comme c'est un c'est un dibou mais je crois que c'est ça hum et vous voyez ici Plotlist c'est un une bibliothèque qui fait des graphes en ligne donc c'est pour ça que ça tourne sur un serveur local

00:07:54 :ce port là voilà donc en gros maintenant on va essayer de faire des choses non c'était pas celui là on va essayer de faire des choses un peu plus intéressantes justement on va faire varier justement nos paramètres en fonction de data donc attendez je regarde dans ce que j'avais noté

00:08:14 :on va utiliser en premier bon ça je vais peut être le virer je pense hum ouais je vais le virer j'ai importé quelques data donc ici espérance vie et température où en fait on va essayer d'abord de faire une carte qu'on va coloriser enfin on va coloriser en fonction de l'espérance

00:08:36 :de vie donc voilà si ça vous va comme exercice on va on va faire ça hum ok donc on va importer d'abord import panda as pd on va importer notre data frame df égal pd.

00:09:02 :read csv ça vous devez avoir l'habitude pour ceux qui font du du panda ok on va juste aller voir un peu ici notre data frame pour l'explorer je relance donc en fait ici on a le pays, on a l'année du recensement et puis l'espérance de vie, enfin voilà on a quelques data

00:09:38 :si vous voulez on peut faire un df .describe où là en fait vous avez un peu des statistiques je l'avais déjà montré ça peut être intéressant et si vous vous souvenez on peut faire un un profile report où là on a vraiment un rapport pdf html qui est vraiment bien détaillé

00:09:58 :donc ok on a nos données, on va réimporter comme tout à l'heure import hotly .xas px ok donc maintenant on va redéfinir notre figure donc c'est px.

00:10:20 :ok donc là en fait on va lui dire directement il y a un paramètre qui permet de rentrer directement dans notre data frame et nous ce qu'on va vouloir ici c'est uniquement faire une carte sur l'espérance de vie en 2015 par exemple donc en fait pour ça on peut aller faire un query

00:10:42 :dans notre data frame ici et on va lui dire, c'est un peu comme pour ceux qui font la base de données ça marche comme ça donc en fait vous dites year égal égal 2015, donc là on va vraiment aller chercher ici par exemple si je faisais df.

00:11:02 :query égal 2015 vous voyez il me sort bien tout ce qui s'est passé en 2015 donc c'est un moyen de faire des requêtes sur les data frames je sais pas si vous l'utilisez peut-être que vous avez plus l'habitude de faire du à l'intérieur des crochets mais sachez que on peut faire des requêtes un peu

00:11:32 :évoluées sur les data frames avec des filtres de cette manière ok donc ça c'était juste un apparté pour le data frame on va location donc là on va vouloir tous les pays qui sont qui sont dans la base de données, donc en fait ici là vous lui spécifiez la colonne et lui il va

00:11:52 :aller chercher tous les il va faire un unique à tout seul, parce qu'en fait les pays se répètent plusieurs fois, mais lui il va faire juste le il va faire un np unique ensuite location mode, donc là on va récupérer les je vais vous montrer en même temps ah oui pardon c'est un autre

00:12:36 :vous savez tout à l'heure quand j'ai fait le location mode où j'ai défini l'iso ici il va vraiment aller directement chercher le nom des pays ensuite la projection ça c'est le type de projection que vous voulez pour votre carte vous savez des fois on peut avoir une carte aplatie

00:12:54 :une carte, une map monde un peu en volume, donc ici nous on va juste dire attendez c'est natural earth donc en anglais comme si on voulait une reproduction fidèle du globe ensuite la couleur donc là ici ce que vous pouvez faire c'est que vous pouvez renseigner une colonne et comme ça lui

00:13:20 :en fait il va prendre on va prendre l'espérance lui en fait il va prendre cette colonne pour faire son dégradé de couleur donc ça c'est quand même intéressant et ici vous lui définissez vous lui définissez comment il va faire son dégradé donc nous on va le définir donc là en fait c'est des

00:13:54 :faut définir des touplets où on dit que ça pour définir un peu le gradient de l'échelle en gros vous allez voir 0.25 désolé c'était peut-être pas la partie la plus intéressante pour vous et on va finir en gros c'est le pourcentage vous lui dites ici vous lui dites de 0 à 0 à 20

00:14:42 :de l'opacité, non non non en fait c'est quand il est il va prendre les données en fait l'espérance de vie il va prendre le minimum et le maximum, 0 ça va être bleu et 1 ça va être rouge et en fait entre les deux là je lui dis jusqu'à 25%

00:15:00 :tu vas du bleu au light blue et il va faire le dégradé tout seul c'est le dégradé pour pourcentage en gros voilà et qu'est-ce que j'ai oublié je pense que là on devrait être bon ...

00:15:31 :voilà donc en gros ici il a défini l'espérance de vie en fonction du pays, vous voyez franchement j'ai pas fait grand chose moi j'ai juste importé mon data frame et il m'a sorti une carte comme ça, donc là vous voyez normalement en bleu c'est ceux qui ont l'espérance de vie la plus faible

00:15:53 :donc on peut regarder ici sans surprise malheureusement c'est des pays d'Afrique qui sont pas développés et les pays qui ont l'espérance de vie la plus élevée donc vous voyez ici 0 ça correspondait au minimum, ici là on parle pas de 0 et 1 c'était bien un pourcentage donc c'était le plus bas, bleu

00:16:13 :ici le plus haut donc je sais pas ça doit être 90 ou quelque chose comme ça, en rouge on a les pays nordiques on a l'Australie, le Japon voilà ici on a vous voyez quoi on a facilement colorisé la carte et puis vous pouvez même, vous voyez ici tout à l'heure quand j'ai mis location mode

00:16:31 :country name ça veut dire que quand je vais passer ma souris sur les trucs il me dit United States of America, donc là il me met bien le nom du pays en entier et vous voyez aussi que vous avez même l'espérance de vie du pays quand vous passez votre

00:16:47 :souris, donc je trouve quand même que c'est assez puissant ce qu'on peut faire encore avec ça je me répète mais je trouve ça quand même assez intéressant qu'est ce qu'on peut faire d'autre, regardez ce que j'avais fait, bon je sais pas si ça va être intéressant est ce que

00:17:07 :vous voulez qu'on en fasse un autre avec avec la température moyenne relevée dans le monde vu que c'est un petit peu d'actualité est ce qu'on peut faire aussi je vais faire, ouais dites moi dans le chat si vous voulez voir un autre exemple ok hum on va faire celui là, qu'est ce que

00:17:31 :comment je vais le commenter hum du coup on va réimporter notre data frame et cette fois ci on va prendre les températures, donc juste pour vous montrer ouais je trouve pratique du coup vous voyez ici ça c'est les bah voilà c'est une bonne idée ça hum vous voyez le fichier csv il est assez simple en fait

00:18:05 :vous avez le code du pays avec la température donc je sais pas exactement ce à quoi ça correspond, c'est un truc que j'ai récupéré sur internet, vous avez en fait j'imagine c'est une valeur moyenne ouais moi je trouve ça stylé quand même le stage manager hum, qu'est ce que

00:18:23 :qu'est ce qui te plait pas là dedans je trouve que tu vois visuellement facilement le truc, pour ceux qui sont pas sur mac en fait c'est la dernière mise à jour de mac os 16 hum où vous avez en fait ici enfin bref on s'en fout je vais pas

00:18:39 :m'éterniser là dessus pour ceux qui ont pas mac ils s'en fichent, donc vous voyez ici le fichier température c'est juste que vous avez une température moyenne j'imagine en fonction du pays donc on va importer pareil donc comme tout à l'heure pd csv temp température csv ouais on peut pas

00:19:05 :drag and drop le stage manager c'est un peu chiant hum donc on va redéfinir notre, bon je vais essayer d'aller un peu plus vite je vais l'écrire et puis comme ça vous pouvez regarder en même temps peut être même prendre la fonction ça va aller plus vite ok donc là notre data frame

00:19:35 :c'est toujours machin ce qu'on veut faire nous est ce que non on veut plus filtrer donc y'a plus besoin hum location toujours pays par contre je sais pas si c'est écrit là, ouais c'est juste vraiment mettre le nom du truc location name je pense qu'on peut garder non il va falloir le mettre

00:19:57 :en iso 3 comme on l'a en iso 3 ok la projection pour l'instant on va mettre comme ça après vous verrez on va faire avec le globe et ici donc le color on va mettre bleu, green, orange red ça me parait bien ok hum qu'est ce que j'ai fait de mal

00:20:19 :à visser la couleur ici mettre la température donc il faut bien mettre le nom de la colonne que vous devez j'ai oublié le fil voilà donc je sais plus qui disait qu'il allait choisir ses prochaines destinations hum bah tu peux partir en Afrique il y aura pas de soucis

00:20:51 :il t'aura bien chaud par contre tout ce qui est Pôle Sud déconseiller, tout ce qui est Russie etc déconseiller, enfin bref vous avez un petit peu le différent enfin imaginez vous avez vous pouvez imaginer beaucoup d'applications à cela et je voulais vous montrer aussi là dessus il y a un truc sympa

00:21:15 :on peut faire une, vous voyez ici quand je fais projection natural earth on peut faire une projection un peu plus stylée ou en fait un truc un peu plus interactif donc je vais essayer de le faire attendez je vérifie hum on va faire donc ça marche ça marche en figure en fait

00:21:39 :ce qu'on fait c'est qu'on veut mettre on veut changer un peu la manière dont c'est affiché donc c'est un update du layout et donc là on va changer la projection projection ok et là ça marche par dictionnaire dictionnaire ici vous dites le type de dictionnaire il s'appelle orthographique ok

00:22:05 :ça sert à rien d'apprendre tout ça par coeur, il faut aller voir dans la documentation à chaque fois rotation et là on va dire ça c'est le le méridien etc par rapport auquel on fait la rotation la longitudinal 0 la latitude 40, je suis mon exemple ma vie est

00:22:39 :0 ok essayons et donc là en fait vous voyez vous avez une map monde que vous pouvez tourner un peu à la google earth hum donc voilà je trouve que c'est sympa donc vous voyez juste en changeant la manière dont on veut afficher les axes on a on a ce type

00:23:07 :de carte interactive et en plus qui dépend ici de la température donc voilà je sais pas ce que vous en pensez mais moi je trouve que c'est plutôt joli et assez puissant donc voilà vous voyez après les lignes de code je pourrais vous les envoyer souvent je dis ça et puis après j'oublie

00:23:29 :donc n'hésitez pas à me le rappeler dans les commentaires voilà que noter si jamais il y a un code que vous avez vu et que vous voulez revoir que je vous l'envoie je crois que la dernière fois il y a quelqu'un qui voulait le code là pour les manipulations

00:23:41 :les recherches de paterne je peux désabonner ma suite bah ouais franchement après moi avec le boulot je travaille beaucoup avec excel encore mais je me sers aussi de Python en fait j'essaie pas d'oublier excel parce que excel en plus souvent les collègues ils bossent aussi avec excel donc vous pouvez pas

00:24:03 :complètement oublier excel en plus ça fait des choses assez simples mais ce qui est pas mal avec Python c'est que vous avez des librairies comme panda ou même xlrd ou xw je sais plus, xwt quelque chose comme ça où vous pouvez interagir avec votre fichier excel et vous pouvez

00:24:21 :injecter des formules Python dans des cellules excel donc ça devient assez puissant et voilà excel et la place de Python en place de VBA qui est le langage dans excel, vous pouvez utiliser Python je fais juste une pause 30 secondes ...

00:25:01 :ok c'est bon c'était ce que vous voulez me montrer sur les cartes coro est-ce que ça vous va?...dites moi ok voilà donc on va passer à ce que je voulais faire je voulais vous montrer aussi la documentation sur plotlib vous avez une documentation assez détaillée je vous invite à aller la visiter

00:25:41 :...ok donc maintenant ce qu'on va faire on va changer de sujet c'est un truc différent on va essayer de on va manipuler une image on va essayer d'interagir avec une image toujours avec la librairie matplotlib en fait ...

00:26:03 :on va utiliser quelque chose qui est sous-jacent à matplotlib en fait TKinter je pense que vous connaissez c'est ce qui sert à faire des interfaces graphiques TKinter je crois que dans la formation docstring c'est PySide qui a montré mais TKinter avec QtDesign vous pouvez faire des interfaces graphiques un peu

00:26:27 :de manière efficace et ici je vais vous montrer un truc assez simple comment on peut interagir avec une image ...comment on peut interagir avec une image donc en gros je vais peut-être comment je vais faire je vais le mettre là et puis on va le faire ensemble ...

00:26:49 :............ok .........alors déjà on va travailler sur cette image là où en fait la dernière fois j'avais parlé de de ce truc là où est Charlie ...

00:27:15 :...........................Hum ...on va utiliser cette image là ...en vous connaissez le jeu il faut avoir pouvoir isoler des morceaux en fin c'est juste un...

00:27:49 :......sur recipients j'obtiens les coordonnées des points de là où j'ai cliqué comme ça après on peut aller faire ce qu'on appelle des crops de l'image un crop en fait c'est en photographie c'est quand vous prenez un morceau de l'image donc on peut très bien se dire je vais essayer de créer un programme

00:28:11 :qui fait qu'à chaque fois que je clique dans l'image j'enregistre les positions du clic de ma souris et après plus tard je ferai des crops de cette image là grâce aux coordonnées que j'ai récupéré donc l'idée ici donc comme je vous l'ai dit on va utiliser Matplotlib je vais pas avoir besoin de vos aides

00:28:42 :donc en fait ce qu'on fait ici c'est on va d'abord créer une fonction qui fait l'import de l'image et qui la rend interactive donc en fait ici ça c'est là y'a rien de sorcier c'est quand on a un graph on a un graph classique donc c'est comme ça qu'on importe toujours son graph

00:29:06 :en fait on définit un subplot comme ça 1 1 et vous verrez dans beaucoup de tutos Matplotlib c'est comme ça qu'ils importent les images après parfois on a juste fig... on a pas le subplot

00:29:17 :il y a quelqu'un qui a un micro allumé ici le axe.imshow ça permet en fait de dire bah je veux que tu me charges l'image ok et ici c'est ici que va jouer en fait la logique du programme vous allez avoir... vous allez définir qu'est-ce qu'il se passe quand je clique sur mon bouton

00:29:57 :donc ici on a le press event event ok et onclick et en fait onclick ça va être la fonction qu'on va définir qui va appeler quand on va appuyer sur le bouton donc ici lt.show faut pas oublier d'afficher l'image à chaque fois

00:30:20 :et ici on va définir cette fameuse fonction qui va faire quelque chose en fait quand on va appuyer sur l'image à un endroit spécifique donc ici on va lui dire que xrx c'est mon événement donc c'est le xdata de mon événement et y c'est l'événement ydata en fait ça c'est juste quand vous cliquez, quand vous faites un événement

00:30:49 :donc cliquez, pas de soucis pour le retard quand vous cliquez ça s'appelle un événement donc c'est l'événement que vous avez défini ici onclick donc bouton press et en fait x va récupérer le xdata et le ydata de cet événement ensuite on va lui dire ici tant qu'il est pas

00:31:12 :parce qu'en fait si vous mettez pas isnotnone pour x et y il essaiera de faire cette fonction là même si vous cliquez pas donc il va pas comprendre et vous allez avoir un bug donc and y is not known et moi ce que je vais faire en fait j'ai envie de me dire

00:31:35 :c'était dans l'exemple que j'ai fait tout à l'heure je veux qu'il m'enregistre mes coordonnées à chaque fois dans un fichier donc pour ceux qui connaissent est-ce que vous connaissez tous ça cette fonction qui permet d'enregistrer la data dans un fichier dites moi dans le chat parce que connaissant les gens qui y a

00:31:55 :je sais qu'il y en a qui connaissent ça très bien mais il y en a qui peut-être connaissent moins bien donc dites moi ok c'était fi je vais revenir dessus juste après Edgar, Alex, ok je reviens juste je l'écris et puis après je reviens dessus ici je continue à écrire

00:32:17 :je vais le copier coller ça ira plus vite et ça aussi pareil je reviendrai dessus voilà donc en fait ce qu'on dit c'est que si j'ai un événement qui est non nul tu m'ouvres un fichier et à chaque clic, c'est ce que je fais ici donc en fait à chaque clic j'appelle cette fonction

00:32:40 :cette fonction elle récupère le x et le y de mon événement et s'il n'est pas nul il me le met dans un fichier il va m'écrire le x et le y que j'ai défini ici et ensuite pour moi c'est bon ici maintenant on va charger notre image notre image on peut la charger facilement avec game read

00:33:04 :notre image elle s'appelle dites moi si vous pensez que ça sert à rien que j'ai un code déjà écrit que je devrais écrire mais c'est juste comme ça vous voyez toutes les étapes ouais pas de soucis Eric j'ai compris que c'était à cause du webinar mais y'a pas de soucis

00:33:29 :voilà donc si on récapitule ah oui d'accord c'est juste pour savoir pour la méthode pédagogique ok donc ça vous va que même si le script est déjà écrit ça vous va qu'on le réécrive comme ça on voit toutes les étapes très bien merci pour votre tour du coup ce qu'on fait c'est qu'on appelle cette fonction là

00:34:03 :cette fonction là elle définit une image qui va être interactive et qui va définir, qui va appeler une fonction à chaque fois qu'on va cliquer dessus ok donc je lance mon script où est-ce qu'il me l'a affiché c'est dingue ça en fait le stage manager il me fait galérer

00:34:38 :ça va faire marrer Thibaut en fait il me le met sur un autre bureau j'ai l'impression putain c'est pas vrai je galère à vous afficher ce qu'il se passe en fait non c'est pas un problème de ram c'est juste que je sais pas où est-ce qu'il me le fout

00:35:32 :je crois que je vais devoir le désactiver parce que attendez excusez moi je galère avec mon truc j'arrête le partage je suis bien embêté ça ne m'est jamais arrivé attendez excusez moi vous pouvez discuter entre vous le soucis c'est que j'arrive pas à l'afficher mon réglage se met dans mon stage manager sur la gauche

00:37:20 :et j'arrive pas à l'afficher j'avoue que ça fait pas longtemps que j'utilise le stage manager c'est pas un problème de double écran c'est juste qu'il est sur le côté je monte mon écran on fait du débugage en même temps je crois que c'est à cause du partage d'écran est-ce que vous voyez mon écran avec la fenêtre affichée par la figure 1

00:38:31 :je gère très mal le stage manager j'imagine que Tibo rigolera beaucoup quand il verra ça je pense que le stage manager ça dépend de l'écran ça c'est le résultat de ce que j'ai affiché si je vais dans mon dossier il m'a créé un fichier crops avec les coordonnées des points que j'ai cliqués

00:39:15 :avec mon problème de partage d'écran je pouvais pas le voir en interactif il remplit un fichier et il met le XY si je veux faire un crop de mon image pas loin de ce point là une image c'est juste un MPI arrêt je veux entre 887 et 887.50

00:39:47 :ici pour le Y je veux dire 521 et 521.50 là j'ai mon image, je vais lui dire que c'est mon crop c'est pas vrai, pourquoi il est faux?

00:40:21 :Vincent si tu connais ça j'ai beau cliquer dessus c'est le mission control, les 3 doigts sur le pad ça te permet d'avoir un aperçu de toutes les fenêtres ouais celui là mais tu vois en fait dès que je le moi j'ai pas eu ce bug là et en fait le truc c'est que j'ai essayé de

00:40:51 :désactiver, tu vois je vais retrouver mes paramètres et je peux même pas les voir dans mes paramètres parce que du coup il est plus dedans je voulais le désactiver j'ai pas eu ce bug là honnêtement c'est un peu foireux, attendez je referme mon partage d'écran je suis toujours là, j'ai juste

00:41:46 :ok j'ai récupéré quelque chose ok là ce que j'ai essayé de faire c'était de vous montrer comment faire un crop donc j'étais là dessus, là je dis que mon image voilà et ensuite vous pouvez faire un plt.mumshow du crop

00:43:05 :et plt.mumshow là vous avez un zoom, en gros le crop c'est vraiment juste la section de votre image que vous avez récupéré par contre que du coup à ce point là auquel j'ai ajouté 50 pixels en ligne donc 50 pixels vers le bas et 50 pixels en colonne à partir de ce point là

00:43:55 :donc voilà désolé c'était un peu chaotique sur la fin des exercices que je vous avais préparé je sais pas, faut que je vois le problème du coup pour moi c'est tout ce que je voulais vous montrer sur les cartes et puis le TK Inter j'ai lu dans le chat qu'il y a des gens qui connaissaient pas comment on fait pour

00:44:25 :pour enregistrer des datas dans un fichier, est-ce que vous voulez qu'on regarde ça ou est-ce que vous avez d'autres questions d'autres choses que vous voulez voir plus en détail Go Data mais qu'est-ce que tu veux voir en data qu'est-ce que je pourrais vous dire sur la data, je sais pas si vous

00:45:10 :j'essaierai de faire un jour une session là dessus c'est sur Apache Airflow, je vais essayer de montrer, est-ce que vous connaissez Apache Airflow alors en fait Apache Airflow c'est quelque chose qui permet de faire des pipelines de data où en fait vous pouvez automatiser des tâches de données je vais voir si j'ai un exemple quelque part, non je crois que j'en ai pas mais est-ce qu'on peut faire

00:45:48 :je peux vous montrer je pense qu'il doit y avoir des exemples, Apache Airflow bon c'est un peu compliqué à mettre en place parce que moi j'utilise Docker pour mettre en place ce genre de c'est containerisé mais j'aimerais bien montrer Apache en fait l'interface c'est un peu comme ça, j'essaie de voir s'il y a pas un truc un peu mieux

00:46:25 :ça marche par, on appelle ça des DAG, en fait un DAG c'est un diagramme je sais plus exactement ce que ça signifie, DAG, Apache Airflow DAG c'est Directed Acyclic Graph, en fait c'est quand vous avez un pipeline un pipeline en data c'est souvent extraction de la donnée, nettoyage de la donnée, post-traitement

00:46:56 :et après vous appliquez des modèles de machine learning ou des choses comme ça je répondrai après Arnold, je continue sur Apache et puis je répondrai après là dessus du coup en fait un pipeline de données, c'est exactement ça, extract, transform, load et en fait juste avec des scripts Python, vous avez qu'à écrire des scripts Python

00:47:20 :avec les niveaux de récurrence que vous voulez dans vos scripts pour votre tâche et en fait ce qui est bien c'est que lui il gère automatiquement le process en fait vous voyez ici c'est un peu comme les diagrammes de Gantt, une tâche dépend de celle-là dépend de celle-là dans le graph qui est ici, parce qu'après des fois vous avez des graph à plusieurs branches

00:47:45 :mais en gros ce qu'il va faire c'est que si jamais vous lui dites cette tâche là je veux qu'elle s'effectue tous les jours à 15h et bien en fait pour que cette tâche là elle soit réalisée, il faut que celle-là soit réalisée, celle-là et celle-là aussi et en fait lui il fait la gestion lui-même de tant que cette tâche là

00:48:04 :je sais pas si il y a un bug, si il y a la foirée, si il y a eu un manque de connexion ou quoi il va la répéter jusqu'à ce qu'elle soit validée et ainsi de suite et en fait il pourra pas la faire tant qu'il aura pas validé toute celle-là

00:48:17 :donc ça peut être intéressant si jamais vous voulez par exemple avoir plein d'étapes de validation Céliri je connais pas Vincent, mais est-ce que... Céliri...Ce qui est bien avec Apache Airflow c'est que ça marche bien avec les scripts Python Je pense que ça m'a l'air d'être à peu près la même chose, distributive task queue

00:48:43 :C'est pour automatiser des tâches ça non? Mais plutôt des tâches genre envoyer un mail ou des choses comme ça non?Là le Apache Airflow c'est vraiment orienté data, où en fait tu vas voir sur des serveurs J'essaie de trouver un graph un peu plus intéressant Il n'y en a pas de chose plus intéressante, j'essaierai de trouver des exemples

00:49:23 :J'aimerais bien un jour en mettre en place un pour vous montrer mais c'est assez puissant en fait, vous pouvez enchaîner des tâches et parfois faire des tâches parallèles parce que parfois vous n'avez pas besoin qu'une tâche est terminée pour en commencer une autre Donc ça c'est des tâches parallèles et lui il peut gérer ça

00:49:42 :Donc voilà ce qui m'est passé par la tête quand on m'a posé la question quand Jonathan m'a demandé de parler de la data, c'est ça qui m'est venu en tête Apache Airflow, et j'essaierai de faire une démo la prochaine fois, peut-être pas la prochaine fois parce que ça prendra un peu de préparation

00:50:01 :Est-ce que vous connaissez aussi Docker pour conteneuriser des applications?Si Willy connait, il connait pas mal de choses quand même Je pense que c'est Jonathan, non ok En fait Docker ça permet de conteneuriser des apps et c'est quand même vachement intéressant parce que vous avez la fameuse question quand vous développez une application sur votre ordinateur

00:50:30 :et que vous l'envoyez à un ami ou un collègue et que ça marche pas chez lui Il y a la situation, ça marche sur mon ordi et ça marche pas sur le tienneau, c'est bizarre Et en fait Docker ça permet de faire un conteneur, vous voyez ça comme un conteneur

00:50:45 :où il va empaqueter tout l'environnement de votre ordinateur que ça soit Windows, Linux, Mac Si vous faites un conteneur Docker avec votre application ça marche pas sur n'importe quelle plateforme qui peut faire tourner un processus Docker Donc ça premièrement c'est intéressant et ça permet aussi de déployer des applications beaucoup plus facilement

00:51:07 :surtout si vous avez des interactions Par exemple imaginez, vous avez un modèle de machine learning qui tourne sur des données qui sont sur une base de données Donc en fait ça vous fait déjà, vous pouvez le voir aussi comme deux applications séparées et vous pouvez les mettre en réseau les deux de manière très simple

00:51:31 :Vous pouvez les faire interagir et par exemple après si vous avez besoin de déployer votre application globale vous déployez uniquement votre Docker qui contient déjà ces deux sous-applications là Et en fait Vincent, Docker et Kubernetes tu peux pas vraiment les comparer parce que c'est pas la même chose Avec Kubernetes en fait ça te permet de déployer et de distribuer sur plusieurs machines virtuelles

00:51:56 :ton application, comme ça si jamais par exemple imagine que tu as un site internet qui tourne sur un serveur tu peux dire avec Kubernetes tu peux facilement déployer ton site web sur des centaines voire des milliers de serveurs comme ça quand tu en as un qui tombe en RAID

00:52:18 :si ton serveur tombe en RAID, Kubernetes va gérer automatiquement la prise en charge de tous les autres serveurs et ça, ça sera transparent pour ton utilisateur ça va pas lui changer son URL ni quoi que ce soit mais c'est ce que permet de faire Kubernetes donc c'est vachement puissant aussi

00:52:36 :c'est un peu comme tout, Apache Airflow, Docker, Kubernetes ça prend un peu de temps à prendre en main mais une fois que c'est pris en main ça marche bien et ce que tu fais Vincent, ça peut Kubernetes si t'as l'occasion de regarder moi j'avais quelques cours là dessus sur Kubernetes

00:52:53 :donc si tu commences à t'intéresser on pourra en discuter Failover je connais pas Willy qui disait ça facilite la sécurité oui c'est vrai parce que si par exemple on vous envoie une application et que vous voulez la tester il y a l'option de mettre sur une machine virtuelle dans votre machine, comme ça vous ne pétez pas tout votre système

00:53:20 :mais vous pouvez aussi la faire tourner dans un container qui en fait ça fera jamais sortir l'application du container dans votre système ça se met dans Docker et je te rappelle la dernière fois quand j'ai montré Streamlit Streamlit c'est une application qui tourne un peu comme Django tu peux avoir un serveur de développement

00:53:48 :Streamlit et ce que tu peux faire c'est tu as tes deux applications, Streamlit et Django imagine que Streamlit c'est juste l'interface web qui vient piocher dans ta database et bien en fait avec Docker et Docker Compose tu peux déployer facilement tes deux applications tu peux les faire tourner sur le même network

00:54:12 :et elles vont se parler entre elles et si tu veux j'ai un repo github dans lequel j'ai une application Django que j'ai transformé en Docker et que je fais tourner sur un Raspberry Pi donc si tu veux tu pourras voir l'exemple ça pourra t'aider pas de soucis parce que c'est vraiment long à maîtriser ce genre de truc

00:54:42 :donc voilà pour ça allez-y continuez à poser des questions j'ai encore quelques minutes est-ce que d'autres dans le chat veulent voir quelque chose en particulier je sais que Stéphie a un fameux problème avec le mkdir corrige moi si je me trompe Stéphie sur le chat oui est-ce que tu as toujours ton problème?

00:55:18 :oui mkdir mec direct oui oui tout à fait Willy mais du coup Stéphie j'arrive pas à comprendre ton problème parce qu'en fait mkdir toi tu utilises git bash c'est ça?

00:55:37 :oui et du coup quand tu vas dans git bash et que tu fais mkdir test folder tu as un problème en fait ce que tu fais c'est ça tu lances un interprète python et après tu fais mkdir dis moi si c'est ça que tu fais oui exactement c'est ça

00:56:09 :mais ça peut pas fonctionner comme ça parce que tu es dans un interprète python donc tu peux pas utiliser les commandes que python connait pas python il connait pas mkdir python ce qu'il connait lui c'est import os.pass.shuttle

00:56:33 :enfin bref si tu veux créer un dossier à partir de python il faut que tu utilises une bibliothèque python le mkdir ça se tape uniquement dans une invite de commande ou dans un terminal donc en fait quand tu es dans git bash ça doit se présenter un peu de la même manière que ça

00:56:51 :c'est ici que tu tapes mkdir oui en fait je suis la même chose que fait Thibaut donc il tape mkdir puisqu'en fait c'est un parallèle pour le bolt sur discord et en fait il dit qu'il faut faire mkdir pour pouvoir aller ensuite sur discord pour télécharger la fameuse bibliothèque

00:57:22 :pour créer le bolt si je me souviens bien et du coup...et du coup... j'y arrive pas mais Thibaut il tape pas sa commande mkdir dans l'interprète python je sais pas c'est sur lui il tape je sais pas sur quoi il est exactement il est forcément soit dans un terminal linux dans une invite de commande windows ou dans git bash

00:57:52 :mais je pense qu'il est dans git bash mais non il est pas sur du windows ok mais dans tous les cas il tape toutes les commandes de windows il tape mkdir après il marque dogbot et ensuite en dessous il y a toute une ligne il y a des choses qui s'inscrivent etc et puis au fur et à mesure ça lui permet d'aller télécharger cette fameuse bibliothèque

00:58:26 :je comprends mais le point de départ qui te manque c'est que tu dois taper dans une invite de commande et pas dans un interprète et en fait ici tu vois là je suis dans mon invite de commande ou là je peux faire mes commandes ls etc par contre dès que je fais python là je rentre dans l'interprète et là je peux plus faire mkdir

00:58:48 :c'est ça voilà c'est ce que j'ai exactement c'est parce que tu es dans un interprète python en fait il faut que tu sortes soit tu fais un ctrl z je crois exit ouai ouai en fait il faut que tu sortes tu vois là je tape python et si tu fais exit

00:59:07 :tu sors de ton interprète donc tu as plusieurs méthodes de sortir mais il ne faut absolument pas taper tes commandes ah oui c'est ça c'est ce que je voulais savoir ctrl z tu vois tu ne dois pas taper les commandes indiquées dans un interprète d'accord donc essaye et puis si jamais tu as un problème si je t'avais proposé on peut faire une video

00:59:32 :écoute j'essaierai et puis si jusqu'à dimanche je ne suis pas arrivé à trouver mon bonheur à ce moment là je te contacterai pour faire une video ah bah n'hésite pas ok super merci avec plaisir du coup les autres est-ce que vous avez d'autres questions est-ce que les sujets désolé c'était un peu décousu là

00:59:56 :ce que je vous ai fait aujourd'hui à cause des bugs que j'ai eu et puis voilà désolé pour ça je ferai mieux la prochaine fois merci Arnold et dites moi si les sujets dont on a parlé là le Apache Airflow le docker etc est-ce que ça vous intéresse est-ce que vous voulez voir ça c'est plus pour après on s'est écarté un petit peu de Piton donc faudra que je vois aussi avec Thibaut ce qu'il en pense

01:00:27 :mais je pourrais essayer de faire quelque chose bon bah voilà je pense que c'est bon pour aujourd'hui tu vas refaire des sessions de Data Science merci bonne soirée oui probablement je pourrais en refaire il faut que je réfléchisse à quoi mais si tu as des idées aussi Vincent si tu veux voir des choses n'hésite pas

Rechercher sur le site

Lance une recherche parmi les centaines de ressources disponibles sur le site.

Inscris-toi à Docstring

Pour commencer ton apprentissage.

Tu as déjà un compte ? Connecte-toi.