Session du 02 septembre 2024 à 19h00

Data Science & IA

Veille & Discussions

Scrapper pour ALIBABA

Le but de aba-cli-scrapper est de construire un dataset contenant des informations sur des produits avec leurs fournisseurs, en fonctions de mots clés choisi par l'utilisateurs .

00:00:00 :Toutes ces difficultés que j'ai rencontrées parce que je ne voulais pas faire un truc qui soit synchrone, je ne voulais pas faire un truc qui soit synchrone, il y a une partie synchrone maintenant, mais je ne voulais pas faire un truc qui soit entièrement synchrone, donc du coup j'ai dû utiliser Ascensio pour faire un peu de parallélisme et tout, pour que je puisse faire plusieurs requêtes à la fois, et il a fallu beaucoup trimmer la documentation de Playwright pour voir comment est-ce que ça gère,
00:00:30 :ça gère les requêtes à synchrone, comment est-ce que ça doit fonctionner pour qu'il n'y ait pas d'erreurs, et puis en même temps j'étais aussi en train d'apprendre à faire Ascensio, donc du coup ça m'a pris un bon bout de temps quand même pour le faire, ça m'a pris beaucoup d'erreurs, ça m'a pris un truc comme 6 mois, parce que là actuellement je viens d'aménager dans un nouveau pays, donc ça fait comme 6 mois depuis qu'on est arrivé, que je travaille dessus, donc c'est vraiment un projet qui m'a beaucoup
00:01:00 :pris, c'est aussi la première fois que je me suis mis à vraiment faire les tests, parce que si maintenant on regarde sur les repos, j'ai mis comme un tag pour qu'on puisse voir que ça couvre et tout, donc j'ai essayé de documenter le plus possible, parce que j'avais tout fait dessus, et je savais que bon, après si tu donnes un projet à quelqu'un et qu'il n'y a pas suffisamment de documentation dessus,
00:01:27 :ça, ça, la personne ne peut pas l'utiliser, toi t'as passé du temps dessus, tu sais comment ça fonctionne et tout, mais si une personne n'a pas de doc, ça fait que la personne ne sait pas comment ça fonctionne, donc là, est-ce que vous voyez mon terminal ? Là actuellement, je vais faire une démo, je ne sais pas sur quel écran je suis en train de partager,
00:01:49 :sur le navigateur, ok, je vais changer, je vais changer le partage, ok, d'accord, là je pense que maintenant c'est le terminal,ok, ok, donc du coup, puisque ça fonctionne avec Braille Data, la première commande que j'ai fait, ah voilà, un autre truc vraiment très important, peut-être avant que je fasse la démo, c'est ce que j'ai beaucoup apprécié, l'algorithme que j'ai le plus apprécié dans tout le projet, c'est Typer, c'est vraiment un truc hyper bien documenté, c'est fait par Tiangolo, je crois que c'est lui qui a aussi fait FastAPI, c'est vraiment Typer, la docuse du Typer est très très très bien faite,
00:02:38 :du coup, je vais d'abord commencer avec la lib normal pour faire une application en CLI, mais quand j'ai vu le rendu que donne Typer, c'était beaucoup plus intéressant, c'est vrai que de base je suis aussi tombé sur Rich,mais Rich, juste à la vue, moi ça me faisait un peu peur, parce qu'il y a beaucoup de, comme des décorateurs, donc des décorateurs pour faire des options, des décorateurs pour faire et tout et tout, du coup je trouvais que c'était vraiment beaucoup plus simple avec Typer, donc c'est Typer que j'ai utilisé, en gros il y a comme 3 commandes que j'ai faites, une commande pour scraper, j'ai essayé de vraiment diviser les process, il y a la commande pour configurer d'abord sa clé d'API pour Braille Data,
00:03:33 :puis après il y a une commande pour faire du scrapping, pour scraper, puis il y a une commande qui va, quand ça finit le scrapping, le process du scrapping c'est, ça va prendre les pages, quand ça prend les pages, ça les télécharge, ça télécharge toute la page, et puis quand ça télécharge la page, ça la met dans un dossier, puis il y a une autre commande qui va faire du scrapping en local, donc moi je télécharge la page, ça fait du scrapping en local,
00:03:55 :puis quand le scrapping est fait en local, ça se regarde dans une base de données, soit ma SQL, soit SQL, puis après j'ai récemment ajouté un AI-Agent, j'ai vu un projet open source de quelqu'un qui proposait un AI-Agent, je pense que je vais envoyer les liens ou alors je vais vous les montrer ici, c'est un AI-Agent où ce que tu as à faire c'est de lui envoyer un fichier CSV, et puis après quand tu lui envoies un fichier CSV sur ça, il peut te construire un graph, un plot par exemple,
00:04:24 :c'est une des démos qu'il y a sur mon repo, donc du coup là, si je fais une démo de base, si je fais une démo de base, le process, le workflow, en gros c'est, tu fais un abba run, set API key, là il y a ma clé d'API que je vais mettre, set API key,
00:04:51 :récemment j'ai dû changer un peu la commande, de base avant tu mettais juste set API key et puis tu mettais ça, mais entre temps, il y a certains, puisque vraiment j'ai partagé le projet partout, il y a certains proxy providers qui m'ont envoyé des messages sur Discord et qui voulaient que j'intègre aussi leur API, donc en gros il y a Siphon, c'est un serveur de machin, un fournisseur de proxy, du coup maintenant j'ai dû adapter un peu la commande pour que tu précises,
00:05:20 :si vous voyez, tu précises le fournisseur de proxy que tu veux, donc là je peux mettre Bright Data ou alors je peux mettre Siphon, du coup quand tu fais ça, quand tu fais ça, ce que ça va faire, c'est que ça va enregistrer ta clé d'API dans ce dossier-ci, .inf, il est là dans le package, ça va l'enregistrer ici, alors non, sur cette commande-ci, là ça risque de renvoyer une erreur,
00:05:48 :parce que là c'était sur une autre branche, ouais, cette option-ci, il n'y a pas, parce que là je travaille sur une autre branche, là je suis sur la branche main, peut-être que je vais la montrer après, donc je vais juste faire simple, sur cette branche-ci, parce que cette branche-ci c'est le projet de base, il n'y avait que le logurou, level-ci, que je mets souvent pour définir si ça doit afficher du logging ou pas, ça c'est une librairie que je prends direct depuis le site qui a ce docstring sur le scrapping,
00:06:16 :et puis là c'est là qu'il va venir se mettre la clé, donc de base, tu l'investis sur de base, c'est ça, tu fais juste cet API key, et puis ça va prendre ta clé d'API, ça va venir la configurer dans le .inf, voilà, donc si tu regardes, c'est bon, ça va la configurer dans le .inf, je préférais la faire une fois, parce que je n'avais pas envie que quelqu'un soit obligé de la mettre à chaque fois dans la commande quand il veut faire du scrapping, donc du coup quand c'est fini, tu vas faire aba run, tu fais aba run, db, ah non pardon, scrapper,
00:06:45 :alors le scrapper, je ne sais pas, je vais faire un truc un peu original comme machine agricole, ok, puis tu peux choisir le nombre de pages que tu vas prendre avec tiret, ok, tu vas choisir le nombre de pages que tu vas prendre, tu peux mettre soit tiret pr, parce qu'on peut même regarder mon main,
00:07:12 :c'est ce qu'il est là, voilà, le voilà, voilà, donc là tu as les options, tu as keyword, ça c'est un argument, c'est direct quand tu commences la commande, tu le mets, puis après tu as le html folder, c'est, tu peux choisir le nom sur lequel le dossier sera créé, ou alors si tu ne le fais pas, ça va juste faire comme c'est machine agricole, ça va créer un dossier qui aura machine agricole et ça va remplacer des espaces par un tiret du 6 ou un tiret du 8, je ne sais pas,
00:07:38 :donc là tu peux choisir le nombre de pages que ça va prendre, là on va dire peut-être 15, puis tu peux aussi choisir si ça va le faire en synchrone ou pas, si je veux que ça le fasse en synchrone, là j'aurais fait un SA pour Synchronous API, Synchronous API, je crois que c'est ici, voilà, Sync API, Sync API, mais ici ce n'est pas présent, donc si je l'enlève, ça va le faire en asynchrone,
00:08:02 :donc je peux choisir comment est-ce que ça va sauvegarder, je vais faire un html folder et je vais mettre ma, ou m-a, du coup ça va lancer, ça va afficher comme un progress, un progress bar, que j'ai fait avec la librairie riche, by the way,voilà, c'est que là ça se met à charger, ça va récupérer les pages, puis quand ça les récupère directement, ça va les charger dans le dossier qui s'appelle m-a. En passant aussi, une grande partie des ressources que j'ai utilisées aussi, je pense que je vais partager les liens, les liens peut-être un peu à la fin, ça vient d'un repo, un repo que j'ai trouvé, qui montrait vraiment comment faire un package Python de A à Z,
00:09:00 :avec les tests, les trucs à utiliser pour faire la documentation, parce qu'après j'ai aussi hébergé la documentation sur readthedoc, la plupart des documentations souvent quand tu les cherches, ils sont dans readthedoc, comment est-ce que tu vas faire pour l'héberger là-bas, comment est-ce que tu vas faire des tests, comment intégrer les CI, STZ et tout, donc là, je fais le test, si tu regardes, tu fais un ls, il y a un m-a quelque part, voilà, le voilà, il est là,
00:09:28 :et du coup, on peut faire un ls dessus pour savoir, pour savoir, non, voilà, pour savoir combien de pages il y a dedans, voilà, ça va afficher, je crois qu'on a dit dix pages, donc ça va afficher, ou quinze, ouais, je crois que c'est quinze que j'ai choisi, donc du coup ça va afficher les quinze pages, ok, il y a toutes mes quinze pages,
00:09:52 :puis la suite du process c'est, la suite du process c'est maintenant faire du scrapping en local, donc du coup, faire le scrapping en local, ça va demander qu'il prenne toutes les pages, toutes les pages qui sont dans le dossier, ça va essayer de trouver des schémas à l'intérieur, pour le coup, une grande partie des informations que j'ai prises proviennent de, il y a comme des informations, quand le front-end, quand le back-end communique avec le front, des fois il y a des informations,
00:10:21 :en gros, ça vient comme sur un fichier JSON, et c'est là-bas qu'il y a une grande majorité des informations que j'ai prises, que j'ai récupérées, on peut même voir les informations que j'ai récupérées dans le type and data, voilà, sur le produit, je récupère le nom, je regarde si le produit est garanti par Alibaba, les spécifications que le produit a, le minimum to order, genre le minimum à commander, le nombre de produits qui ont déjà été vendus, si ce produit a déjà été vendu, le minimum du prix, le maximum du prix, le score du produit,
00:10:50 :le score du produit, je pense que c'est Alibaba qui le note, puis le nombre de revues, peut-être de commentaires qu'il y a eu dessus, puis le score total, c'est-à-dire les commentaires, quelqu'un met 2 étoiles, 3 étoiles, donc le score en moyenne que le truc a eu, le temps moyen de livraison, est-ce que c'est en promotion, est-ce que c'est customizable et tout, et le nom du fournisseur.
00:11:10 :Puis après les informations sur le fournisseur, on peut regarder est-ce qu'il est vérifié, son SOP level, bon là il faudra regarder la doc d'Alibaba pour savoir un peu à quoi ça sert, mais en gros il se base sur certains critères pour évaluer le niveau d'un don commerçant, puis l'actuel country name, une grande majorité des fournisseurs sont chinois, quand on va faire les plots, c'est quelque chose qui sera visible,
00:11:37 :là on peut voir le nombre, depuis combien d'années le fournisseur est là en tant que Gold Supplier, ça aussi c'est un autre titre, et maintenant les fournisseurs sont notés sur le service, et du coup vous pouvez aussi avoir leurs informations. Il y en a d'autres que certains m'ont demandé de rajouter, donc je pense que je vais les rajouter après.
00:11:57 :Donc une fois que c'est fini, là on va taper la commande abaron dbupdate. Ah non, bon, de toutes les manières on pourrait quand même essayer, mais ça n'allait pas fonctionner, parce qu'il faut d'abord initialiser une base de données. Je vais commencer par le plus facile, initialiser la base de données avec SQLite, parce que c'est vraiment le plus facile.
00:12:20 :Donc je vais faire un dbupdate, de base ça va le faire avec SQLite. Donc, pardon, pas dbupdate, dbinit, je me trompe sur mes propres commandes, dbinit, et puis là tu fais un tiret s, tu mets juste le nom, tu ne mets pas l'extension. Donc je vais faire un tiret s là, il n'y a pas besoin de mettre ce que j'utilise.
00:12:44 :Si j'utilisais ma SQL là, j'aurais mis ma SQL là, là vous voyez un peu des exemples là, qui apparaissent que j'ai déjà utilisé, mais là j'utilise SQLite, donc f, et puis on va appeler ça machine.jrecord, voilà.
00:12:58 :Donc, là bas run, et puis ça va t'envoyer le message pour te dire ok, ça a initialisé la base de données. L'initialisation de la base de données, ça consiste à créer deux tables en gros. Ça va créer une table fournisseur qui est reliée par, voilà, une table fournisseur qui est reliée par foreign key à une table de produits.
00:13:14 :Ou alors l'inverse, je crois que c'est le produit qui est relié par foreign key avec la table fournisseur. Donc une fois que c'est fait, que la base de données SQLite est créée, effectivement elle est vide maintenant, je peux venir update donc dessus.
00:13:28 :Donc, je vais faire un ABBA run, ABBA run db, db update, ok. Je fais un ABBA db update, la commande du ABBA db update, il faut lui fournir le dossier sur lequel il va faire du scrapping en local, puis la base de données sur laquelle il voudrait qu'il sauvegarde les données qu'il a prises.
00:13:50 :Donc là, le KR, ça correspond à Keyword Results. Dans la documentation, j'explique bien les mots et puis je dis si tu veux faire court, c'est mieux de mettre KR. Donc dans KR, je vais mettre, c'était M avec un underscore A, voilà, donc je veux que tu utilises les pages HTML qui sont ici, puis je veux que tu les sauvegardes sur MAIG, sans extension une fois de plus.
00:14:14 :Tac, on les met comme ça. Donc du coup, ça va aller récupérer les informations. Quand ça commence, ça cherche d'abord les suppliers et après, quand ça va créer les produits, ça va les relier aux suppliers. Donc là, je vais vous montrer le, quand ça finit, je montre un peu en gros le code de comment est-ce que ça fonctionne et la librairie que j'ai utilisée.
00:14:38 :Ça va passer les produits, oui, ça passe d'abord les suppliers comme je disais, puis après ça passe les produits et après ça va faire comme une liste de dictionnaires dans les deux et que ça va ajouter. Donc là, je crois que c'est fini.
00:14:52 :Je peux venir dans Engine & Database, voilà. Donc en gros, ça va ici, je crée l'Engine, qu'est-ce que j'ai encouragé, j'ai utilisé SQLitemy et je crois qu'il y a une autre, je ne la vois plus, voilà, et Models.
00:15:16 :Non, je crois que c'est pas Models, je sais. Voilà, SQLmodels, SQLmodels et SQLalchimie, un peu un mélange des deux. Et by the way, SQLmodels a aussi été fait parti d'Angolou. Il a plutôt de très bons outils qu'il fait.
00:15:32 :Donc, du coup, ça c'est un peu des fonctions pour ajouter à la base de données et tout. Ici, on a le Add supplier to DB. Comme je disais, c'est d'abord par ça que je commence. Je récupère toutes les informations que j'ai scrapées. Après, on verra peut-être le module sur à peu près comment ça se passe le scrapping.
00:15:50 :Je récupère toutes les informations, comme tous les dictionnaires qui ont été faits au moment où la base de données est en train d'être mise à jour. Je récupère d'abord tous les produits. Une fois que tous les produits ont été créés, là maintenant, en créant, enfin une fois que tous les fournisseurs ont été créés, en créant les produits, je rajoute les fournisseurs, chacun avec son fournisseur, chacun avec son fournisseur.
00:16:14 :Donc, une fois que c'est fait, là on peut même déjà aller voir à quoi ressemble la base de données. Est-ce qu'elle est live? C'est comme une espèce de mamamamama. Alors, voilà. Donc, elle est là. On l'ouvre. J'espère qu'il y aura beaucoup de produits quand même. J'ai pas pris beaucoup de pages.
00:16:34 :Ok. Les bugs commencent. Alors, peut-être que là, ce que je vais faire, c'est plus essayer de faire un update sur les pages HTML que j'ai déjà, que j'avais déjà scrapées. Ici, j'en ai comme 32. Donc, ça va quand même mettre un peu de temps. Ce que je vais faire, c'est relancer un ABBA run.
00:17:00 :Je vais relancer un ABBA run sur machine agricole et puis ça va venir les sauvergarder ici, dans N, dans MA. Là, par contre, ça sera un peu plus long parce qu'il y a beaucoup plus de pages à scraper.
00:17:26 :Donc, ça va passer les suppliers, passer les produits, ajouter les suppliers à la base de données et ensuite ajouter les produits. Donc, peut-être que, pendant que ça le fait, là on peut venir un peu voir le process de scrapping HTML. Voilà.
00:17:52 :Ok. Je vais vous montrer déjà un exemple, un peu de pages, de ce que je recherche dans les pages HTML. Toutes les pages HTML, il y a un fichier Jison, enfin, que je vais transformer en fichier Jison après. C'est dans le container. Non, c'est pas ceci, mais ça ressemble un peu à ça. Sauf que là, c'est Windows Page Data.
00:18:14 :Et à l'intérieur, il y a absolument toutes les informations que je cherche. Donc, je le prends, je le transforme en dictionnaire, puis une fois que c'est transformé en dictionnaire, comme je sais déjà à peu près à quoi ça ressemble, c'est là que je vais et que je récupère toutes les informations dont j'ai besoin.
00:18:32 :Donc, c'est un tag. Peut-être que pendant ce temps-là... Ah non, c'est toujours en train de charger. Peut-être que je vais venir dans HTML 10. Voilà. Est-ce que je l'ai dit ici? Non. Ok. Ça devrait être là.
00:18:56 :Ok. Voilà. Déjà, il y a des divs qui ont cette classe-ci que je cherche. C'est comme quand tu arrives sur le site Alibaba, toutes les petites cases que tu vois sont dans une grande div et cette div a cette classe-ci.
00:19:15 :Donc, c'est d'abord ça que je cherche, parce qu'il y a certaines informations que je retrouve que là-bas et que je ne vois pas dans le fichier JSON. Puis après, comme je disais tout à l'heure, dans la page HTML, il y a une div qui a toutes les informations, un peu comme un fichier JSON, quand le bac communique, il envoie ce genre d'informations.
00:19:38 :Et ça se trouve dans un fichier JSON qui a cette classe-ci. Voilà. Pages jeux, pages data, configs. Et souvent, ça change, parce que justement, le strapping, il y a beaucoup de trucs qui changent souvent en fonction des pages et de ce que tu cherches.
00:19:55 :Donc, parfois, c'est ça et parfois, c'est celui-ci. Donc, j'essaye de m'arranger un peu pour que ça essaie, ça essaie, ça essaie en fonction des différents catégories que j'ai déjà pu rencontrer. Donc là, c'est en train d'ajouter la base union.
00:20:17 :Est-ce que c'est mon terminal qui bug ? Est-ce que c'est mon terminal qui bug ?Possible, possible, possible, possible. Je vais essayer de le relancer. Il allait voir au niveau de cette base union. Elle est là. Je la relance. Ok. Je pense que ça va être fini, mais ça a dû planter un peu.
00:21:04 :Voilà. Donc là, ça a mis les informations sur les produits qu'il y a comme machine agricole. Ils sont ici. Je pense que je vais les défiler comme ça. Donc, il y a l'idée, le name, est-ce qu'ils sont garantis ou pas, les différentes identifications, minimum, order, supplier, et tout, et tout, et tout, et tout.
00:21:25 :Et après, ça fait aussi la même chose pour les suppliers. J'ai une base de données SQLite qui est bien constituée, et tout, et tout, et tout. Et sur la base de ça, pour pouvoir lancer le AI agent, il faut que je convertisse la base de données SQLite en format CSV.
00:21:46 :Et c'est en format CSV, après, que je pourrais communiquer avec la base de données. Parce que c'est vraiment plus le format CSV que l'outil open source que j'ai vu prendre. Donc, du coup, je fais un ABA run.
00:22:01 :Donc, ce que j'ai fait, c'est que je lui ai indiqué, exporte à CSV. Qu'est-ce qu'on veut exporter à CSV? C'est le fichier SQLite, voilà. Et on veut l'exporter sur quel format? On va dire machine A.cs.
00:22:30 :CSV, ok. Donc, ça va prendre ça, ça va l'exporter en fichier CSV. On pourra aussi explorer à quoi le fichier CSV ressemble. Le fichier CSV, pour qu'on puisse faire des requêtes vraiment sur toutes les informations qu'on a, ce qu'il fait, c'est une jointure.
00:22:49 :Donc, ça va faire une jointure de toutes les informations de la table de produits avec les informations qui sont sur le fournisseur. Donc, on peut aller voir ça dans les commandes. À quoi ça ressemble? Parce que c'est l'une des commandes les plus simples, sinon les plus simples.
00:23:08 :Donc, là, il y a la requête que je cherche à faire, qui est écrite en string et tout. Et après, c'est vraiment ici que la jointure se fait. Donc, ça va prendre le product, les IDs des produits, là où les IDs des produits sont égales aux IDs des suppliers.
00:23:32 :Donc, ça va faire une jointure et ça va faire toute une grande table. On peut voir à quoi la grande table ressemble dans le fichier CSV. Comment ça s'appelle déjà? Machine A. Ok, voilà, le fichier CSV. J'ai un visualiseur, là, qui permet de le voir vraiment en table. Ok. Donc, là, vraiment, on a tout. On a sur une ligne, on aura le supplier ID, le product ID, son nom, est-ce qu'il est garanti ou pas.
00:23:58 :Donc, on a toutes les informations qui sont relatives aux produits, puis toutes les informations qui sont aussi relatives à son fournisseur. Donc, là, tu auras le nom du fournisseur. Donc, pour chaque produit sur la même colonne, tu as toutes ces informations. Et quand c'est comme ça, c'est beaucoup plus facile, après, d'envoyer ça à un AI agent pour qu'il puisse avoir connaissance vraiment de tout.
00:24:19 :Donc, le AI agent que j'utilise, c'est Data Horse. C'est un truc que j'ai découvert sur Exit. C'est vraiment encore très, très jeune et tout. Le souci qu'il y a avec, c'est que parfois, il y a des risques. Voilà, AI agent. Là, je fais la requête et je lui indique, en gros, tu fais la requête et tu dis ce que tu veux.
00:24:43 :Et après, tu lui indiques le fichier sur lequel tu aimerais qu'il se base pour faire ta recherche. Donc, le souci qu'il y a encore avec ça, c'est que parfois, ça hallucine. Bon, c'est pas que ça hallucine, mais c'est pas, comment dire, consistant. C'est-à-dire que pour une même requête, forcément, tu ne peux pas t'assurer qu'il va te générer le même code et ça va parfois te générer des plots qui sont différents.
00:25:10 :C'est même pour ça que mon package est devenu un tout petit peu plus lourd parce que pour prévoir ça, j'ai dû rajouter quelques dépendances, des trucs comme Symbol, comme Plot, comme Networking, qui n'étaient pas vraiment importants, mais dont le, je vais dire quoi, l'AI agent pourrait en avoir besoin et si c'est pas disponible, il va comme ta fichier.
00:25:33 :Donc là, par exemple, je dis, ça va afficher un plot qui va trier 6 noms de fournisseurs basés sur leur année en tant que Gold Supplier. Donc, sur leur année en tant que Gold Supplier et les noms doivent être triés horizontalement. J'ai remarqué que quand je mets ça, ça fait des résultats un peu plus sérieux. Donc, effectivement, parfois, ça peut échouer. Donc, la seule solution à ça, c'est juste de recommencer la commande.
00:25:57 :Mais, du coup, quand ça réussit, déjà, ça va t'afficher le plot. Puis, à la fin, ça t'affiche comme une barre. Voilà. Donc, tout ce que je peux faire après, c'est vraiment relancer. Parce que là, c'est sûr qu'il a peut-être voulu importer un truc qui ne fonctionnait pas. Je n'avais pas envie d'afficher ça à l'utilisateur. Donc, je me dis, tout ce qu'il va faire, c'est juste relancer de toute manière.
00:26:20 :Alors, peut-être que je pourrais essayer avec un truc un tout petit peu plus simple. Ok. Je vais dire quoi? Qui affiche?Stop. Bon, on va dire quoi? Great. Suppliers. Suppliers. Par pays. Voilà. Donc, ça devrait pas faire trop de soucis. Oui, par pays.
00:27:13 :Donc, là, c'est le résultat que tu as. Il te met le plot. C'est sûr que si je relance la commande, ça va me générer un truc moins différent de ça, en tout cas.
00:27:40 :Mais là, en tout cas, ça te montre que sur les données que j'ai, que j'ai scrappé et tout, la Chine a le plus de fournisseurs. Puis après, derrière, c'est Hong Kong. Et les autres sont un tout petit peu plus insignifiants. Il y en a quand même, mais ils sont un tout petit peu plus insignifiants.
00:27:55 :Parfois, ça génère des plots qui sont vraiment beaucoup plus intéressants que ça. Ok. Ah, voilà. Là, ça t'affiche. Ok, ok, ok. Du coup, ça l'a fait avec le supplier score. Donc, je suppose que peut-être ça a fait une moyenne de tous les scores des fournisseurs chinois avec la moyenne de tous les scores des fournisseurs Hong Kongais.
00:28:17 :Donc, en gros, c'est un peu ça le workflow. Tu prends ta page HTML, tu fais du scrapping dessus. Puis après, tu as la sauvegarde dans un dossier. Et ensuite, tu peux faire des analyses dessus, demander à AI-Gene.
00:28:39 :Par contre, tu peux juste aussi lui demander des informations où il va comme juste afficher le dataprint. Si je lui demande par exemple, je n'ai pas d'idée de requête là. Peut-être tous les produits.
00:29:05 :Tous les produits avec un score égal à 5. Je ne sais pas s'il va comprendre ça.Voilà. Égal à 5. Là, si tu ne mets pas un truc qui ressemble trop à un plot, là il va juste, en principe, il devrait juste afficher le dataprint là dans une table. Voilà. Je pense pas que ça devrait. Voilà, voilà, voilà.
00:29:40 :Là, quand tu lui demandes tous les produits qui ont un score à 5, un product score qui est égal à 5, ça va aller chercher le supplé AI-Gene et puis ça t'affiche toute la table. Tu as toute la table qui s'affiche ici et tout.
00:29:53 :Donc, c'est vraiment quand tu mets un truc comme display ou comme plot qu'il va essayer de te construire le plot et l'image que tu vois. Mais quand tu ne le mets pas, c'est pas important. Donc, il va juste te mettre la table ici.
00:30:09 :Donc, en gros, c'est ça. Puis, il y a Yoyonel qui m'a parlé un peu de tout ce qui est, comment, améliorer un peu le processus de développement de package. C'est-à-dire, en gros, mon process, c'est quand il y a une nouvelle fonctionnalité,
00:30:32 :comme là maintenant pour aller sur mon autre branche que je vais vous montrer un peu à quoi il ressemble quand j'ai ajouté le nouveau fournisseur de proxy. Quand je le fais, après, je dois faire comme un GitHub. Je dois venir dans le Pyproject.toml pour faire un bump de ça.
00:30:51 :Et après, je dois pousser ça sur Pyproject. Quand je le pousse sur Pyproject, je dois faire la même chose avec Poetry pour que ça fonctionne. Puis, après, je dois faire la même chose avec le site readzdoc que je viens d'ajouter ici à les documentations. Donc, ça fait que c'est quand même un peu long.
00:31:11 :Pour le moment, je n'ai pas encore tout intégré, mais j'ai intégré quelques-uns qui sont intéressants. Ça, c'est le pipeline pour que, automatiquement, si je fais des modifications sur ma documentation, ça va le pousser automatiquement sur le site readzdoc. En fait, quand je vais faire un push sur le repository, mon site readzdoc va directement s'afficher.
00:31:33 :Alors là, je vais peut-être finir pour tout ce qui est pré-commit. Pré-commit aussi, c'est un outil que j'ai installé avec les pré-commits de RUF, parce que c'est RUF que j'utilise un peu pour le linsing. Les pré-commits, même les OOPS qui sont offerts par pré-commit aussi. Je pense que c'est les seuls que j'utilise.
00:31:56 :Et puis, il y en a un autre pour formater les fichiers, les fichiers Macdown. Donc, je crois qu'en gros, c'est tout. Le reste, c'est juste ce que j'ai rajouté pour avoir l'icône du sponsor là, quand tu crées ton compte. Donc là, ce que je vais faire, c'est plus sortir pour présenter les différents outils.
00:32:24 :Il me semble que je devrais arrêter ce partage. Non, ce n'est pas ici. Ah oui, c'est ici. Donc, je vais arrêter le partage. Je vais partager les fenêtres. OK.
00:32:42 :Voilà. Donc là, on peut aller sur READ THE DOC. C'est exactement la même chose qu'il y a sur le repo. C'est exactement la même documentation. En principe, je me dis que ça devrait servir, mais vraiment, quand il y a un truc un peu plus poussé. Mais l'objectif, de base, je voulais juste, quand j'ai commencé le projet, je voulais juste répondre aux besoins du service que, entre guillemets, le client avait demandé.
00:33:11 :C'est juste un projet que j'ai reçu sous le statut d'un ami, comme je disais. Puis après, j'ai vraiment voulu faire des choses pro. Je navigue un peu ces derniers temps avec tout ce qui est outils faits avec Python. Donc, je ne sais pas, des trucs qui te permettent, par exemple, de naviguer sur YouTube, mais dans ton terminal, tout ce qui est outils pour les terminaux, tous les outils qui servent à faire des outils dans le terminal, à faire des outils dans le terminal. C'est vraiment quelque chose qui m'intéresse un peu en ce moment.
00:33:34 :Du coup, j'ai vu comment les projets étaient présentés et ça m'a donné envie vraiment de refaire la même chose. C'est-à-dire faire un projet où tu mets des tags pour expliquer, donner un peu des informations sur comment est-ce que ton code a été fait ou tu mets des… J'ai vu qu'il y a beaucoup qui font de la documentation et dès que tu arrives, tu as comme déjà une image qui te montre un peu comment le truc fonctionne. Ça, ça accroche un peu la tension et tout.
00:33:56 :Donc, là, j'ai vraiment voulu bien faire les choses. Du coup, j'ai fait un site avec Redis.org, mais le contenu actuellement, c'est le même que sur les repos. Ça ne change pas. Peut-être qu'il y a des trucs un peu plus poussés. Je vais les mettre là-bas.
00:34:08 :Alors, maintenant, je vais aussi vous présenter DataHorse. C'est l'outil que j'ai utilisé. Il devrait être dans mes slides. C'est l'outil que j'ai utilisé, c'était comme… Ok, donc le voilà. Ah ouais, ça monte, ça monte quand même.
00:34:31 :Donc, voilà à quoi ça sert. Faire de la data science et l'analyse de données en plain English. Ils ont une petite démo qui te montre. Là, tu lances le chat. C'est en gros le même processus que j'ai intégré dans mon outil. C'est leur outil que j'ai intégré. C'est ça qui sert à faire le AI agent.
00:34:50 :Donc, je fais le chat. Tu lui envoies des informations. Puis, en gros, c'est même une data frame. Je ne sais pas comment il a mélangé le truc. J'ai essayé de parcourir un peu le code source. À l'intérieur, il y a des API de Grok et des API de Yamaha, en gros, qu'il y a à l'intérieur. Et c'est ça qu'il utilise. Voilà à peu près les trucs qu'on peut faire.
00:35:16 :On peut faire aussi des plots de ce genre-là. Je me demande comment est-ce qu'il a réussi à faire des plots de ce genre-là. Parce que c'est sûr, pour avoir un résultat pareil, il a dû peut-être demander plusieurs fois. Après, c'est vrai que je ne m'y connais pas aussi vraiment en plots. Ça fait que peut-être les commandes que je lui donne ne sont pas assez précises pour qu'il puisse comprendre ce qu'il faut faire.
00:35:33 :Je me suppose que quelqu'un qui s'y connaît vraiment, qui peut vraiment donner les mots-clés qui empêchent l'IA de se perdre. C'est à peu près les plots qu'on peut générer. C'est ça que j'ai utilisé derrière.
00:35:50 :Je peux aussi parler de Playwright, mais en fait, Playwright, ça ne se présente plus beaucoup. Par contre, je peux montrer Typer. C'est vraiment une grosse, grosse, grosse doc. Là, je me suis senti vraiment beaucoup plus à l'aise qu'avec Rich.
00:36:10 :Quand je voulais commencer à faire le projet, je voulais commencer avec le argument et tout. Finalement, je suis arrivé à Rich. Rich, ça m'a l'air un tout petit peu plus compliqué. Peut-être parce que c'est un peu effrayant parce que tu as plein de décorateurs qui se superposent les uns les autres. J'ai trouvé que la manière de faire avec Typer était plus simple.
00:36:29 :Puis, Typer aussi est fait sur Rich. C'est lui qui le dit. Bon, il ne le dit pas ici, mais c'est construit sur Rich. Après, tu as toutes les fonctionnalités de Rich qui sont faites. Du coup, c'est ça qui m'a beaucoup aidé quand j'ai voulu intégrer le TextMode.
00:36:50 :Le TextMode, c'est vraiment un truc que j'ai kiffé en ce moment, comme je dis, parce que je navigue beaucoup dans tout ce qui est outils en ligne de commandes faits avec Python. Il faut que je retourne dans mon repo là. Si je cherche un truc, je rentre. Voilà, tous les outils qui sont faits avec Textual. Là, il faut que je parle de Trogon.
00:37:13 :Après, je vais vous montrer un peu comment j'ai intégré ça. C'est en gros le même processus qui se passe. Trogon, ça permet aux applications qui sont faites avec Qlik d'intégrer ce genre de fonctionnement-là.
00:37:27 :Moi, je me suis dit que ça pourrait être utile pour des gens qui ne sont pas très à l'aise avec l'indic de commandes, taper plein de fonctions et tous les arguments qu'ils ne sont pas très à l'aise avec et qui aimeraient avoir comme une interface texte où chaque information que tu rentres, si là tu regardes, tu as des informations sur ce que c'est en train de faire et après tu cliques juste.
00:37:48 :Donc, le souci que j'avais, et c'est l'un des points sur lesquels je suis un peu fier parce que j'ai vraiment dû à script patouiller partout dans le code, si ce n'est même pas moi qui existe. Je me suis dit, ok, cet outil-ci, ça sert vraiment pour les outils qui ont été faits avec Qlik. Ils expliquent qu'après, ils ont l'intention de l'élargir un peu pour que ça sert pour autre chose, mais c'est un truc qui a été fait avec Qlik.
00:38:08 :Et je me suis dit, ok, Typer, c'est ça avec Qlik. Donc, en principe, il devrait y avoir un moyen d'implémenter le texte, d'utiliser Trogon, même si mon application a été faite avec Typer. Donc, du coup, j'ai vraiment bien cherché dans la documentation. Là, je suis plus sûr de le trouver là-dedans, mais j'ai vraiment bien cherché dans la documentation et il explique comment tu peux switcher entre les deux.
00:38:31 :C'est-à-dire, si tu avais fait une application avec Qlik et que tu veux que ce soit une Typer, comment tu peux faire ? Si tu avais fait une application avec Typer et que tu veux retourner à un truc qui est Qlik, comment est-ce que tu peux faire ? Donc, c'est un truc que j'ai implémenté ici. Là, je pense que tout mon écran est toujours partagé.
00:38:45 :Si je vais sur mon main, là. Donc, j'ai fait un peu comme un petit jonglage, là, avec les... Ok, il est là. Donc, il y a celui-ci. Je vais peut-être le porter un petit peu plus haut. Avec celui-ci. Voilà.
00:39:09 :Donc, là, j'importe Trogon. J'utilise Trogon, mais en lui passant vers la fin, il y a quand même un petit switch qui se fait. C'est vraiment lui qui explique ça dans la documentation. C'est que, du coup, quand tu regardes le projet PyProject, parce que c'est à cet endroit-là que tu indiques le point d'entrée de ton code. Ça devrait être ici. Alors, voilà, c'est ici.
00:39:37 :C'est dans PyProject que tu indiques les points d'entrée de ton code. Donc, là, du coup, j'ai deux points d'entrée. J'ai AbaRun et après j'ai TextMode. Donc, quand tu utilises TextMode, là, je vais peut-être être obligé de lancer avec mon terminal.
00:39:54 :Quand tu utilises TextMode, ça va ouvrir AbaRun comme si c'était une application faite avec clic. Et du coup, Trogon pourra ajouter des fonctionnalités. Je vais peut-être rentrer dans le code. Ce sera un petit peu plus long. Mais quand tu utilises ça, ça fait que, du coup, Trogon se reconnaît. Je vais essayer de le lancer dans ce terminal. Ce sera beaucoup plus clair. Est-ce que vous voyez le nouveau terminal? Parce que là, je pense que j'ai partagé tout l'écran.
00:40:22 :Est-ce que vous voyez le nouveau terminal que je viens d'ouvrir? Au principe, ça devrait être visible. Donc, là, je fais du TextMode et j'ouvre avec AbaRun.
00:40:44 :Pardon, mais je ne vois pas le terminal. Ah, tu ne vois pas le terminal. Ok. D'accord. Je le partage. Désolé, merci. C'est quelque part ici. Voilà. Je le partage ici. Nice. Partager. Voilà.
00:41:11 :Donc là, comme vous voyez, je viens de taper le... En principe, là, tout le monde devrait voir. TextMode. Voilà. Voilà. Ok. Donc, voilà à quoi ça ressemble.
00:41:23 :Donc là, tu as les TextMode. Tu as le... Si tu veux taper la commande AI-Agent, tu as tous les arguments du AI-Agent et un peu expliqué ici. Tu as même, voilà, l'explication de la commande AI-Agent, la sous-commande.
00:41:35 :C'est une commande qui laisse l'utilisateur interagir avec les données scrappées en plein anglais. En anglais, c'est un... Je ne sais pas trop quoi. Donc, là, tu as toutes les informations sur la requête que tu veux faire.
00:41:45 :C'est un texte. Tu vas taper ta requête ici. Puis après, tu vas mettre, indiquer le nom du fichier, CSV dans lequel tu auras qu'ils sortent. Ça, c'est des trucs qui viennent avec, avec clic.
00:41:55 :Mais généralement, c'est pour des shells. Ça marche avec des shells Linux, en gros. Les trucs PowerShell directement, ça n'installe pas d'autocomplétion.Mais en gros, ce que je veux présenter, c'est vraiment ça. C'est que pour les personnes qui ne sont pas très à l'aise, je me suis dit que c'est un mode qui peut aider à faciliter l'utilisation, à part avoir à revenir dans l'invite de commande.
00:42:16 :Parce que, justement, dans le repo, je dis, tu n'auras plus besoin de revenir lire le manuel. En gros, le manuel, c'est le readme parce que, voilà, si tu lances le textemode, tu as toutes les explications.
00:42:25 :C'est assez simple. Là, par exemple, tu as sudb init, ça initialise la commande en utilisant le moteur spécifié. Ça check aussi la validité de l'engine et tout.
00:42:38 :Là, ça permet même de voir des trucs que j'ai déjà sauvegardés par défaut. Par exemple, l'autre par défaut, c'est localhost. Ça, c'est quand tu veux initialiser la base de données, mais avec MySQL.
00:42:51 :C'est un truc que j'ai eu l'occasion de montrer, peut-être que tu verras plus tard. Donc là, tu vas mettre les informations, juste le user, le password, le dbname, tout.
00:42:59 :Donc, c'est vraiment quelque chose que j'ai trouvé assez intéressant. Le textemode, c'est ma petite viété d'avoir eu à tripatouiller le code comme ça.Là, c'est vraiment les trucs où tu cliques et tu n'as pas besoin de faire des trucs. Là, je clique, par exemple, sur close et run et ça le ferme.
00:43:16 :Une des raisons pour lesquelles je n'ai pas voulu utiliser riche, c'est vraiment à cause de l'aspect esthétique. Juste par exemple, ça textemode, ça appelle un truc qui est fait avec clic.
00:43:25 :Et quand tu le lances, voilà à quoi ressemble le truc de clic. Je veux dire, quand tu lances le clic, c'est un peu à ça que ça ressemble. Et ça ne me plaisait pas beaucoup.
00:43:36 :Ça me plaisait vraiment pas beaucoup ce à quoi ça ressemble. Pourtant, si tu tapes avec aba run et que je fais un help, tu as vraiment quelque chose que je trouve beaucoup plus beau.
00:43:45 :C'est tout un petit carré, ça te montre toutes les commandes. Voilà. Là, j'ai vu ça et je me suis dit, bon ok, vraiment, typeur, c'est le meilleur à utiliser.
00:43:53 :Riche, voilà. C'est peut-être pour les aspects qui ne se soucient pas trop du détail, mais vraiment, je voulais faire un truc bien, qui donne envie d'utiliser et tout.
00:44:02 :Donc là, tu as toutes les informations sur toutes les sous-commandes qui sont utilisées. Et après, sur chaque sous-commande, évidemment, si je vais sur AI Agent, tu peux aussi appeler de l'aide dessus.
00:44:15 :Ça va t'afficher de l'aide. Donc, c'est vraiment quelque chose que j'ai trouvé super, super, super intéressant.Donc, je ne sais pas si j'ai vraiment assez parlé du code, parce que c'est encore en train d'évoluer. Je vais peut-être rajouter d'autres fournisseurs de proxy et tout.
00:44:36 :Mais en gros, c'est ça. Je ne sais pas s'il y a des questions ou des gens qui aimeraient savoir un peu plus.Est-ce que j'ai rejoint le nom ? D'accord. Là, c'est tout le temps le nom qui est partagé.
00:44:59 :Et donc, en gros, c'est ça. En gros, c'est ça le check que j'ai fait. Donc, je ne sais pas s'il y a des questions chez les gens qui aimeraient peut-être en savoir un peu plus.
00:45:13 :Je sais que Gabriel... Ah, pardon. J'ai une question. Tout d'abord, c'était super bien présenté. C'était super intéressant, ce que tu as présenté.Et ce que je me demandais, c'est que sur le scrapping, normalement, il n'y a pas quelque chose qui est encadré par la loi ou un truc comme ça avec ça ?
00:45:33 :Oui. Le scrapping, une grande partie de ce que je sais sur l'aspect légal du scrapping, c'est vraiment sur la dernière vidéo du scrapping qui est sortie sur la chaîne Doctrine.
00:45:49 :Donc, j'ai envie de dire comment ça s'appelle souvent ce genre de truc-là. Il y a déjà eu des histoires sur le scrapping. Mais de base, un truc que je sais ne pas vraiment avoir respecté, c'est le robot.txt.
00:46:07 :Le robot.txt, ça t'indique un peu tous les endpoints sur lesquels tu peux faire du scrapping. Et du coup, il faut que le point sur lequel j'ai fait du scrapping avec cet outil soit ouvert par le robot.txt.
00:46:26 :Mais disons que je me suis un peu laissé aller à l'envie vraiment de développer l'outil et tout. Mais du coup, en gros, pour le scrapping, je me dis tant que tu respectes ça, il n'y a pas de chance que tu sois en marge de l'illégalité.
00:46:45 :Pour moi, c'est vraiment le seul que je sais. Puis aussi, il y a des pratiques sur comment est-ce que tu vas faire ce qui est asynchrone. C'est-à-dire, tu ne vas pas lancer autant de requêtes parce que c'est possible sur le site. Parce que vraiment, comme Thibault explique, avec le code, ça va vraiment assez vite. Sur le scrapping, ça fait des requêtes très très rapidement.
00:47:12 :Donc, disons que je me suis vraiment juste laissé aller à l'envie vraiment de voir comment est-ce que ça pouvait fonctionner jusqu'à la fin. Mais, je doute pas que l'API... Attends, si je regarde dans le code, je suis encore dans le... Je peux le checker, mais je sais que je l'ai déjà checké. Donc, il n'y a pas de chance que mon truc soit dedans.
00:47:30 :Qu'est-ce que c'est ? C'est le vote en tout cas. Voilà. Alors là, évidemment, il va falloir...Ma fenêtre. Ok. Donc là, je suis sur le truc. Il y a plein de disallo là. Disallo, disallo, disallo, disallo, disallo. Je vais faire un ctrl-c pour ouvrir ce truc juste là à côté.
00:48:15 :Mais cette fois-ci, pour avoir ça, je vais aller chercher tout l'API que j'utilise, tout le endpoint que j'utilise. C'est dans YouTube Scrapping, Web Scrapper. Voilà. Donc, je vais mettre tout ça ici. Voilà. Donc, c'est trade, trade.slash.
00:48:41 :C'est ça que j'utilise. Est-ce que je peux voir déjà le truc ? Oh mon dieu. Ah ok, il est là. D'accord. Donc, tout le catalogue, tout ce qui est slash trade, slash this, buyer, machin, machin, machin. HTTPS, slash this, buyer aussi. Ouais.
00:49:03 :C'est sur celui-ci que je suis. C'est sur celui-ci que je suis. C'est trade, slash this que je suis. Donc, pas vraiment très... Mais je doute fort que ce qu'il te permet de faire des recherches dessus. Catalogue peut-être. Catalogue peut-être est à l'eau. Mais bon. Product details aussi est à l'eau. Ce serait pas mal de le faire sur...
00:49:29 :Ce serait peut-être un peu plus compliqué. Mais si Catalogue est ouvert... Ah ouais, mais Catalogue, c'est genre déjà les produits juste qui te permettent de voir un truc comme ça. Mais je pense que ce serait possible. Ce serait possible. Là, disons que je me suis laissé aller à la facilité. Vraiment, je lui ai dit, ok, d'accord, je prends juste un truc. Je vois comment ça fonctionne jusqu'au bout. J'ai essayé de développer des compétences avec. Donc, c'est pour dire que sur ce côté-là, je ne suis pas vraiment safe, on va dire.
00:49:56 :Ok. Sur ce côté-là, je ne suis pas vraiment safe. Niveau robot.ntxt, je suis dans l'eau rouge. Mais disons que ça, je le savais déjà. Mais j'ai vraiment voulu, je me suis vraiment laissé aller développer les trucs jusqu'au bout. Ouais, je comprends.
00:50:16 :Donc, est-ce qu'il y a d'autres questions? Donc, en gros, voilà, voilà, voilà, voilà.Là, je suppose que peut-être les autres, ils ont juste laissé comme un enregistrement. Peut-être qu'ils n'étaient pas disponibles. Mais c'est comme un enregistrement et tout. Donc, on va dire, moi, ça m'a vraiment fait plaisir de pouvoir partager le projet. C'était vraiment un truc sur lequel je travaillais.
00:51:05 :Beaucoup, beaucoup, beaucoup, beaucoup, beaucoup. Un truc qui m'a aussi modifié, quelque chose qui m'a aussi modifié, enfin, un point qui m'a aussi motivé, je veux dire, là-dessus, c'est vraiment le fait d'avoir au moins sur ton repo des projets qui sont bien faits. Ce n'est pas juste un truc que tu as écrit, deux petits, trois lignes et tout, puis tu le mets sur ton repo. Là, je me suis dit, ok, vraiment, je prends mon temps. Ça fait six ou sept mois que je travaille dessus. Je me dis, ok, là, on arrive sur ton repo, on voit un projet qui est bien fait.
00:51:31 :Il y a toutes les informations dessus. Tu as fait les tests, tu as partagé, tu as fait ceci, tu as fait ça et tout. Donc, c'est aussi quelque chose qui m'a motivé. Du coup, là, je vais essayer de travailler sur un autre projet. Comme je disais, je regarde beaucoup des outils qui sont faits avec Kepiton, Arceli. Du coup, je vais essayer de penser à un autre projet que je vais développer avec la même rigueur et avec certains automatismes, certains outils proposés par YoYonel.
00:51:58 :Je suis toujours en train de regarder son direct. Ça date de deux ou trois ans, je crois. Il montrait un peu comment intégrer les CICD quand je suis en train de faire une application Scaly avec Kepiton. C'est très, très intéressant. Je suis encore en train de le regarder. C'est sûr que les prochains me prendront, en principe, beaucoup moins de temps. Les prochains me prendront beaucoup moins de temps parce qu'il y a des trucs que je vais peut-être automatiser avec Cookie Cutter, intégrer facilement tout ce qui est linting du code automatique à chaque commit.
00:52:27 :Avec le pré-commit que j'ai intégré. Donc, en gros, c'était vraiment tout. Donc, du coup, s'il y a pas de questions, je crois que le direct va se couper.
00:52:37 :Dans le tchat, comment est-ce que je fais pour voir le tchat ? Je ne suis pas souvent encore utilisé.C'est lui ? Ouais, je l'ai trouvé.
00:53:20 :D'accord, d'accord, d'accord, d'accord. Ça, c'est le 22 août. Ça, c'est aujourd'hui.OK, les liens de ressources. OK. Donc, on va commencer par Typer. Typer pour faire le truc en CLI, puis SQL Model. En gros, je te rais, je te rais même recommander tous les produits de Tiangolo.
00:53:42 :Je trouve vraiment que c'est un gros malade. Il fait de très bons produits. Enfin, je parle de produits comme s'il est vendé, mais il fait de très bons outils.
00:53:50 :Attends, je vais le couper là. Ça, c'est Typer. Ah ouais, j'ai vraiment beaucoup de trucs. Merci vraiment de m'avoir appelé ça. Je n'aurais rien partagé. Typer pour les outils CLI.
00:54:08 :Du coup, je vais aussi profiter pour partager. C'est comme un PDF, mais ils l'ont mis dans un repo. Tu as du A à Z, vraiment tout ce qu'il te faut là. Je vais aussi prendre SQL Model.
00:54:28 :Ça aussi, ça a été fait par Tiangolo. Pour sauvegarder les choses dans la base de données. Voilà. Comment on appelle ça? Database API. Oui. DB API.
00:54:52 :Puis après, il y a. Oui, là, je vais aller chercher dans mon repo. Je suis sûr que je vais vraiment me couper, mais j'y suis revenu. Je ne l'ai pas lu de loin là. C'est vraiment quand j'avais besoin de faire quelque chose comme là avec.
00:55:12 :Je ne sais pas si c'est pareil. Quelque chose. Quelque chose comme ça.C'est vraiment quand j'avais besoin de faire quelque chose comme ça. Non, non, non, je n'avais pas l'intention de faire ça.
00:55:54 :Voilà. Je vais la retrouver. C'est génial. OK, à la suite.OK. Du coup, ici, tu as tout ce qu'il te faut pour faire les pâtisseries. C'est une ressource que j'ai beaucoup utilisée.
00:56:32 :Regarder vraiment beaucoup plus par besoin, quoi. Quand j'ai besoin d'un truc, je vais, je descends, je regarde. Qu'est-ce que je pense encore d'autre? Voilà. Pour la docu.
00:56:44 :Pour la docu de tes, genre quand tu auras envie de pousser ta documentation sur Read the Doc. C'est vrai que c'est déjà expliqué dans le PDF que j'ai envoyé.
00:57:06 :Tu pourras aussi aller jeter un coup d'œil sur ceci-ci. Sphinx. Pour la docu. Je vais, je dois, très intéressant. Voilà. OK. Voilà.Donc là, je pense que, en gros, il y a plus ou moins de ce que j'ai utilisé. Au pire, je peux très rapidement aller regarder mon Pyproject. Ouais, voilà. Évidemment, il y a aussi la doc sur Playwright. Très, très intéressant.
00:57:53 :Ouais, je vais ajouter. Du coup, voilà. Du coup, je vais profiter. Je mets aussi pour le projet Open Source que j'ai trouvé pour communiquer avec sa base de données.
00:58:11 :Donc, j'ai mis le nom de l'enduripo de DataHorse. Je vais vérifier si c'est copié dans les salles. Voilà. OK. Faire de la data science avec eux. OK.
00:58:38 :Ça suffit du coup. Et pour finir, l'enduripo. Troggone. Ouais. OK. Après, justement, pour faire ça, voilà. Yarrick et Yaclic. Je confondais les deux.Quand je comparais là. Yarrick et Yaclic. Tu peux faire tes trucs CLI avec Yarrick et Yaclic. Mais vraiment, moi, j'ai craqué sur Yarrick et Yaclic.
00:59:30 :OK. Là, je pense que c'est troggone. En gros, je devrais recommander carrément tous les produits. Je parle toujours de produits comme si c'était des trucs commercialisables, mais tous les outils de l'organisation Textualize.
00:59:44 :En réalité, tous les outils que tu vas voir, dont je parlais, Textualize, je pense même que, non, pas Clique, mais ils ont plein d'autres outils. Rich, même aussi, c'est fait par Textualize. Rich, Frogmouth, il y a Frogmouth, il y a Rich, puis il y a Textualweb et tout.
01:00:08 :Il y a Troggone aussi. Ce sont tous des outils qui sont faits par Textualize. Et Textualize, même aussi, je ne sais pas s'il y avait déjà ce lien-là dans les ressources du serveur. C'est un outil, justement, pour faire des applications entièrement dans les terminales.
01:00:28 :Peut-être que je pourrais montrer un petit truc. Un jeu que quelqu'un a fait directement dans les terminales. Là, je partage Troggone.Hop, voilà. Ok. Là, il y a Troggone. D'accord, là, je partage Troggone. Par exemple, il y a un outil qui a été fait, là, si j'arrête, et que je fais plutôt le partage avec...
01:01:08 :Ok, je fais ce que je veux. Voilà.Par exemple, il y a un truc, un outil de ce genre-ci, par exemple, ça s'appelle Browser. Ça te permet de naviguer dans l'espace de dossier dans lequel tu te trouves, mais en mot de texte.
01:01:52 :Il y a la même chose avec Frogmoot, mais Frogmoot, c'est beaucoup plus, vraiment, quand tu...Bon, si j'utilise un dossier, ça peut... Voilà, mais ça, c'est un outil.
01:02:34 :Ouais, ouais. Excusez-moi, là, vraiment, je... Ok. D'accord. Là, en principe, Browser devrait se trouver ici. Voilà. Voilà à quoi ça ressemble.Juste un petit exemple de choses que tu peux faire. Là, je suis dans mon système 32, je vais te repérer là. Ça, ça t'affiche un peu tout ce que t'as affiché. Ça affiche aussi les formats Macdown.
01:03:02 :Un Macdown, c'est même ça que je voulais le plus te montrer, là, si je fais Browser ici. Comme j'ai un fichier README, ça devrait me l'afficher. Voilà. Je pense même que... Voilà, ouais, ouais.
01:03:14 :Directement, ça a repéré mon README et ça l'a... Donc tu peux lire ton README ici. Plein d'applications de ce genre que tu peux faire. Carrément, il y a même quelqu'un qui a fait un jeu avec ça.
01:03:26 :C'est vraiment très, très top ce que tu peux faire avec. Tu peux faire des trucs vraiment très, très compliqués. Mais, pour l'application que je faisais, j'ai trouvé que c'était vraiment... ça aurait été trop compliqué.
01:03:40 :Parce qu'il y a Textualize de base, comme je disais, c'est vraiment l'outil derrière tout ça. Mais, le prendre depuis la base pour faire des trucs comme ça, ça aurait été vraiment trop long. Donc, du coup...
01:03:52 :Oh là là. Bon. Là, j'ai du mal à le retrouver. Je ne vais pas perdre beaucoup de temps. Mais, c'est comme un jeu. Il y a quelqu'un qui a fait carrément un jeu. C'est comme le... Je vais dire quoi. C'est un jeu de battleship avec des bateaux sur lesquels tu dois faire des croix.
01:04:10 :Tu fais des croix un peu au hasard pour savoir où est-ce que chacun a déposé son bateau et tout. Mais bon. Je pense que si tu parcours un peu, ou alors plus tard, si je trouve le lien de ça, je vais te l'envoyer pour te montrer un peu comment ça fonctionne. Mais, en gros, c'est ça. C'est vraiment tous les outils que j'ai utilisé pour faire fonctionner le truc.
01:04:32 :C'est drôle. C'est presque quand j'ai fini qu'il y a beaucoup de personnes qui arrivent. Donc, du coup, je ne sais pas. Je vais encore reposer la question avant que je fasse. Je vois qu'il y a beaucoup de personnes qui se connectent encore. Je ne sais pas s'il y a des gens qui ont des questions. J'aimerais en savoir un peu plus. Sinon, j'ai fini.
01:04:50 :Ok. Ah, voilà. Il faut que j'aille sur le chat. Ok. Là, je vois beaucoup de personnes. Je ne sais pas si les micros sont fermés. Mais du coup, s'il n'y a pas de questions, je crois que je vais arrêter là. Après, s'il y a d'autres choses, je pourrais peut-être partager les liens dans le groupe. Merci, merci, merci beaucoup de m'avoir suivi.
01:05:30 :Ça m'a fait plaisir de vous présenter le projet et de montrer un peu comment j'ai fait dessus. Ok, ok, ok. Merci, merci, merci beaucoup. D'accord, d'accord, d'accord. Bonne soirée à tous, bonne soirée à tous.
01:05:52 :Moi, j'étais avec les gamins, donc je n'ai pas pu participer, mais j'entendais d'une oreille. Ça avait l'air super intéressant, en tout cas. Ouais, ouais, ouais. Merci, merci beaucoup.
01:06:04 :Bon, j'ai enregistré dans tous les cas. Je vous préviens, j'ai réussi à enregistrer. C'est passé. Mon PC, il a réussi à enregistrer. Ok. Voilà. Et puis Pierre, je pense que celui-là, comme d'hab, il n'a pas de problème. Mais voilà. C'est enregistré, en tout cas.
01:06:16 :Ouais. Donc, de toute manière, s'il y a des trucs à discuter encore, parce que je suis toujours en train de rajouter des choses dessus. S'il y a des trucs à discuter encore, je peux en rajouter de toutes les manières. Donc, merci, merci, merci beaucoup d'avoir suivi. Merci à vous.
01:06:32 :Et merci à toi, surtout.Bonne soirée, là. Je crois qu'il est déjà 20h ou 21h là-bas, donc je vais dire un peu tard. Bonne nuit, bonne nuit, bonne nuit.

Bravo, tu es prêt à passer à la suite

Continuer sans valider Continuer et valider

Rechercher sur le site

Formulaire de contact

Inscris-toi à Docstring

Pour commencer ton apprentissage.

Tu as déjà un compte ? Connecte-toi.