ML | AlexIn Tech

Une liste d'outils IA / ML / AGI

Fri, 14 Feb 2025 00:00:00 +0000

Liste des outils IA/ML/AGI

Introduction

Voici une liste d’outils IA / ML / AGI que je mettrai à jour à chaque nouvelle découverte.

Outils pour la Création et l’Organisation de Contenu

Gamma

Description : Outil d’IA permettant de créer des présentations interactives et dynamiques.
Local ou Cloud ? : Cloud
Open Source ? : Non
Lien : https://gamma.app

Mapify

Description : Solution basée sur l’IA pour générer des cartes mentales interactives.
Local ou Cloud ? : Cloud
Open Source ? : Non
Lien : https://mapify.so

Outils Éducatifs et Mathématiques

Photomath

Description : Application permettant de résoudre des équations mathématiques en prenant une photo du problème.
Local ou Cloud ? : Cloud (avec fonctionnalités locales)
Open Source ? : Non
Lien : https://Photomath.com

Outils de génération de texte et pour le développement

Ollama

Description : Plateforme pour exécuter des modèles de langage IA en local.
Local ou Cloud ? : Local
Open Source ? : Oui
Lien : https://ollama.com/

Devin

Description : Outil d’IA pour assister les développeurs dans la génération de code.
Local ou Cloud ? : Cloud
Open Source ? : Non
Lien : https://devin.ai/

Bolt DIY

Description : Outil alimenté par l’IA pour créer et exécuter des applications web full-stack dans le navigateur.
Local ou Cloud ? : Cloud
Open Source ? : Oui
Lien : https://github.com/stackblitz-labs/bolt.diy

Outils pour la Génération et l’Amélioration d’Images

Upscayl

Description : Outil d’upscaling d’images par IA.
Local ou Cloud ? : Local
Open Source ? : Oui
Lien : https://github.com/upscayl/upscayl

Stable Diffusion

Description : Modèle de génération d’images par IA développé par Stability AI.
Local ou Cloud ? : Local
Open Source ? : Oui
Lien : https://stability.ai/stable-image

Stable Diffusion WebUI

Description : Interface web pour utiliser Stable Diffusion, un modèle de génération d’images.
Local ou Cloud ? : Local
Open Source ? : Oui
Lien : https://github.com/AUTOMATIC1111/stable-diffusion-webui

Dreambooth

Description : Technologie permettant d’affiner Stable Diffusion avec des images personnalisées.
Local ou Cloud ? : Local
Open Source ? : Oui
Lien : https://github.com/google/dreambooth

Deep Live Cam

Description : Outil de transformation de flux vidéo en temps réel avec IA. (Pour remplacer notre tête par une autre)
Local ou Cloud ? : Local
Open Source ? : Oui
Lien : https://github.com/hacksider/Deep-Live-Cam

Music

Suno

Description : Plateforme alimentée par l’IA pour générer et améliorer de la musique.
Local ou Cloud ? : Cloud
Open Source ? : Non
Lien : https://suno.com/home

Outils pour le Chat et l’Interaction avec des Modèles de Langage

Open-WebUI

Description : Interface web open-source pour interagir avec des modèles d’IA.
Local ou Cloud ? : Local
Open Source ? : Oui
Lien : https://github.com/open-webui/open-webui

Awesome ChatGPT Prompts

Description : Liste de prompts optimisés pour ChatGPT et autres modèles de langage.
Local ou Cloud ? : Cloud
Open Source ? : Oui
Lien : https://github.com/f/awesome-chatgpt-prompts

Recall - Risques de Sécurité, Exploit TotalRecall et Comment le Désactiver

Wed, 05 Jun 2024 00:00:00 +0000

Recall : Risques de Sécurité, Exploit TotalRecall et Comment le Désactiver

La fonctionnalité Recall de Microsoft Copilot+ sur Windows 11 a fait couler beaucoup d’encre. Cette innovation permet de prendre constamment des captures d’écran de votre PC et de les stocker dans une base de données, rendant ainsi toutes vos activités informatiques recherchables instantanément par Copilot. Bien que cela puisse sembler pratique pour retrouver des informations rapidement, cette fonctionnalité pose de sérieuses questions en matière de confidentialité et de sécurité.

Qu’est-ce que la Fonctionnalité Recall ?

Recall, introduite avec Microsoft Copilot+ sur Windows 11, permet de retracer vos activités passées en prenant des instantanés (screenshots) de votre écran toutes les cinq secondes. Ces instantanés sont stockés localement et analysés pour permettre une recherche par langage naturel (Copilot). En théorie, cette fonctionnalité est conçue pour améliorer la productivité en offrant un accès rapide aux informations précédemment vues sur votre PC.

Problèmes de Sécurité avec Recall

L’article de Kevin Beaumont sur DoublePulsar met en lumière plusieurs préoccupations majeures :

Stockage Local des Données

Les captures d’écran sont stockées localement dans une base de données SQLite, accessible à tout utilisateur avec les bonnes permissions. Bien que les données soient traitées localement, leur stockage sous forme de texte brut dans des fichiers facilement accessibles représente une vulnérabilité significative. La base de données se trouve simplement dans un dossier dans AppData, ce qui la rend facilement accessible.

Accès Non Sécurisé

Malgré l’utilisation de chiffrement, les données peuvent être accédées par des logiciels malveillants lorsque l’utilisateur est connecté. Le chiffrement n’aide que si quelqu’un vole physiquement votre appareil, mais cela n’empêche pas un hacker d’accéder aux données via des logiciels malveillants. Par exemple, un trojan présent sur la machine pourra exfiltrer les données de Recall.

Exfiltration Facile

La facilité d’exfiltration des données est un autre aspect préoccupant de Copilot+ Recall. La base de données contenant les informations de l’utilisateur est relativement légère et peut être transmise rapidement via une connexion Internet standard. En quelques secondes, des mois d’enregistrement peuvent être exfiltrés sans que l’utilisateur ne s’en rende compte. Cette vulnérabilité ouvre la porte à des violations massives de données, où les informations des utilisateurs peuvent être rassemblées et vendues sur des marchés noirs.

Impact sur la Vie Privée

L’impact sur la vie privée des utilisateurs est peut-être la conséquence la plus alarmante de cette fonctionnalité. Copilot+ Recall stocke chaque interaction de l’utilisateur, y compris les sites web visités, les messages supprimés, les gestionnaires de mots de passes, les données médicales, etc. Pour faire simple, il screenshot tout chaque 5 secondes et conserver ces informations. Cette surveillance constante et l’incapacité à effacer définitivement des informations sensibles soulèvent des préoccupations majeures. La promesse de sécurité de Microsoft est fondamentalement compromise par cette fonctionnalité, qui transforme l’expérience personnelle de Windows en une source potentielle de violations de la vie privée.

TotalRecall : un exploit pour Recall

L’outil TotalRecall, développé par Alexander Hagenah, exploite cette vulnérabilité en extrayant et affichant les données collectées par la fonctionnalité Recall de Windows 11. Cet outil simple permet d’accéder facilement aux informations sur les instantanés d’activité de votre PC.

Fonctionnement de TotalRecall

TotalRecall copie la base de donnée “ukg.db” ainsi que le dossier contenant les captures d’écran “ImageStore”, puis parse la DB et change l’extension des screenshots en .jpg pour en faciliter la lecture. Le tout permet de trouver des artefacts potentiellement intéressants. 😈 Vous pouvez définir des dates pour limiter l’extraction et rechercher des chaînes de texte spécifiques extraites par l’OCR de Copilot/Recall. Le processus est basique mais très efficace pour exposer les vulnérabilités de la fonctionnalité Recall.

Caractéristiques Clés de TotalRecall

Filtrage par Date : Limitez l’extraction à une période spécifique.
Recherche de Texte : Trouvez des informations spécifiques dans les données capturées.
Rapports Détaillés : Génère des rapports résumant les fenêtres capturées, les images prises, et les résultats de recherche.

Comment Désactiver Recall

Pour ceux qui souhaitent désactiver cette fonctionnalité pour protéger leur vie privée, voici un script que vous pouvez utiliser. Ce script, proposé par privacy.sexy, permet de désactiver Recall en modifiant le registre Windows.

Script pour Désactiver Recall

@echo off
:: https://privacy.sexy — v0.13.4 — Thu, 06 Jun 2024 07:48:34 GMT
:: Ensure admin privileges
fltmc >nul 2>&1 || (
 echo Administrator privileges are required.
 PowerShell Start -Verb RunAs '%0' 2> nul || (
 echo Right-click on the script and select "Run as administrator".
 pause & exit 1
 )
 exit 0
)
:: Initialize environment
setlocal EnableExtensions DisableDelayedExpansion


:: ----------------------------------------------------------
:: ----------------------Disable Recall----------------------
:: ----------------------------------------------------------
echo --- Disable Recall
PowerShell -ExecutionPolicy Unrestricted -Command "reg add 'HKLM\SOFTWARE\Policies\Microsoft\Windows\WindowsCopilot' /v 'DisableAIDataAnalysis' /t 'REG_DWORD' /d '1' /f"
:: ----------------------------------------------------------


:: Pause the script to view the final state
pause
:: Restore previous environment settings
endlocal
:: Exit the script successfully
exit /b 0

Étapes pour Exécuter le Script

Créer un Fichier de Script :

Ouvrez un éditeur de texte comme le Bloc-notes.
Copiez le script ci-dessus et collez-le dans l’éditeur de texte.
Enregistrez le fichier avec une extension .bat, par exemple disable_recall.bat.

Exécuter le Script en tant qu’Administrateur :

Faites un clic droit sur le fichier de script que vous avez créé.
Sélectionnez “Exécuter en tant qu’administrateur”.

Vérifier l’Exécution :

Le script va vérifier si vous avez les privilèges d’administrateur. Si ce n’est pas le cas, il vous demandera de le relancer avec ces droits.
Une fois exécuté, il ajoutera une entrée dans le registre pour désactiver l’analyse des données par l’IA de Microsoft Copilot.

Conclusion

La fonctionnalité Recall de Microsoft Copilot+ soulève des questions importantes sur la sécurité et la confidentialité des utilisateurs. Désactiver cette fonctionnalité peut être crucial pour protéger vos données personnelles. En suivant les étapes décrites ci-dessus, vous pouvez désactiver Recall et reprendre le contrôle de votre vie privée.

Enjoy 😎

AlexIn Tech

Générer des photos de soi en utilisant Stable Diffusion et Dreambooth

Sat, 10 Dec 2022 00:00:00 +0000

Générer des photos de soi en utilisant Stable Diffusion et Dreambooth

Hello ! Alors il y a maintenant un mois je me suis amusé à entrainer un modèle custom sur des images de moi-même afin de pouvoir générer des photos de moi.

Je commence par te présenter rapidement la tech puis le résultat et pour finir je te donne les liens et la marche à suivre pour faire de même.

La tech

Au niveau tech j’ai utilisé “Stable Diffusion” et “Dreambooth”. Stable Diffusion est une “IA” créée par stability.ai , voici un lien sur la release de ce modèle : https://stability.ai/blog/stable-diffusion-public-release

Dreambooth est un modèle OpenSource créé par une équipe de chez Google Research. Ce modèle est capable d’apprendre à reproduire un sujet en générant de nouvelles images de ce sujet.

https://dreambooth.github.io/

Les résultats :

Et maintenant, le HOW TO, en très bref

En premier lieu, crées-toi un compte sur “HuggingFace 🤗” et génères un “access token” que tu utiliseras plus tard.

Afin d’entraîner le modèle sur des photos de toi tu dois commencer par les préparer :

Sélectionnes environ 20 photos de toi toutes différentes dans des situations différentes avec des cadrages différents.
Tu resizes toutes ces ces photos en 512x512px et tu les recadres. Tu peux utiliser le logiciel en ligne birme.net .

Maintenant que ton jeu d’images est prêt tu peux aller sur ce google clab afin d’entrainer un modèle custom :

https://colab.research.google.com/github/ShivamShrirao/diffusers/blob/main/examples/dreambooth/DreamBooth_Stable_Diffusion.ipynb

Tu runs le code petit à petit en suivant les steps by step :

Comme tu peux le voir dans le screen ci-dessus on arrive au fameux step “HuggingFace 🤗”, donc là tu vas lui accepter les licenses/agreements, lui donner ton access token puis cliquer sur le bouton “play” pour run ce bloque de code.

Tu continues le step by step , dans mon cas j’ai décidé de sauvegarder le modèle dans mon gDrive.

Et ensuite au step du “Start Training” j’ai modifié un petit peu le code afin qu’il comprenne le prompt “Alexis”. je ne sais plus exactement ce que j’avais mis mais qqch du genre :

# You can also add multiple concepts here. Try tweaking `--max_train_steps` accordingly.

concepts_list = [
 {
 "instance_prompt": "Alexis",
 "class_prompt": "photo of a person",
 "instance_data_dir": "/content/data/ukj",
 "class_data_dir": "/content/data/person"
 },
 # Additional concepts can be added here
]

# `class_data_dir` contains regularization images
import json
import os
for c in concepts_list:
 os.makedirs(c["instance_data_dir"], exist_ok=True)

with open("concepts_list.json", "w") as f:
 json.dump(concepts_list, f, indent=4)

Puis dans le bloc suivant j’ai édité les valeurs suivantes :

Je ne sais plus exactement ce que j’avais mis comme train_steps mais il me semble que c’était entre 2000 et 8000. Avec 800 les résultats n’étaient pas assez qualy.

Bref on run les blocs dans l’ordre jusqu’au step “Convert weights to ckpt to use in web UIs like AUTOMATIC1111” .

Ce step est super utile et je vous conseille de le faire car AUTOMATIC1111 c’est vraiment une interface web GENIAL !

Tu peux tester ta génération ici :

Si tu es satisfait alors tu peux aller copier le repo de la web UI de AUTOMATIC1111 ici :

https://github.com/AUTOMATIC1111/stable-diffusion-webui

Dans son readme AUTOMATIC1111 explique comment installer l’UI, tu peux suivre son step by step, je te le copie ici :

Automatic Installation on Windows

Install Python 3.10.6, checking “Add Python to PATH”
Install git.
Download the stable-diffusion-webui repository, for example by running

git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui.git

Place model.ckpt in the models directory (see dependencies for where to get it).
(Optional) Place GFPGANv1.4.pth in the base directory, alongside webui.py (see dependencies for where to get it).
Run webui-user.bat from Windows Explorer as normal, non-administrator, user.

Dans notre cas le model.ckpt c’est celui qu’on a généré au préalable via le Google Colab, c’est notre modèle entrainé sur notre visage. J’ai également effectué le step optionnel avec GFPGANv1.4.pth.

Une fois tout cela fait, tu run le fichier “webui-user.bat” et ton projet tourne en local, tu peux maintenant générer des images de toi en utilisant cette interface web. FELICITATIONS 🤩

Enjoy ! 😎

Voici tous les liens / sources que j’ai utilisés :

Stable Diffusion :

https://stability.ai/blog/stable-diffusion-public-release

https://github.com/CompVis/stable-diffusion

Dreambooth :

https://dreambooth.github.io/

Stable Diffusion Web UI :

http://github.com/AUTOMATIC1111/stable-diffusion-webui

Un google colab pour entraîner facilement le modèle :

https://colab.research.google.com/github/ShivamShrirao/diffusers/blob/main/examples/dreambooth/DreamBooth_Stable_Diffusion.ipynb

https://github.com/ShivamShrirao/diffusers/tree/main/examples/dreambooth

Qu'est-ce que ChatGPT de OpenAI ?

Sat, 10 Dec 2022 00:00:00 +0000

Qu’est-ce que ChatGPT de OpenAI ?

Eh bien je me suis connecté à mon compte OpenAI et j’ai directement posé la question à ChatGPT. Bien entendu je lui ai demandé cela en anglais puis je lui ai demandé de traduire sa propre réponse en français, la voici :

“Je suis Assistant, un grand modèle de langage entraîné par OpenAI. Je suis conçu pour aider les gens avec une grande variété de tâches, de répondre à des questions à fournir des informations et des conseils. Je suis constamment en train d’apprendre et de m’améliorer, et je suis toujours là pour aider.”

“Une des choses qui me distingue des autres modèles de langage est ma capacité à comprendre et générer du texte similaire à celui des humains. Je suis formé sur un énorme jeu de données de texte, et j’utilise ces connaissances pour générer des réponses naturelles aux questions et demandes que je reçois. Je peux également comprendre le contexte et la signification des mots que je vois, ce qui me permet de fournir des réponses plus précises et pertinentes.”

“En plus de mes capacités linguistiques, je suis également conçu pour être efficace et rapide. Je peux traiter rapidement une grande quantité de texte, et je suis capable de fournir des réponses en temps réel. Cela signifie que je peux vous aider à obtenir les informations dont vous avez besoin, lorsque vous en avez besoin.”

“En tant que grand modèle de langage, je suis également capable de gérer une large gamme de tâches et de sujets. Je suis bien informé sur de nombreux sujets différents, et je peux fournir des informations et des conseils sur une large gamme de sujets. Que vous ayez une question sur l’histoire, la science ou tout autre sujet, je suis là pour vous aider.”

“En résumé, je suis un outil polyvalent et puissant qui peut vous aider avec une grande variété de tâches. Que vous ayez besoin d’aide pour une question spécifique, ou que vous souhaitiez simplement en savoir plus sur un sujet particulier, je suis là pour vous aider. Je suis toujours en train d’apprendre et de m’améliorer, et je suis toujours là pour vous aider.”

Alors, vous en pensez quoi ? En tous cas j’ai fait quelques tests en lui demandant, par exemple, de rédiger une revue de littérature et c’est vraiment bluffant ! Juste dommage que chatGPT soit limité à environ 500 mots.

p.s. L’image de couverture a été générée avec Dall-E de OpenAI.