C'est quoi une base de données vectorielles?

 

Une base de données vectorielle est une base de données qui stocke des informations sous forme de vecteurs, c'est-à-dire des représentations numériques d'objets de données.

🔜 Qu'est-ce qu'un vecteur ?

Pour faire simple, les vecteurs sont une représentation numérique du texte.

Il y a du texte d'entrée (également appelé Prompt)

Vous le transmettez via ce qu'on appelle un modèle d'intégration , que vous considérez comme une fonction sans état. Vous obtenez une sortie qui est un tableau de nombres à virgule flottante

Ce qu'il est important de comprendre, c'est que les vecteurs capturent le sens sémantique . Ils peuvent donc être utilisés pour une recherche basée sur la pertinence ou le contexte , plutôt que pour une simple recherche de texte.

La base de donnée vectorielle tire parti de la puissance de ces plongements vectoriels pour indexer un ensemble volumineux de données non structurées et de données semi-structurées, comme les images, les textes ou les données de capteur, et pour y faire des recherches. Les bases de données vectorielles sont conçues pour gérer les plongements vectoriels, et ainsi offrir une solution complète pour la gestion des données non structurées et semi-structurées.

Une base de données vectorielle organise les données selon des vecteurs à haute dimensionnalité. Les vecteurs à haute dimensionnalité contiennent des centaines de dimensions, qui correspondent chacune à une fonctionnalité ou à une propriété spécifique de l'objet de données qu'elles représentent.

On peut classer les bases de données vectorielles en deux types :

1️⃣ Prise en charge du type de données vectorielles dans les bases de données existantes, telles que PostgreSQL, Redis, OpenSearch, MongoDB, Cassandra, etc.

2️⃣ Et l'autre catégorie est destinée aux bases de données vectorielles spécialisées, comme

Pinecone, https://www.pinecone.io/

Weaviate, https://weaviate.io/

Milvus, https://nebius.ai/marketplace/products/nebius/milvus (open source)

Qdrant, https://qdrant.tech/ (open source)

ChromaDB, https://www.trychroma.com/ (open source)

Ce domaine évolue également très rapidement et cette liste risque d’évoluer dans un avenir proche !

Exemple dans Ollama on utilise ChromaDB depuis le mois d'avril 2024

🔗 source : Open Source & Self-hosted RAG LLM Server with ChromaDB, Docker & Ollama

⚠ Bases de données vectorielles sont de plus en plus utilisées pour les applications d'IA générative

Elles sont un composant essentiel pour surmonter les limitations des LLM notamment dans le processus RAG

Les IA plus intelligentes que l'homme

 
❓ Les IA plus intelligentes que l'homme ?

ça dépend...sur les questions à la con oui, mais après ça se mesure ! 📏

Si nous manquons d'intelligence avec l'IA : c'est du PIPO

 

💡 Très Intéressant cette grille pour guider l'usage d'une IA Générative dans un contexte de formation:

Mais y a combien de modèles d'IA à + de 10^23 FLOP ?

J'ai fait un post précédemment dans mon blog post précédemment dans mon blog sur la puissance de calcul nécessaire pour l'IA. Les calculs de formations pour générer les LLM ont doublé tous les 6 mois depuis l'émergence de l'ère du Deep Learning. On trouve de nombreux modèles ayant demandé plus de 10Exp23 Flops. 

l'IA c'est du calcul! le calcul c'est de l'argent et de l'énergie

👾 La puissance de calcul est un moteur clé de l'accélération des progrès de l’IA que nous observons actuellement .


📈 Au cours des treize dernières années, la quantité de calcul utilisée pour former des systèmes d’IA a été multipliée par 350 millions.
(Graphique ci dessous)

Adaptive Learning et l'apport de l'IA dans ce domaine

 

Lors de cette deuxième édition des Ludoviales, j'ai eu le plaisir d'animer un atelier autour de l'Adaptive Learning et de l'apport de l'IA dans ce domaine.
C'est aussi le moment de rappeler que l'IA dans le monde de l'éducation ce n'est pas que les IA génératives dont certains processus dont les bases théoriques remontant à la moitié du XXeme siécle.

IA4Sup : Une veille collaborative autour de l'IA dans l'enseignement supérieur

L’idée autour de la création de cet espace est de favoriser la collaboration entre les acteurs dans nos établissements enseignement supérieur sur la veille autour de l'IA.
 Avec plusieurs intervenants, nous nous sommes réunis pour mutualiser autour d’une communauté d’intérêt et de partage en proposant un cadre de travail collaboratif avec 3 axes 

1-Les acteurs 
Pour Identifier dans nos établissements des personnes intéressées par différents domaines de l’IA:

-d’un point de vue informatique Installation de serveurs, sécurisation des données, programmation, mise en place d’API, interconnexion avec des dispositifs existants…)

-d’un point de vue fonctionnel : quelle IA pour faire quoi? quels services dans l’Université pourrait être intéressés? J’ai mis en œuvre une IA , je partage mon expérience

-d’un point de vue juridique RGPD, droit d’auteur, plagiat, confidentialité

-d’un point de vue pédagogique ce que cela peut changer coté enseignant, comme coté étudiants

-d’un point de vue éthique et philosophique

L'IA arrive dans les Rapidmooc

Quand Sarah et Fabrice m'ont demandé de participer à un webinaire pour parler de l'intérêt de la vidéo en pédagogie, je n'ai pas pu refuser pour plusieurs raisons:

- C'est un sujet qui est toujours d'actualité ( Ref )
- Au delà de l'aspect technique les différents types de vidéo ( Ref ) pédagogique que l'on peut produire rapidement avec un Rapidmooc permettent de structurer la scénarisation de dispositifs hybride en allant plus loin que de la simple diffusion de contenu.

Keynote SIDO Nouvelles technos : comprendre le futur qui vient #SIDO2023

 

A la demande du SIDO, j'ai mis en place une Keynote un peu prospective autour de deux technos l'IA et le metavers. Ces deux technos ne sont pas au même endroit dans le cycle de Hype de Gartner

Nouvelles technos : comprendre le futur qui vient

 Les progrès fulgurants en matière de nouvelles technologies, et notamment dans des domaines tels que le metaverse et l’intelligence artificielle ont le potentiel de transformer nos vies de manière sans précédent. Si les défis sociaux, éthiques, juridiques que ces technologies émergentes soulèvent sont difficiles à anticiper et à comprendre pleinement, il est évident qu’elles auront un impact significatif sur nos quotidiens.

Comment projeter notre monde à l’horizon de 10, 20 ans et au-delà ?
 Quelles grandes tendances peut-on imaginer à l’horizon 2050 ?

J'ai proposé que ce temps prospectif soit découpé en plusieurs moments:

-Le moment IA

J'ai demandé à François Bocquet de nous dresser un panel des différents usages de l'IA et des évolutions possibles. Il a mis en ligne un carte conceptuelle  qui lui a servi pour la présentation mais qui peut servir à chacun d'entre nous pour aller plus loin en fonction de vos champs professionnels.

 

-Le moment métavers

Pour ce moment j'ai fait appel à trois profils bien différents pour envisager l'évolution de ce concept sous différents aspects.

• Amine LAZREQ 

  - Fondateur - Reality Makers

• Jonathan METILLON 

  - Consultant Nouveaux Médias - MainBot

• Sébastien MEUNIER 

  - Entrepreneur - Medialab Factory

Et pour ce deuxième moment, échanges sous forme de table ronde ont été riches. Je tiens à remercier les intervenants qui ont joués le jeu !

Vous pouvez trouver le replay de ce moment 
en cliquant sur l'image ci dessous

https://sido.webtv.live/en/clmuo710t00c3gu01kycn150p

Une IA Adobe pour améliorer nos enregistrements sonores

Pour ceux qui me suive depuis un moment, vous  savez que j'aime bien enregistrer des causeries autour de nos intérêts communs.

Le principe est de capter une discussion qui pourrait intéresser d'autres personnes.
Souvent cette captation se déroule dans un lieu public, sans que j'ai eu le temps de mettre en place des micro cravates, des cameras...
Bref souvent cela relève plus de la prise de note à l'arrache que d'une captation vidéo dans les règles de l'art. 
La spontanéité de la situation permet d'avoir des propos que je n'aurai pas eu avec plus de préparation mais du coup la qualité sonore de la captation s'en ressent fortement.

Et le son c'est quand même ce qu'il y a de plus important pour suivre une discussion.

Intelligence artificielle : Il va falloir apprendre à Prompter?

C:\>                         Le tout premier prompt que j'ai connu c'était le prompt du DOS.

L'invite ou prompt du DOS est le message d'attente qui signale que le système est prêt à recevoir une commande. L'invite indique la position du répertoire actif : le nom du disque par défaut (ici C: ) suivi du chemin complet depuis le répertoire racine représenté par le caractère " back-slash " '\'.

Aujourd'hui, un prompt, sur les services conversationnels d'intelligence artificielle, est une phrase ou une question utilisée pour déclencher la conversation avec le modèle. Le prompt donne la direction générale pour laquelle le modèle doit générer une réponse ou une suite de textes, ou de contenu.

Il n'y a pas de paramètres spécifiques à inclure dans le prompt pour ChatGPT, mais il est important d'être clair et concis pour obtenir une réponse précise et utile.
Voici quelques éléments qui peuvent être inclus dans un prompt pour ChatGPT :

-Le sujet de la conversation

-Des informations contextuelles ou des précisions supplémentaires

-Une question ou une demande spécifique

Panels d'outils permettant d'interfacer vos services avec ChatGPT

Tout va très vite avec Le chabot conversationnel animé par l’algorithme GPT-3 d’OpenAI, accessible à tous depuis le début du mois de décembre.
Il a fallu pour atteindre 1 million d'utilisateurs :
Netflix - 3,5 ans
Twitter - 2 ans
Facebook - 10 mois
Spotify - 5 mois
Instagram - 3 mois
ChatGPT - 5 jours

Quand on compare ces chiffres avec ces processus d'innovation on a pas encore atteint le grand public mais déjà quelques saturation apparaissent de temps en temps:

le #ChatGPT ce n'est plus ce que c'était!
:-) pic.twitter.com/SBSf8EAcUm

— Batier Christophe (@batier) January 9, 2023

 Au delà de l'outil il est intéressant de noter qu'il est possible d'utiliser son potentiel à travers d'autres outils de notre quotidien, voici une petite dizaine d'exemple:

1. Connectez votre ChatGPT à votre Whatsapp. 
(Attention c'est pas encore très grand public pour l'installer)
 Lien : https://github.com/danielgross/whatsapp-gpt

LudoviaPF 2022 François Bocquet avenir du métier enseignant avec IA

 

Dans le cadre de la quatrième édition de LudoviaPF, j'ai demandé à François Bocquet de nous présenter son travail autour de l'intelligence artificielle et de l'intérêt de ces outils dans l'enseignement.
Pour info, à le demande des enseignants François a du faire deux fois cette intervention car le sujet passionne!

Pour compléter cette présentation voici ci dessous le lien vers le mindmapping utilisé

Pour aller plus loin sur ce sujet : 

https://philippesilberzahn.com/2021/04/05/j-ai-ouvert-un-ticket-comment-le-management-formel-tue-les-organisations/