av Laurent Le Toux 26 dager siden
25227
Mer som dette
Développer l'approche projet, le travail collaboratif
Mettre en place autoévaluation et évaluation par les pairs avec grille
Multiplier les angles d'évaluation
Évaluer la créativité des étudiants
En couplant évaluation à échanges et questions posées à l'étudiant
En diversifiant les tâches/activités demandées (exemple : observation / analyse / oral)
Exemple : Fiche de lecture
Expérience personnelle
Point de vue
Résumé
Proposer une évaluation inversée
Proposer à l'étudiant de générer une évaluation permettant de balayer l'ensemble d'un cours, d'un sujet...
Exemple : demander aux étudiants de générer le contrôle idéal avec les questions phares sur le sujet
Proposer à l'étudiant de créer des questions clés pour aborder un problème complexe
Évaluer l'analyse et l'esprit critique
Pour aller plus loin : module UBS - "Développer son esprit critique"
Cas pratique : Humain vs Machine
2. Rédiger un document réflexif sur les différences, les manques de chaque coté
1. Sur une thématique, comparer un travail exclusivement personnel au résultat généré depuis l'IA
Evaluer la qualité/pertinence des questions posées à l'IA
Evaluer une démarche plutôt qu'un contenu
Générer un dialogue avec IA et analyser les réponses
Comparer des productions avec et sans IA
Pointer des limites et des manques
Fournir des sources adaptées
Vérifier des affirmations
Ajouter des contraintes, des exigences
Replacer dans l'évaluation des éléments/concepts vus en classe ou faire un parallèle avec des éléments d'actualités
Évaluer les usages des élèves d’une IA Générative
Argumentaires
Etudes de cas
Analyse réflexive
Description d'une démarche, d'un process
Retours d'observation
Expériences pratiques
Activité Test Hors Ligne (Moodle UBS) : créer des examens papiers avec correction automatique
Groupes de discussions, débats....
Oraux
Examens présentiels
IA faible : propice à hallucinations dans certains domaines sur des questions précises (Géographie, Histoire, Droit, Sciences politiques etc.)
Exemple : ChatGPT sera souvent pertinent sur des écrivains comme Baudelaire ou Rimbaud, nettement moins sur un auteur plus confidentiel.
Adapter / compléxifier si l'IA réussit l'examen
La taxonomie de Bloom à l'ère de l'IA générative
Travailler ses évaluations en les orientant davantage compétences que connaissances
Echelle de l’intelligence artificielle dans l'évaluation
Guide d'intégration de l'IAG pour les activités d'enseignements et d'évaluation
Pour citer l'utilisation d'une IA générative
En cas de suspicion, possible d'engager un oral complémentaire
Les outils permettant de détecter l'usage des IAs, tels ChatGPT sont peu, voire inefficaces
Des moyens de contournement existent
Est-ce de la triche ?
L’évaluation des apprentissages doit prendre en compte l’existence de ces outils. Les modalités d'évaluation doivent être adaptées en conséquence
L'utilisation simplifiée de ces outils questionne la pertinence de maintenir et d'évaluer les devoirs "maison" ou les rendus reposant sur de la rédaction (mémoire, rapport, synthèse...), la traduction ou toute activité facilement réalisable par les IAs génératives.
Business Analyse
ChatGPT-assisted code review
Discuter la notion de travail original
Brainstorming créatif
Fournir des arguments et contre arguments
Recherche préparatoire
14 façons d'utiliser ChatGPT en fac de Droit
Exemple : Entretien d'embauche
Exemple : Socrate pour un enfant de 10 ans
Plateforme dédiée : https://beta.character.ai/
Apprentissage adaptatif / prédictif
Exemple Wooflash
Exemples d'applications : Khan Academy / Duolingo
Pour être interrogé sur un sujet de manière interactive
Exemple : "Présente moi le modèle OSI et ajoute un test de trois questions à la fin. Ne pas me donner les réponses et me dire si j'ai juste après avoir répondu."
Wooflash
Utiliser ChatGPT et Wooclap pour concevoir un QCM et l’intégrer dans Moodle
Les outils de génération d’image comme Midjourney, DALL·E ou Adobe Firefly peuvent représenter une source d’illustration intéressante pour les supports de cours.
Construire un glossaire
Rédiger des fiches de synthèse
Edtake
Nolej
Sujets de travaux de groupe
Suggérer des idées de projets
Aide à la rédaction / Amélioration des objectifs du cours / Idées d'activités
Exemple : Harvard Business Publishing Education - If Your Syllabus Needs a Refresh, Generative AI Can Help
ChatGPT Canvas est particulièrement adapté.
Cas pratique pour l'enseignement : Faire une grille d'évaluation du code et demander à ChatGPT d'évaluer le code fourni à partir de celle-ci.
Codestral
Exemple : "Écrit une formule Excel qui calcule 50% de la le somme de la colonne A et B"
Exemple : Tableur Excel
DeepL
Exemple : "Explique moi comme à un enfant de 10 ans ce qu'est la physique quantique"
Exemple : résumer une vidéo YouTube
Exemple : "Résumer le document en 5 lignes"
Exemple : "Tu ne devras améliorer que la grammaire et l'orthographe. Il ne faudra en aucune cas changer le style d'écriture comme rendre un paragraphe plus formel"
Contenus
Pour demander de détailler un maximum
Exemple : "Rédiger un paragraphe détaillé sur XXX en ajoutant autant d'informations que nécessaires"
Utiliser le modèle pour questionner jusqu'à ce qu'il ait les informations nécessaires
Exemple : "À partir de maintenant, pose moi des questions jusqu'à ce que tu aies assez d'informations pour créer mon plan d'entrainement"
Limiter les biais / stéréotypes
Exemple : "S'assurer que la réponse est non biaisée et ne se base pas sur des stéréotypes."
Compléter un texte utilisant des mots, phrases dans le même registre
Exemple : ""Il était une fois XXX ..." J'ai fournis le début du poème, le compléter en utilisant le même registre de manière cohérente"
Fournir un extrait pour "écrire dans le style de"
Exemple : "Écrire un paragraphe sur XXX de la même manière que l"extrait suivant []"
Définir le public visé dans le prompt
Exemple : "Expliquer le fonctionnement d'un ordinateur à un enfant n'en ayant jamais utilisé"
Structure
Utiliser des séparateurs
Exemple : "Rédiger une note sur la préservation des "rhinocéros blanc" en Afrique"
Commencer par "###Instruction### suivi de ###Exemple### ou bien ###Question###"
Exemple : "###Instruction### Traduire en allemand. ###Question### Quel est le mot Allemand pour "cochon d'inde"" ?
Utiliser des amorces de réponses
Exemple : "Décrire le principe de relativité. Explication détaillée :"
Utiliser l'apprentissage par l'exemple
Exemple : "Répond de la manière suivante "Le résultat est A + B = C""
Décomposition les tâches complexe en plusieurs étapes (séquences d'invites simples)
Demander d'avancer étape par étape
Exemple : "Écrit un programme en python pour XXX. Réfléchir étape par étape."
Formulations
Promettre un pourboire !!
Exemple : "Je te donne un pourboire de 100€ si tu me donnes la meilleure solution"
Ajouter une pénalité
Exemple : "Tu seras pénalisé si tu n'utilises pas un langage simple"
Utiliser des termes affirmatifs : "fais" plutôt que "ne fais pas"
Répéter le mot / la phrase clé dans le prompt
Être directif
Exemple : "Tu dois", "Ta tâche est de"
Aller droit au but : pas nécessaire d'utiliser de formule de politesse
Ajuster / Améliorer le contenu de manière itérative
Analyse, vérification, réflexion critique
Définir les formats / limites
Exemple : "Pour chaque question : 4 choix de réponses, 2 correctes, 2 fausses. Ne pas afficher les réponses correctes."
Définir la tâche / le contexte
Exemple : "Concevoir 5 questions à choix multiples sur la thématique de l'Ancien Régime à destination d'étudiants de 1ère année d'histoire"
Préciser le public visé
Donner un rôle à l'IA
Exemple "En tant qu'enseignant en histoire à l'université,"
Il est possible de demander à une IA texte de générer un prompt à destination d'une IA image ou autres.
Mode d'emploi "officiel" de prompt engineering par ChatGPT
Plus d'outils : https://start.me/p/gyYlMK/outils
Chaque outil a son modèle économique, la majorité sont gratuits jusqu'à un certain niveau d'utilisation.
Recommandation : pour expérimenter les nombreux outils, créer un compte Google dédié. Cela simplifiera les inscriptions (la plupart des plateformes permettent l'accès via simple autorisation de compte), et permettra de compartimenter votre identité numérique et ne pas être spammé par les différentes plateformes sur votre boite principale.
Exemple : audio en audio (FR->EN) - à partir de 7:30
Whisper Web
Adobe Premiere Pro
Projet Sora (OpenAI)
Projet LUMIERE (Google)
Exemple : Présentation d'un image avec une double-hélice d'ADN vierge
Exemple : Logo "boite à jeux"
Comment garder une persistance image ?
Retrouver le prompt complet à éditer dans la zone d'information de l'image
Récupérer numéro SID et le réutiliser dans le prompt suivant
LM Studio
Jan.ai
HuggingChat
Alternative Open Source avec choix du modèle
Poe.com
Compar'IA (comparatif à l'aveugle - Ministère de la Culture)
LMSYS Org (comparatif)
Comparaison : générer une image via certains modèles est équivalent à un chargement entier de smartphone
Expérimentation RAGaRenn (Université de Rennes)
Échelle nationale
Open source
Lois américaines
Cloud Act (2018)
Permet aux forces de l'ordre américaines de contraindre plus facilement les entreprises technologiques à fournir les données demandées, même si ces données sont stockées à l'étranger.
Patriot Act (2001)
Permet aux autorités américaines d'accéder aux données des entreprises américaines, même si celles-ci sont stockées à l'étranger, dans le cadre de la lutte contre le terrorisme.
Sur certains modèles, possibilité de désactiver l'amélioration avec ses données
ChatGPT : Paramètres > Gestion des données > Désactiver Améliorer le modèle pour tous
Google Update Reveals AI Will Read All Your Private Messages
Exemple : "Ces employés Samsung ont commis une grave erreur sur ChatGPT"
Jeux
Human or not : discuter pendant 2 minutes et deviner s'il s'agit d'une IA ou d'un humain
Images : trouver l'image réelle
Une intelligence artificielle accusée d'avoir poussé un ado à se suicider
Deep fake
De (fausses) images de la tour Eiffel en feux agitent les réseaux sociaux
Rapport d'OpenAI sur l'utilisation de ChatGPT pour des opérations d'influence et cyber
Extension WebChatGPT pour ChatGPT
En avance : Perplexity / Copilot (Microsoft)
Exemple : Intelligence artificielle : un accord de partenariat entre « Le Monde » et OpenAI
Exemple : Le « New York Times » poursuit en justice Microsoft et OpenAI, créateur de ChatGPT, pour violation de droits d’auteur
En amélioration
Exemple : ChatGPT 4 n'invente pas de nom
Exemple : ChatGPT 3.5 donne le nom le plus probable
Pouvoir comprendre les éléments pris en compte par une IA pour la production d’un résultat.
Gemini & la gestion des biais
Midjourney & la banlieue
Le chatbot du pôle emploi Autrichien
Besoin de pouvoir les expliquer, les auditer pour éviter l'effet boite noire
AI Act
Il faudra composer avec
Importance de se familiariser déjà au travail d'analyse et au questionnement nécessaire à son utilisation : esprit critique, pertinence etc.
Les étudiants devront composer avec dans leurs vies professionelles futures
Exemples passés
Wikipedia : "va avoir toutes les réponses"
Moteurs de recherche
Calculatrice : nécessite malgré tout de maitriser le raisonnement, les méthodes.
Un assistant / Une "augmentation" de l'humain
Perplexity.ai combine IA (Copilot) & moteur de recherche
Base de connaissances limitée
Exemple : pour ChatGPT les données d'entraînement du modèle 3.5 vont jusqu'à 2021.
Création de contenus / explications
Interactions conversationelles
Moteur de recherche
Pas axé conversationnel
Informations en temps réel
Résultats basés sur des mots-clés
Nouvelles problématiques
Pédagogique
Problématique de l'évaluation
Réglementaire
Éthique
Exemple : ChatGPT dans sa version 3.5 ne cite pas de sources, ne crédite rien.
Début d'une "société de consommation" de l'IA
5 jours pour atteindre 1 million d'utilisateurs, en comparaison 2,5 mois pour Instagram, 3,5 ans pour Netflix
Glossaire lié
Machine Learning (apprentissage automatique): machines apprennent de leurs tâches/données pour s'améliorer via des modèles mathématiques. Une intervention humaine est nécessaire pour caractériser les données.
Deep Learning (apprentissage autonome) : réseaux neuronaux, permet l'amélioration de ses fonctions à partir du traitement de la donnée de manière autonome (exemple : AlphaGo). Il apprend de son propre environnement et de ses erreurs.
Exemples : aux échecs (DeepBlue), au jeu de Go (Deepmind)
Algorithme : Un algorithme est la description d'une suite d'étapes permettant d'obtenir un résultat à partir d'éléments fournis en entrée. Par exemple, une recette de cuisine est un algorithme permettant d'obtenir un plat à partir de ses ingrédients!
Terme de 1956 par John McCarthy (Conférence de Dartmouth)
