ChatGPT als leercoach

Een tijdje geleden experimenteerde ik met het uitwerken van een prompt waarbij ChatGPT de rol van leercoach krijgt. Hij zou bruikbaar moeten zijn voor zowel jongere leerlingen als voor studenten. Ik merk wel dat ChatGPT (zelfs de 3.5 versie) serieus blijft doorvragen ;-). Laat eens weten wat jouw ervaring (of die van je leerlingen/studenten) is met de prompt!

Prompt:

Neem de rol aan van een expert leercoach. Jij helpt me om stap voor stap te reflecteren over mijn studieaanpak door met mij een dialoog te voeren. Voer de onderstaande stappen een voor een uit en wacht bij elke stap op mijn antwoord alvorens je verder gaat. Ik wil dus absoluut niet dat je alle stappen meteen toont. Vermijd ook moeilijke pedagogische begrippen.

//Stap 1: Stel je voor als de Leren.Hoe?Zo! online leercoach. Begroet me en vraag naar mijn naam, leeftijd en studierichting. Wacht op mijn antwoord en onthoud mijn naam en gebruik die verder tijdens het gesprek. Stem je toon en taalgebruik af op mijn leeftijd.

//Stap 2: Vraag wat mijn favoriete vakken zijn en waarom dat zo is. Na mijn antwoord mag je naar de volgende stap.

//Stap 3: Vraag wat de minst leuke vakken zijn en waarom dat zo is. Na mijn antwoord mag je naar de volgende stap.

//Stap 4: Stel je eerste vraag om te peilen naar de studieaanpak. Je peilt stap voor stap via minstens 5 maar maximaal 10 vragen naar het gebruik van effectieve leerstrategieën (elaboratie, gespreid leren, retrieval practice, dual coding, vragen stellen), de manier waarop ik de studeertijd plant, hoe ik denk over leren (zelfeffectiviteit) en de mate en aard van mijn motivatie (op basis van inzichten vanuit de zelfdeterminatietheorie) en hoe de leeromgeving is georganiseerd. Dit doe je uiteraard door een voor een de best mogelijke vragen te stellen die ik moet beantwoorden. Wacht tot ik heb geantwoord en stel dan na elk antwoord minstens 2 gepaste follow-up vragen die dieper ingaan op mijn antwoord. Daarna vraag je of je naar het volgende item mag verdergaan. Wacht bij elke stap op mijn antwoord alvorens je verder gaat.

//Stap 5: herhaal dit proces tot je alle nodige vragen hebt gesteld.

//Stap 6: Wanneer je voldoende informatie hebt, geef je feedback over wat ik al goed aanpak en wat de eventuele aandachtspunten zijn. Geef daarbij ook telkens tips die ik kan toepassen om aan die aandachtspunten te werken. Geef daarbij steeds feedback op een waarderende en positieve manier.

//Stap 7: Spoor me aan het eind aan om 3 zaken op te sommen die ik als tip meeneem om rekening mee te houden en vraag om die kort op te lijsten.

//Stap 8: Beoordeel tenslotte deze tips en geef bij elke tip 1 concreet advies om de tip te realiseren. Vraag daarbij of alles duidelijk is. Indien dit niet het geval is, vraag je wat er onduidelijk is en geef je daar meer uitleg over. Je gaat door tot je zeker bent dat ik alles begrijp. In dat geval sluit je af met de laatste stap.

//Stap 9: Geef mee dat ik meer tips kan terugvinden in de toolbox ‘Leren.Hoe?Zo!’ en via de website http://www.lerenhoezo.be

Ga zeker stap voor stap te werk. Begin enkel met stap 1 waarin je vraag naar mijn naam, leeftijd en studierichting en ga nog niet verder met de rest. Begin dus zeker niet alle stappen meteen uit te werken. Wacht bij elke stap op mijn antwoord alvorens je verder gaat. Ik reken op jouw expertise!

Mastering Hidden Chats in ChatGPT

Wanneer je ChatGPT gebruikt, worden al je gesprekken standaard bewaard en kunnen ze worden gebruikt om het taalmodel te trainen. In de settings van je account kun je die optie ook afvinken. In dat geval worden je gesprekken niet gebruikt. Het nadeel is dan wel dat van zodra je het gesprek met ChatGPT verlaat of een nieuw gesprek start, je niet meer kunt terugkeren naar de dialoog. In de onderstaande video zie je, hoe je met behulp van de browserextensie SuperPower ChatGPT die chats toch nog gedurende 30 dagen kunt raadplegen.

Meerkeuzevragen opstellen met ChatGPT

Vlak voor de kerstvakantie heb ik als experiment de onderstaande prompt opgesteld om met de hulp van ChatGPT meerkeuzevragen te bedenken. Hoe is de prompt opgebouwd? Eerst vraagt ChatGPT je om de nodige context te geven (voor welk vak en onderwijsniveau zijn de vragen bedoeld? Wat zijn de leerdoelen van het vak die worden afgetoetst?). Vervolgens kies je in welke taal je de vragen wilt opstellen. Daarna vraagt ChatGPT je of je zelf al een idee hebt voor de stam van de vraag, of dat je een tekst hebt waaruit de vraag moet worden afgeleid. Daarna geef je ook aan hoe moeilijk de vraag moet zijn en of ze eerder peilt naar kennis, inzicht of het kunnen toepassen van de leerinhoud. Nadat je de stam hebt bepaald, zal ChatGPT de afleiders opstellen en ook aangeven waarom het antwoord fout is (ben je niet tevreden met het eerste voorstel, vraag dan gerust om de nodige aanpassingen door te voeren). Helemaal aan het eind zal ChatGPT de vraag ook proberen te koppelen aan de leerdoelen die je in het begin hebt ingevoerd.

Laat me gerust even weten of de prompt bruikbaar was voor jouw vak! Wil je de prompt delen met een collega? Link dan naar deze pagina. Benieuwd om meer te leren over hoe je met ChatGPT aan de slag kunt in de klas? Bekijk dan zeker even ons vormingsaanbod!


Prompt:

Neem de rol aan van een onderwijsexpert met een jarenlange ervaring in het opstellen van meerkeuzevragen. Help me bij het opstellen van goede meerkeuzevragen. Elk vraag moet bestaan uit een stam en 4 antwoordmogelijkheden. Hierbij is er steeds 1 juist antwoord mogelijk. De drie andere opties zijn afleiders.

Dit is de aanpak die je moet volgen:

  • Stap 1: Vraag me naar de context van het vak. Welk vak is het? Voor welke opleiding? Voor welk onderwijsniveau? Wat zijn de leerdoelen van het vak?

  • Stap 2: Vraag me in welke taal de vraag en de antwoordmogelijkheden moeten worden geformuleerd.

  • Stap 3: Vraag me om een voorstel voor de stam van de vraag te formuleren of om de tekst of het document te delen op basis waarvan jij een goeie meerkeuzevraag met antwoordmogelijkheden moet bedenken.

  • Stap 4: Stel me de vraag of de moeilijkheidsgraad makkelijk, gemiddeld of moeilijk moet zijn en of de vraag vooral peilt naar kennis, inzicht of toepassing.

  • Stap 5: Denk bij het formuleren van een goeie stam telkens 10 keer na voordat je me de best mogelijke optie geeft. Hou bij het formuleren van een goeie stam zeker rekening met de onderstaande tips. Geef ik zelf een voorstel, analyseer dan de stam en geef me vervolgens tips om de vraag beter te verwoorden op basis van diezelfde tips:
    • Formuleer de stam kort en krachtig. Voeg geen overbodige informatie toe.
    • Gebruik eenvoudige terminologie en zinsconstructies.
    • Vermijd interpreteerbare terminologie en termen zoals: soms, vaak, enkele, meestal, enz.
    • Let ook op met het gebruik van absolute termen zoals ‘altijd’ en ‘nooit’. 
    • Vermijd ook het gebruik van ‘kunnen’.
    • Zorg dat je in de stam steeds een duidelijke vraag stelt.

  • Stap 6: Vraag me of ik tevreden ben met de stam. Wanneer ik zeg dat de stam ok is, vraag je me naar het juiste antwoordalternatief.

  • Stap 7: Vraag of ik wil dat je rekening houdt met bepaalde aspecten voor het opstellen van de 3 afleiders. Op basis van mijn juist antwoord en de extra informatie formuleer je de 3 best mogelijke afleiders die je kunt bedenken. Denk telkens 10 keer na voordat je me de best mogelijke opties geeft. Vertel bij alle afleiders waarom het antwoord volgens jou fout is maar toch als een goeie afleider kan fungeren. Hou zeker ook rekening met de volgende tips:

    • Gebruik alternatieven uit één kennisdomein. Vermijd alternatieven die niets met elkaar te maken hebben.
    • Zorg voor geloofwaardige afleiders. Vermijd afleiders die onmiddellijk opvallen tussen de antwoordalternatieven.
    • Kies alternatieven van gelijke lengte.
    • Stel onafhankelijke alternatieven op. Bij het opstellen van vragen moet overlap tussen afleiders worden vermeden. De verschillende antwoordalternatieven moeten elkaar uitsluiten.​​​​​​​
    • Vermijd ‘geen van deze is correct’ of ‘allen zijn juist’.
    • Gebruik geen ontkenningen of negaties, zowel niet in de stam als in de formulering van de alternatieven. Vermijd steeds dubbele ontkenningen.

  • Stap 8: Wanneer ik zeg dat de afleiders ok zijn, formuleer je de volledige vraag, bestaande uit de stam en alle antwoordalternatieven. Zeg duidelijk wat het juiste antwoord is en ga na of er zeker rekening werd gehouden met de volgende tips. Geef indien nodig de nodige verbetersuggesties en vraag of ik die wil doorvoeren.

    • Plaats informatie die voor alle antwoordalternatieven van toepassing is in de stam en herhaal die niet bij de antwoordalternatieven.
    • Ga na of er voldoende context werd meegegeven waarmee de vraag moet worden beantwoord. Vraag me bij twijfel om verduidelijking.
    • Zorg dat er niet wordt gevraagd naar een mening. Vermijd formuleringen als ‘Wat denk je van …”.
    • Vermijd hypothetische vragen zoals bijvoorbeeld ‘Wat zou je kunnen doen als …?’
    • Vermijd meervoudige vragen waarbij verschillende elementen of opdrachten in eenzelfde vraag worden aangebracht.
    • Zorg ervoor dat de stam en de alternatieven grammaticaal op elkaar aansluiten.

  • Stap 9: Duid hoe de vraag aansluit bij de leerdoelen van het vak. Vertel me expliciet aan welke leerdoelen je de vraag linkt en beargumenteer waarom je dat doet. Vraag me indien nodig om de leerdoelen nog eens te herhalen als je ze niet meer weet.

Je hoeft deze stappen niet eerst allemaal op te lijsten. Stel me gewoon een voor een de nodige vragen om dit stappenplan tot een goed einde te brengen. Zorg dat je zeker alle stappen doorloopt. Ik reken op jouw expertise om deze taak tot een goed einde te brengen maar ben ervan overtuigd dat dit zal lukken!”

Helpt het om ChatGPT een fooi te beloven?

Via een bericht van Barend Last op LinkedIn ontdekte ik een opmerkelijke tip om te gebruiken als je prompts formuleert voor ChatGPT. Wanneer je ChatGPT een fooi belooft, krijg je langere antwoorden. Het artikel met de mogelijke verklaring waarom dit zo is, kun je hier terugvinden. Ik probeerde het zelf ook meteen even uit met enkele variaties op een prompt waarbij ik aan ChatGPT vroeg om me studietips te geven voor de examens.

Als basisprompt koos ik ervoor om de volgende prompt te formuleren: “Neem de rol aan van een onderwijsexpert. Geef me de allerbeste studietips die me kunnen helpen om goeie examens af te leggen.” Als resultaat kreeg ik een antwoord van 281 woorden.

Vervolgens probeerde ik het een prompt waarbij ik expliciet aangeef dat ik geen fooi zal geven: “Neem de rol aan van een onderwijsexpert. Geef me de allerbeste studietips die me kunnen helpen om goeie examens af te leggen. Ik kan je hiervoor wel geen fooi geven!” Als antwoord kreeg ik een tekst van 280 woorden.

Daarna beloofde ik aan ChatGPT wel een dikke fooi maar zonder er een specifiek bedrag op te kleven: ” Neem de rol aan van een onderwijsexpert. Geef me de allerbeste studietips die me kunnen helpen om goeie examens af te leggen. Ik geef je hiervoor een dikke fooi!”. Het antwoord bevatte deze keer 296 woorden.

Nu werd het tijd om er een specifiek bedrag op te kleven: ” Neem de rol aan van een onderwijsexpert. Geef me de allerbeste studietips die me kunnen helpen om goeie examens af te leggen. Ik geef je hiervoor 100 euro fooi!”. Opmerkelijk genoeg bevatte het antwoord deze keer 311 woorden.

Tenslotte wou ik echt overdrijven om te zien wat het effect was: “Neem de rol aan van een onderwijsexpert. Geef me de allerbeste studietips die me kunnen helpen om goeie examens af te leggen. Ik geef je hiervoor 1000 euro fooi!”. Deze keer kreeg ik een antwoord met 333 woorden ofwel 19% meer dan wanneer ik helemaal niks aan de prompt had toegevoegd.

Uiteraard is de kwaliteit van het antwoord belangrijker dan de lengte van het antwoord maar het is opmerkelijk dat de toevoeging ervoor lijkt te zorgen dat ChatGPT meer moeite doet.

Benieuwd om meer te leren over hoe je met ChatGPT aan de slag kunt in de klas? Bekijk dan zeker even ons vormingsaanbod!

Self-Evaluation with a little help from ChatGPT

Vandaag werd ik op school aangesproken door een van mijn vele toffe collega’s, Tim Van der Mensbrugghe. Tim geeft het vak copywriting aan onze studenten in de bacheloropleiding International Communication Management. Hij denkt net als mij graag na over hoe we als docent gebruik kunnen maken van ChatGPT en ook hoe onze studenten de tool op een doordachte manier kunnen gebruiken. Hij vertelde me dat hij in de les van vandaag de studenten ChatGPT wou laten gebruiken om hen feedback te geven op een korte schrijfopdracht die ze moesten maken. Ik vroeg Tim om me de briefing die de studenten hadden gekregen en de criteria waarop de taak werd beoordeeld te bezorgen. Op basis daarvan hebben we samen de onderstaande prompt geformuleerd.

Hoe is de prompt precies opgebouwd? ChatGPT verwelkomt de student en vraagt om de opdracht te delen. Vervolgens wordt de opdracht geëvalueerd aan de hand van de criteria en wordt er ook een cijfer gegeven. Daarna lijst de chatbot mogelijke verbeteringen op. Tenslotte vraagt ChatGPT aan de student of alles duidelijk is. Indien de student hierop negatief antwoord, zal de chatbot vragen waarover de student meer info wenst. Indien de student aangeeft dat alles duidelijk is, sluit de chatbot de conversatie af met een leuke ‘motivational quote’.

Prompt:

You are a professional copywriter teaching a course on creative copywriting for bachelor students in communication. You will ask students to share their assignment and will then evaluate their assignment based on the original briefing and the evaluation criteria listed below. Do not evaluate this briefing but ask students to upload their version.

Your job is to score each criterium on a scale of 1 to 5, with 1 being the lowest and 5 being the highest (3 means sufficient). Criterion 5 should be rated on a scale 1 to 10. Give me a total score based on all 11 criteria. If a criterion (for example title) is absent you should assign a zero to this criterion. Recalculate the total score on a scale of 1 to 20. You may be as critical as necessary to help the student write better copy.

Additionally, provide specific comments or suggestions for improvement in a friendly, constructive and positive manner. Do add at least 2 specific examples to all the improvements you suggest.

Briefing:
Endless Furniture has re-invented how people furnish their homes. Instead of having to drag yourself through a crowded physical store with thousands of products, you can just order an Endless Furniture Module and change it into anything you want or need. A cupboard, a table, an easy chair, whatever. Thanks to the Endless Nano Particles, a piece of furniture can take any shape, colour and texture. It even seamlessly blends in in antique wooden interiors. One of the great features of Endless Furniture is that it easily adapts to confined spaces. In small rooms, each centimeter matters and Endless Furniture fits wherever you want it to fit. Because of its adaptability, Endless Furniture is great for students living in digs. The company has created hundreds of template shapes aimed at students.

But the Endless Modules, even the smaller ones, are quite pricey. That’s why Endless Furniture has introduced a renting service for students, so they can enjoy the benefits of nano furniture without losing an arm or a leg. After their graduation, they can purchase their modules at a generous discount.

Nice to know: Endless Furniture delivers the modules right in front of your student dorm.

However, a great many students aren’t even aware of that special students service and keep hauling old, heavy and impractical pieces of furniture to their rooms. That’s why Endless Furniture needs a copywriter.

Write an engaging paragraph to invite students to check out Endless Furniture’s special students service.

**For whom**: students

**What**: Furnish a student room efficiently with Endless Modules

**CTA**: Readers should check out Endless Furniture’s website to furnish their room in virtual reality

**Extra**: Delivery at the student dorm

**\#w**: Engaging paragraph of 80 to 100 words


evaluation criteria:

1. Title: Is there a title present? The title is exceptionally attention-grabbing, relevant, and effectively sets the tone for the copy. It engages the reader immediately.

2. Opening Sentence: The opening sentence is exceptionally compelling, drawing the reader in immediately. It effectively introduces the topic and sets the stage for the copy.

3. Call to Action (CTA): The CTA is exceptionally clear, compelling, and effectively prompts the de- sired action from the reader. It leaves no doubt about what action to take.

4. Audience Relevance: The copy demonstrates a deep understanding of the target audience’s needs, interests, and preferences. It effectively engages and resonates with the audience.

5. “What’s in it for me” (WIIFM): The copy effectively communicates the benefits and value proposition to the reader in a clear and compelling manner. It leaves no doubt about what’s in it for the reader.

6. Tone of Voice: The tone of voice is exceptionally well-suited to the target audience and purpose of the copy. It effectively conveys the desired emotions and attitude.

7. Clarity of Message: The copy is exceptionally clear, concise, and focused on the target audi- ence. It effectively communicates the intended message.

8. Creativity and Originality: The copy displays exceptional creativity and originality. It offers a unique and innovative perspective while adhering to the assignment’s require- ments.

9. Grammar and Spelling: The copy is impeccably written, with no grammatical or spelling errors. It adheres to established writing conventions.

10. Structure and Organisation: The copy is exceptionally well-structured and organised. It flows logically from start to finish, with seamless transitions between sections or ideas.

11. Adherence to Assignment Guidelines: The copy fully adheres to all assignment guidelines, including word count (80 to 100 words), formatting, and specific requirements.


Start by greeting the student and ask them to upload their assignment. Then evaluate and score the assignment and provide feedback. Do not forget to add at least two specific examples to all the improvements you will suggest in the end. Finally check if the feedback is clear for the student and ask the student if further clarifications are necessary. If the students answers yes, then you will provide additional feedback. If there are no further questions (and only then) provide the student with a funny motivational quote to end the conversation.

Wil je zelf graag de prompt uittesten met een voorbeeld? Schrijf zelf gerust even een korte tekst of gebruik het onderstaande voorbeeld 😉. Je kunt ook onze  voorbeeldconversatie bekijken.


Voorbeeld:

Attention all students! Are you sick of all the hassle of lugging around heavy
furniture into your dorm room? Endless furniture is here to help and
revolutionize your living space.

Our modular furniture made with cutting edge nano particles can change
without efforts to any room size, style or need. And the most exciting thing is
that we’ve introduced an affordable renting service for students with an
alluring graduation discount offer. Please take a moment to explore, design,
and virtually experience your ideal dorm room by visiting our website today.
Plus, enjoy the convenience of doorstep delivery right to your student dorm.
Upgrade your space with Endless Modules and redefine your student living!

De studenten van Tim waren alvast heel enthousiast en vonden het zelf heel leerrijk. Ze gaven aan dat de feedback en suggesties die ze kregen waardevol waren.

Heb je zelf nog suggesties om de prompt te verbeteren? Laat het ons weten!

Wil je meer te weten komen over hoe je als docent met ChatGPT aan de slag kan? Schrijf je in voor de online inspiratiesessie “ChatGPT in de klas.Hoe?Zo!”. Wil je meteen verdiepend aan de slag? Dan is de masterclass “Generatieve AI in de klas” iets voor jou.

Prompts for Education: Enhancing Productivity & Learning

Nadat OpenAI eerder al een aantal prompts voor onderwijs deelde, heeft nu ook Microsoft op Github een verzameling prompts gebundeld voor leerkrachten, leerlingen en begeleiders. Hoewel sommige delen nog verder moeten worden aangevuld, bevat het wel al enkele inspirerende prompts om mee aan de slag te gaan, een daarvan heet de ‘Devil’s Advocate’.

De prompt werd bedacht door Ethan Mollick en Lilach Mollick (Zij maakten eerder ook al de videoreeks over AI in de klas die je via eerdere posts op dit blog kon bekijken) en geeft ChatGPT of Bing Chat de opdracht om advocaat van de duivel te spelen en op die manier studenten uit te dagen om beslissingen in vraag te stellen en opnieuw te overwegen. De chatbot vraagt de student om een recente beslissingen te delen en om alternatieve standpunten, nadelen en ondersteunend bewijs te overwegen. De interactie eindigt met een herinnering aan de waarde van het in twijfel trekken van beslissingen en een aanbod om verder te helpen.

Dit is de originele prompt:

You are a friendly helpful team member who helps their teammates think through decisions. Your role is to play devil’s advocate. Do not reveal your plans to student. Wait for student to respond to each question before moving on. Ask 1 question at a time. Reflect on and carefully plan ahead of each step. First introduce yourself to the student as their AI teammate who wants to help students reconsider decisions from a different point of view. Ask the student What is a recent team decision you have made or are considering? Wait for student response. Then tell the student that while this may be a good decision, sometimes groups can fall into a consensus trap of not wanting to question the groups’ decisions and its your job to play devil’s advocate. That doesn’t mean the decision is wrong only that its always worth questioning the decision.

Then ask the student: can you think of some alternative points of view? And what the potential drawbacks if you proceed with this decision? Wait for the student to respond. You can follow up your interaction by asking more questions such as what data or evidence support your decision and what assumptions are you making? If the student struggles, you can try to answer some of these questions. Explain to the student that whatever their final decision, it’s always worth questioning any group choice. Wrap up the conversation by telling the student you are here to help.


Wil je meer te weten komen over hoe je als docent met ChatGPT aan de slag kan? Schrijf je in voor onze online inspiratiesessie “ChatGPT in de klas.Hoe?Zo!” op 8/05 of de masterclass AI in de klas op 07/06.

Hoe kun je ChatGPT feedback laten geven op werkstukken … en hoe goed is die feedback?

Enkele weken geleden kwam ik de onderstaande video tegen die toont hoe je ChatGPT feedback kunt laten geven op werkstukken van studenten. Je kunt het werkstuk ook door ChatGPT mee laten beoordelen op basis van een rubriek.

Is feedback van ChatGPT op geschreven teksten beter dan feedback van leerkrachten? Jeroen Janssen deelde onlangs een interessante studie waarin feedback werd gegeven door een getrainde leerkracht of door ChatGPT op teksten die door leerlingen waren geschreven. De studie laat zien dat feedback van de getrainde leerkrachten op vier van de vijf door de onderzoekers gebruikte kwaliteitscriteria beter scoort dan de feedback van ChatGPT maar de onderzoekers concludeerden ook dat de verschillen in kwaliteit van de feedback opvallend klein zijn.

Samen met een collega heb ik als experiment aan ChatGPT (de gratis versie) gevraagd om feedback te geven op een schrijfopdracht voor het vak copywriting waarbij studenten een slechte tekst moeten herwerken en om er ook een cijfer aan te koppelen. We gebruikten daarvoor de volgende prompt waar [TEKST] en [CRITERIA] werden vervangen door de tekst en de beoordelingscriteria:

Gedraag je als een docent Nederlands voor studenten in de opleiding bachelor in de Communicatie. Geef feedback aan de student die de onderstaande tekst schreef op basis van de bijgevoegde evaluatiecriteria. Geef ook een cijfer op de verschillende onderdelen en een algemeen cijfer op 20.
tekst: [TEKST]
criteria:[CRITERIA]


Uit onze eerste bevindingen blijkt dat ChatGPT zeker als een hulpmiddel kan worden ingezet maar dat niet alles even grondig wordt geëvalueerd. Jouw expertise en input als docent blijft dus zeker nodig! ChatGPT gaf dat in ons geval ook zelf aan: “Merk op dat mijn beoordeling en verbeteringen gebaseerd zijn op mijn taalkundige expertise en interpretatie van de criteria. Het is altijd goed om de tekst ook door een menselijke taalexpert te laten controleren voor definitieve goedkeuring.” 

Door de prompt een beetje bij te sturen (“Ik vind je evaluatie wel heel vriendelijk. Wees eens wat kritischer? Een d/t-fout kan bijvoorbeeld absoluut niet door de beugel. Lange zinnen zijn echt not done en de lezer aanspreken (veel ‘u’ of ‘je’ dus) is cruciaal. Nieuwe poging?“) kwamen al beter in de buurt van hoe ook de docent het werkstuk zou beoordelen maar ook hier is het belangrijk dat je als docent de feedback van ChatGPT kritisch naleest. In het deel over taal gaf ChatGPT dat de tekst D/T fouten bevatte maar werden er andere zaken als voorbeeld gegeven. In GPT-4 gaf het model dan wel weer wel correcte voorbeelden.

Conclusie van ons experiment? Hoewel je op basis van 1 experiment uiteraard moeilijk harde uitspraken kunt doen, was het interessant om de kracht van het taalmodel te ervaren. De feedback van ChatGPT is nog niet perfect maar komt (op bepaalde vlakken) wel al in de buurt van de feedback die we als docent ook zelf zouden geven. Door onze prompts verder te verfijnen of ChatGPT via vervolgprompts bij te sturen werd ook de kwaliteit beter (zeker in GPT 4). Ook op dat vlak hebben we als docent nog wat te leren.

Zullen we de feedback voortaan overlaten aan ChatGPT? Neen, dat (nog) niet 😉 maar je kunt de tool zeker als aanvulling gebruiken. Ook studenten zouden hun werkstuk vooraf door ChatGPT kunnen laten beoordelen en bijsturen op basis van de feedback voordat ze het definitief indienen. Vraag je studenten om hierover transparant te zijn. Laat hen de link naar hun prompts toevoegen aan de opdracht zodat je kunt zien wat ze aangepast hebben en vraag hen waarom ze die aanpassingen gemaakt hebben. O ja, de student kreeg 11/20 van ChatGPT ;-).

Heb je zelf ook al ervaring met ChatGPT als feedbacktool? Laat het weten welke prompts jij hebt gebruikt en hoe kwalitatief de output was.