6. Oplossing van de drie problemen met Grok

6.1. Inleiding

• In [1] is de URL van de IA Grok eigendom van het bedrijf xAI [https://x.ai/company];
• In [2] vindt u de geschiedenis van uw gesprekken. Om hier toegang toe te krijgen, moet u een account aanmaken;
• In [3] kunt u uw vraag stellen;
• In [4] kun je bestanden bijvoegen;
• In [5] start je de uitvoering van IA;

In tegenstelling tot Gemini en ChatGPT ben ik geen beperkingen tegengekomen wat betreft het aantal vragen, de tijd of het aantal bijgevoegde bestanden. Dat betekent niet dat deze beperkingen niet bestaan.

6.2. Probleem 1

Grok beantwoordt deze vraag correct.

6.3. Probleem 2

We vragen Grok om de belastingberekening uit te voeren met behulp van het door ChatGPT gegenereerde bestand PDF en geven onze instructies door in een tekstbestand.

Het tekstbestand is hetzelfde als dat al gebruikt werd bij de twee geteste IA-bestanden, maar we hebben er de 25 tests in opgenomen die door ChatGPT en Gemini zijn gevalideerd. De gebruikte PDF is degene die door ChatGPT is gegenereerd:

Grok levert dan een zeer netjes script op, maar wanneer dit in PyCharm wordt geïmplementeerd, slaagt vrijwel geen enkele test. Ik verstrek hem vervolgens de foutlogs:

Deze keer doorloopt Grok alle 25 tests met succes. In [1-3] worden het gegenereerde script [grok1] en de twee bij de vraag gevoegde bestanden getoond.

6.4. Opgave 3

Deze keer wordt er geen PDF gegeven voor de berekeningsregels. Grok moet deze op internet opzoeken. De tekstinstructies [instructionsSansPDF5.txt] geven hem dezelfde 25 tests als eerder om te controleren.

Grok slaagt er bijna in één keer in. Hij genereert een script dat 24 van de 25 tests doorstaat. We geven hem zijn logbestanden.

Bij de tweede poging lukt het. In [1] staat het door Grok gegenereerde script, in [2] de te volgen instructies.

We vragen het nu om een PDF te genereren waarin de berekeningsregels worden uitgelegd die het heeft gebruikt om de 25 tests te doorstaan:

Grok genereert dan geen PDF, maar een bestand [MarkDown]. Ik heb een gratis tool gebruikt om dit om te zetten naar PDF. Bovendien kan PyCharm de bestanden [MarkDown] lezen:

6.5. Probleem 4

Om het eerder gegenereerde PDF te valideren, voeren we het in Grok in.

De eerste versie is correct. Het script doorstaat de 25 tests. In feite lijken de IA-bestanden niet deterministisch te zijn. We kunnen hem twee keer dezelfde vraag stellen en zien dat de antwoorden uiteenlopen. Dat was hier het geval met Grok. De eerste keer was ik vergeten dat hij niet op internet mocht gaan en alleen zijn PDF moest gebruiken. Hij produceerde toen een foutief script. Ik heb hem zijn logs gegeven en toen zag ik dat hij op internet ging om dingen te controleren. In de bovenstaande vraag heb ik gevraagd om dat niet te doen. Daardoor presteerde Grok over het algemeen goed.