Terugblik op GPT-2 en ontwikkeling

Zou je nog steeds persoonlijke gegevens delen als een model aan elkaar blijkt te hangen met duct tape? En op eigen houtje taken laten uitvoeren op je computer? 

We zitten op een hogesnelheidstrein die maar doordendert. Maar ondertussen heeft de technologie tijd nodig om volwassen te worden. Toch zijn Large Language Models (LLM's) niet meer weg te denken uit ons leven. En dat terwijl een demo van OpenAI's ChatGPT eind 2022 pas het begin markeert van de opmars van taalmodellen die we nu zo goed kennen. Wat begon als een slimme, Whatsapp-achtige tekstgenerator, is uitgegroeid tot een technologie die steeds beter zélf taken kan uitvoeren.

Elk kwartaal komt met nieuwe mogelijkheden. De race om het beste model en de meeste gebruikers gaat zó snel, dat de vraagt reist waar we nu eigenlijk staan. Nu de grote spelers het internet hebben leeggehaald en de beschikbare trainingsdata op raakt, verschuift de focus naar andere methoden zoals posttraining. Met machine learning engineer Judith van Stegeren duiken we in de ontwikkeling van LLM's, de slimmere manier van trainen en de risico's van AI-agents. Wat maakt dat we nu staan waar we staan? En wat doet een Anthropic met hun model Claude zoveel beter dan de rest?

Want op het gebied van programmeren is Claude Code koploper en krijgt vibecoding een steeds groter publiek. Voor mensen uit het vak betekent het vooral een samenwerking met AI met een kritische blik. Voor de leek betekent het een compleet nieuwe wereld aan mogelijkheden. Maar programmeurs, die zullen altijd nodig blijven.

Die hogesnelheidstrein dendert nog wel even door. Door vele miljarden te investeren in verdere ontwikkeling blijft het tempo hoog. In deze aflevering van De Technoloog word je samen met Ben van der Burg en Mark Beekhuis volledig bijgepraat over de ups en downs in de wereld van LLM's door Judith van Stegeren, machine learning engineer bij Datakami.

Reacties of ideeën zijn altijd welkom via technoloog@bnr.nl

Gast 

Judith van Stegeren

Video 

Youtube

Over De Technoloog

Mark Beekhuis en Ben van der Burg gaan in gesprek met spraakmakende experts over technologische ontwikkelingen en de impact op onze samenleving. Want technologie is overal om ons heen, in onze broekzak en soms zelfs op ons hoofd. Van AI naar ruimtevaart, van chips naar het metaverse en van mobiele telefonie naar ICT-recht. In een open en vooral nieuwsgierig gesprek krijgt de luisteraar samen met Mark en Ben een razend interessant mini-college. 

Over de makers

Mark Beekhuis (1969) is presentator, journalist, radio- en podcastmaker met een focus op wetenschap, politiek en technologie. Hij won de eerste Dutch Podcast Award in de categorie Nieuws met Newsroom Den Haag en maakte de afgelopen jaren onder meer de serie De Kwestie Wolf en de Nieuws Top 150. Daarnaast presenteert hij wekelijks de podcasts Studio Den Haag en De Technoloog. Ook kun je hem kennen van zijn vele bijdrages op BNR Nieuwsradio.

Ben van der Burg (1968) is presentator en tech commentator. Buiten het winnen van de eerste Dutch Podcast Award in de categorie Technologie won hij nooit iets, hij werd altijd tweede. Naast de Technoloog presenteert hij De Grote Tech Show op BNR en je kent hem wellicht van media bijdrages op BNR Nieuwsradio of  TV.

Rosanne Peters is redacteur van De Technoloog. Sinds 2025 doet ze de redactie van zowel De Technoloog als De Grote Tech Show en is zij te horen in de Tech Update tijdens De Ochtend- en Avondspits.

Daniël Mol is redacteur van De Technoloog. Hij voegde zich in 2021 bij het team en is ook redacteur van de Cryptocast en De Grote Tech Show.

See omnystudio.com/listener for privacy information.