Deep Dive 205 – AI Evals mit Martin Seeler

About this episode

The episode features a discussion with Martin Seeler about AI evaluations and testing strategies for generative AI applications.

Wie hat dir die Folge gefallen? Gut 👍 Schlecht 👎 (Keine Anmeldung erforderlich) Ein Modell-Update bei OpenAI oder Anthropic ist schnell gemacht. Aber wie stellt ihr sicher, dass eure Anwendung danach noch genau das tut, was sie soll? In dieser Folge, aufgenommen auf der DecompileD in Dresden, sprechen wir mit Martin Seeler, Senior Staff AI Engineer bei Blue Yonder, über die Welt der AI Evals und den Unterschied zwischen einem reinen „Vibe-Check“ und belastbarer Teststrategie für GenAI-Prod...

People in this episode

Guest: Martin Seeler

Topics covered

• AI Evals
• GenAI
• Test Strategy
• Application Performance
• Machine Learning

Keywords

• AI Evals
• OpenAI
• Anthropic
• Blue Yonder
• GenAI
• Test Strategy
• Machine Learning

Mentioned in this episode

Organizations: OpenAI, Anthropic, Blue Yonder

Places: Dresden

More episodes of programmier.bar – der Podcast für App- und Webentwicklung

• News 24/26: AI vs. Open Source // Fable 5 // WWDC // Microsoft Build // Tesla FSD // Cloudflare kauft (void0) · June 11, 2026 · 42 min
• Deep Dive 209 – AI Libraries mit Christopher Hertel · June 9, 2026 · 1h 10m
• Spezialfolge : WWDC26 · June 8, 2026 · 30 min
• News AI 23/26: Antrophic Bewertung // Opus 4.8 // NVIDIA Chips // Papst & AI · June 4, 2026 · 48 min
• Spezialfolge : programmier.con 2025 aus Bad Nauheim · June 3, 2026 · 51 min
• Spezialfolge : Google I/O 2026 aus Mountain View · June 2, 2026 · 50 min