Jeden Samstag das Neueste aus Computertechnik und Informationstechnologie. Beiträge, Reportagen und Interviews zu IT-Sicherheit, Informatik, Datenschutz, Smartphones, Cloud-Computing und IT-Politik. Die Trends der IT kompakt und informativ.
…
continue reading
Kandungan disediakan oleh Sigurd Schacht, Carsten Lanquillon, Sigurd Schacht, and Carsten Lanquillon. Semua kandungan podcast termasuk episod, grafik dan perihalan podcast dimuat naik dan disediakan terus oleh Sigurd Schacht, Carsten Lanquillon, Sigurd Schacht, and Carsten Lanquillon atau rakan kongsi platform podcast mereka. Jika anda percaya seseorang menggunakan karya berhak cipta anda tanpa kebenaran anda, anda boleh mengikuti proses yang digariskan di sini https://ms.player.fm/legal.
Sama dengan Knowledge Science - Alles über KI, ML und NLP
Jeden Tag eine App
…
continue reading
Menschen! Technik! Sensationen!
…
continue reading
In dieser Serie diskutieren wir interessante Themen aus Software-Entwicklung und -Architektur – immer mit dem Fokus auf Praxistauglichkeit.
…
continue reading
Das Kalenderblatt: Erstaunliches und Skurriles für jeden Tag – so informativ wie ein Lexikon, so bunt wie das Leben. Wie pflanzt man Spaghetti an? Und warum war Einstein auf dem Oktoberfest?
…
continue reading
Mitglieder der c't-Redaktion diskutieren über die aktuellen Themen aus dem c’t Magazin und was sonst noch so in der IT-Welt passiert.
…
continue reading
Der abwechslungsreichste Spiele-Podcast der Welt. Mit Anne, Micha, Manu, Michi und illustren Gästen aus der Videospielbranche. Meinungen, Interviews und Croissants.
…
continue reading
Das monatliche Radio des Chaos Computer Club Berlin
…
continue reading
Jeden Tag entdecken Forscher etwas Neues. Jeden Tag verändert sich die Welt - durch Wissenschaft und Technik. Behalten Sie den Überblick: "BR24 - Aus Wissenschaft und Technik" erklärt, was wirklich wichtig ist und was dahinter steckt. Aktuelle Forschungsergebnisse, technische Neuerungen, Erfindungen, Diskussionen, Beobachtungen - auf den Punkt gebracht. So spannend kann Wissenschaft sein.
…
continue reading
Bildung, Wissenschaft und Innovation sind die Säulen einer modernen Gesellschaft. Das Wissenschaftsmagazin macht Forschen und Forschungsergebnisse zum Thema, informiert über die gesellschaftlichen Auswirkungen und stellt kritische Fragen nach dem Nutzen. Das Wissenschaftsmagazin öffnet ein Fenster in die Welt von Forschung und Entwicklung und deren Auswirkungen, berichtet aktuell und fundiert über Neues in Naturwissenschaft, Medizin und Technik, schlägt Brücken zu angrenzenden Wissenschaften ...
…
continue reading
Player FM - Aplikasi Podcast
Pergi ke luar talian dengan aplikasi Player FM !
Pergi ke luar talian dengan aplikasi Player FM !
))
Episode 154 - Sind LLMs auf Benchmark Daten manipuliert?
Manage episode 416428792 series 2911119
Kandungan disediakan oleh Sigurd Schacht, Carsten Lanquillon, Sigurd Schacht, and Carsten Lanquillon. Semua kandungan podcast termasuk episod, grafik dan perihalan podcast dimuat naik dan disediakan terus oleh Sigurd Schacht, Carsten Lanquillon, Sigurd Schacht, and Carsten Lanquillon atau rakan kongsi platform podcast mereka. Jika anda percaya seseorang menggunakan karya berhak cipta anda tanpa kebenaran anda, anda boleh mengikuti proses yang digariskan di sini https://ms.player.fm/legal.
In der heutigen Sendung versuchen wir rauszufinden, ob man sich auf die öffentlichen Benchmarks zum Testen und Vergleichen von Sprachmodellen verlassen kann. Oder ob Benchmark Testdaten zum Trainieren verwendet werden. Hierbei handelt es sich um das Benchmark Leakage. Hören Sie rein.
Wir sprechen vor allem über das Paper: Benchmarking Benchmark Leakage in Large Language Models https://arxiv.org/abs/2404.18824
208 episod
Kongsi
Manage episode 416428792 series 2911119
Kandungan disediakan oleh Sigurd Schacht, Carsten Lanquillon, Sigurd Schacht, and Carsten Lanquillon. Semua kandungan podcast termasuk episod, grafik dan perihalan podcast dimuat naik dan disediakan terus oleh Sigurd Schacht, Carsten Lanquillon, Sigurd Schacht, and Carsten Lanquillon atau rakan kongsi platform podcast mereka. Jika anda percaya seseorang menggunakan karya berhak cipta anda tanpa kebenaran anda, anda boleh mengikuti proses yang digariskan di sini https://ms.player.fm/legal.
In der heutigen Sendung versuchen wir rauszufinden, ob man sich auf die öffentlichen Benchmarks zum Testen und Vergleichen von Sprachmodellen verlassen kann. Oder ob Benchmark Testdaten zum Trainieren verwendet werden. Hierbei handelt es sich um das Benchmark Leakage. Hören Sie rein.
Wir sprechen vor allem über das Paper: Benchmarking Benchmark Leakage in Large Language Models https://arxiv.org/abs/2404.18824
208 episod
Tutti gli episodi
×
Selamat datang ke Player FM
Player FM mengimbas laman-laman web bagi podcast berkualiti tinggi untuk anda nikmati sekarang. Ia merupakan aplikasi podcast terbaik dan berfungsi untuk Android, iPhone, dan web. Daftar untuk melaraskan langganan merentasi peranti.
Sama dengan Knowledge Science - Alles über KI, ML und NLP
Jeden Samstag das Neueste aus Computertechnik und Informationstechnologie. Beiträge, Reportagen und Interviews zu IT-Sicherheit, Informatik, Datenschutz, Smartphones, Cloud-Computing und IT-Politik. Die Trends der IT kompakt und informativ.
…
continue reading
Jeden Tag eine App
…
continue reading
Menschen! Technik! Sensationen!
…
continue reading
In dieser Serie diskutieren wir interessante Themen aus Software-Entwicklung und -Architektur – immer mit dem Fokus auf Praxistauglichkeit.
…
continue reading
Das Kalenderblatt: Erstaunliches und Skurriles für jeden Tag – so informativ wie ein Lexikon, so bunt wie das Leben. Wie pflanzt man Spaghetti an? Und warum war Einstein auf dem Oktoberfest?
…
continue reading
Mitglieder der c't-Redaktion diskutieren über die aktuellen Themen aus dem c’t Magazin und was sonst noch so in der IT-Welt passiert.
…
continue reading
Der abwechslungsreichste Spiele-Podcast der Welt. Mit Anne, Micha, Manu, Michi und illustren Gästen aus der Videospielbranche. Meinungen, Interviews und Croissants.
…
continue reading
Das monatliche Radio des Chaos Computer Club Berlin
…
continue reading
Jeden Tag entdecken Forscher etwas Neues. Jeden Tag verändert sich die Welt - durch Wissenschaft und Technik. Behalten Sie den Überblick: "BR24 - Aus Wissenschaft und Technik" erklärt, was wirklich wichtig ist und was dahinter steckt. Aktuelle Forschungsergebnisse, technische Neuerungen, Erfindungen, Diskussionen, Beobachtungen - auf den Punkt gebracht. So spannend kann Wissenschaft sein.
…
continue reading
Bildung, Wissenschaft und Innovation sind die Säulen einer modernen Gesellschaft. Das Wissenschaftsmagazin macht Forschen und Forschungsergebnisse zum Thema, informiert über die gesellschaftlichen Auswirkungen und stellt kritische Fragen nach dem Nutzen. Das Wissenschaftsmagazin öffnet ein Fenster in die Welt von Forschung und Entwicklung und deren Auswirkungen, berichtet aktuell und fundiert über Neues in Naturwissenschaft, Medizin und Technik, schlägt Brücken zu angrenzenden Wissenschaften ...
…
continue reading
Player FM - Aplikasi Podcast
Pergi ke luar talian dengan aplikasi Player FM !
Pergi ke luar talian dengan aplikasi Player FM !
