Stacja.IT Podcast 036 - Piotr Rybak i Łukasz Kobyliński o konkursach w Data Science (PolEval i KLEJ Benchmark)

Podcast Stacja IT

W najnowszym odcinku podcastu Stacji.IT tematem są konkursy, które odbywają się w branży Data Science. W pierwszej części Łukasz Kobyliński opowiedział o konkursie PolEval. Natomiast w drugiej części podcastu rozmowa z Piotrem Rybakiem skupiła się wokół konkursu KLEJ Benchmark.

STRESZCZENIE ODCINKA:

1. Przedstaw się i powiedz parę słów o sobie

2. Jesteś współautorem publikacji i rankingu KLEJ - czy możesz powiedzieć czym jest KLEJ Benchmark?

3. Skąd pomysł na taki projekt?

4. Czy sam miałeś doświadczenia z konkursami na najlepsze metody uczenia maszynowego?

5. Jak powstał KLEJ (zbiory testowe)?

6. Co pokazuje benchmark? W jaki sposób rangowane są poszczególne metody?

7. Jakie obecnie metody są w rankingu? Jakie podejścia radzą sobie najlepiej?

8. Czy we współczesnym NLP najważniejsze są rozmiary zbioru treningowego? Czy można poprawić same metody?

9.Czy Twoja firma korzysta z benchmarku? Czy korzysta z metod, które są w nim ujęte?