Právě jsem dokončil kurz „Learn BERT – most powerful NLP algorithm by Google“. Je to pokročilejší kurz, který jak teoreticky, tak i prakticky seznamuje s používáním modelu BERT. Bertík je špičkový algoritmus od společnosti Google, který na konci roku 2018 zamával světem zpracování přirozeného jazyka a v praxi se dodnes používá bohužel velmi málo. Dozvíte se proč změnil svět NLP více než jakýkoliv jiný algoritmus, jak přezdpravovávat a tokenizovat data pomocí BERTa, jak použít předškolený model a poté je doladit na své úloze a podobně. A to vše v prostředí moderního Google Colab a Tensorflow 2.0!
Osobně se mi na kurzu líbila hlavně teoretická část. V praktické mi chyběla jakákoliv ukázka např. na Language Generation. Dvě ukázky 1. Multiple Choice a 2. SQuAD zdaleka nevyčerpávají možnosti modelu. I tak jsem rád za úplně první online kurz tohoto typu a těším se na další.