Právě řeším jednu úlohu v NLP, ve které učím počítač poznávat různé druhy nadávek, urážek, hrubých výrazů atd. Je to asi 70 MB textu k trénování. Aby tomu počítač trochu rozuměl, tak jsem ho naučil 2 milióny českých slov z wikipedie a dalších zdrojů – word embedding. Zkrátka je to celkem hodně informací a jedna epocha učení trvala na …CPU dvě a půl hodiny. Deset epoch pak věčnost – celý den. Rozhodl jsem se tedy znovu rozchodit GPU a víte, jak dlouho trvá jedna epocha? 6 vteřin! Zrychlení 1500x si nechám líbit.
Mám sen. Pořídit si GPU s Tensor jádry – grafickou kartu RTX 2080Ti (nebo v alespoň lacinou GeForce RTX 2070). Karta vyjde 20. září – recenze GPU zde: https://www.alza.cz/nvidia-turing-recenze-a-testy