Nvidia довольно много делают для Data Science, недавно для себя открыл этот каталог моделей https://ngc.nvidia.com/catalog/model-scripts Не могу сказать, что там идеальный код, но с этим можно работать, например там есть оптимизированный BERT помещающийся в одну GPU https://ngc.nvidia.com/catalog/model-scripts/nvidia:bert_for_tensorflow

#nvidia #models

В этом году было представлено большое количество NLP архитектур, что сложно понять, какое теперь состояние и куда смотреть, а ещё сложнее становится понимать, как все они устроены. Краткое описание 74-х популярных NLP архитектур поможет не потеряться в этом зоопарке http://www.marekrei.com/blog/74-summaries-of-machine-learning-and-nlp-research/

#nlp #models #state