#خبر

یکی از اهداف open AI توسعه هوش مصنوعی بی‌ضرر برای خدمت به بشریت معرفی شده که از موسسین اولیه آن ایلان ماسک است.
حال با انتشار مقاله اخیر #gpt2 یکی در توئیتر این نکته که خودشان گفتند به دلیل خطراتش نسخه نهایی را منتشر نمیکنیم یادآور شده و ایلان ماسک در سلسله توئیتی از خودش دفاع کرده...

لینک توئیت:

https://twitter.com/georgezachary/status/1096869535091691523

لینک مطلب gpt2 و مقاله و سورس در کانال:

https://t.me/cvision/1026

#gpt2 #nlp #elon_musk

خروجی خشن مدل #gpt2
همین الان با جمله
The first thing the powerful AI do
تستش کردم، و این مدل زبانی خروجی که در تصویر مشاهده میکنید را تولید کرد!

در مورد این مدل بیشتر بدانید:
https://t.me/cvision/1026
خودتان هم تست کنید:
https://t.me/cvision/1035

#gpt2 #nlp

#مقاله
مقاله ای جالب برای data augmentation در طبقه بندی متن!
Easy Data Augmentation Techniques for Boosting Performance on Text Classification Tasks

#مقاله:
https://arxiv.org/pdf/1901.11196v1.pdf

#سورس_کد:
https://github.com/jasonwei20/eda_nlp
#nlp #eda

#مقاله #سورس_کد
The Universal Sentence Encoder is now in TensorFlow.js! USE gives you embeddings for text. It's a great starting point for doing sentiment analysis, topic classification, measuring textual similarity, etc.

https://github.com/tensorflow/tfjs-models/tree/master/universal-sentence-encoder

#nlp #tensorflow

Text classification using TensorFlow.js: An example of detecting offensive language in browser.

https://medium.com/tensorflow/text-classification-using-tensorflow-js-an-example-of-detecting-offensive-language-in-browser-e2b94e3565ce

#tensorflow_js #nlp #text_classification

#سورس_کد
Neural Machine Translation with Luong Attention - Tensorflow 2.0

https://github.com/tensorflow/examples/blob/master/community/en/nmt_with_luong_attention.ipynb

#tensorflow2 #nlp #rnn #attention

این دموی completion آنلاین را با GPT-2 پیاده سازی کردند...
https://transformer.huggingface.co/

مطالب مرتبط:
https://t.me/cvision/1026
https://t.me/cvision/1035

#Transformer #NLP #GPT2

Language, trees, and geometry in neural networks

A visualization technique to understand BERT.
https://twitter.com/burkov/status/1139391818443808769

#bert #NLP

#مقاله #پیاده_سازی
XLNet: Generalized Autoregressive Pretraining for Language Understanding



#XLNet outperforms #BERT on 20 tasks, often by a large margin, and achieves state-of-the-art results on 18 tasks including question answering, natural language inference, sentiment analysis, and document ranking. Code and comparisons here:

سورس کد (تنسرفلو)
https://github.com/zihangdai/xlnet

مقاله
https://arxiv.org/abs/1906.08237v1

#NLP

#مقاله #پیاده_سازی
XLNet: Generalized Autoregressive Pretraining for Language Understanding



#XLNet outperforms #BERT on 20 tasks, often by a large margin, and achieves state-of-the-art results on 18 tasks including question answering, natural language inference, sentiment analysis, and document ranking. Code and comparisons here:

سورس کد (تنسرفلو)
https://github.com/zihangdai/xlnet

مقاله
https://arxiv.org/abs/1906.08237v1

#NLP