استفاده از
TFX, DataFlow

Tensorflow Blog

پیشرفت هوش مصنوعی هم وابسته شده به قانون Moore
هرچی قدرت پردازش بیشتر، خروجی بهتر
هرچی تعداد پارامتر بیشتر، خروجی بهتر

دنیا داره قشنگی‌هاشو از دست میده

اهمیت دیتا و preprocessing خوب، حداقل روزی ۳ مورد آدمایی رو می‌بینم که تمام الگوریتم‌های روز رو می‌شناسند.
ولی کارها و خروجی‌های اشتباهی دارند.

همیشه مشکل یک چیزه، درک اشتباه داده.

متن کتاب :
Hands on ML (2nd edition)

Rocky Linux

بهترین کاندید برای جایگزینی CentOS بالاخره ورژن اولیه رو داد.

از وقتی centos به RedHat واگذار شد همه نگران آینده پروژه‌اش شدن ولی خب مشکلی پیش نیومد بعد از اون RedHat به IBM واگذار شد و باز نگرانی ایجاد شد؛ که متاسفانه اینبار به پایان زندگی CentOS بعنوان سیستم عامل استیبل سرور منجر شد البته که CentOS Stream وجود داره و از هیچی بهتره؛ اما کسی نیاز به fedora دیگه‌ای نداره و کسی هم نمی‌خواد ی fedora با تم centos روی سرورش نصب کنه.

سازندگان و البته community ازین حرکت ناراحت بودن و تصمیم به ایجاد پروژه‌ی جدیدی به نام :
Rocky Linux
گرفتن که حالا شاهد candidate Release
اون هستیم.

اسپانسرا هم همه خفن؛ شرایط امیدوار کننده‌اس

"The Rocky Enterprise Software Foundation (RESF) is pleased to announce the general availability of the Rocky Linux 8.3 Release Candidate 1 for x86_64 and aarch64 architectures."

Rocky Linux Website

پ.ن : این نسخه رو روی سرور نصب نکنید، چون این release تایید شده و نهایی نیست.

در نهایت اگر می‌خواهید به این پروژه کمک کنید، داکیومنت نویسی، تست و ....
می‌تونید توی سایت و بخش
Discussion (Community)
ثبت‌نام کنید و از اونجا پیگیری کنید.

وقتی سرعت به BERT اضافه می‌شه، ۷ برابر سریعتر


Blog Post

ی دیتاست خوب برای اونایی که میخوای روی
Audio و text
کار کنند.

https://zenodo.org/record/4431535

MlOps
رو می‌نویسید
Machine learning DevOps

چرا ml هارو می‌ریزید تو devops ها

#تباه :/

Automated unit test generator for python



Github link

توی ۳ روز گذشته درگیر یکی از سرورهای لینوکسی مربوط به دیتابیس کلاینت بودیم،
تیم هوش مصنوعی از لحظه‌ای وارد شد که نیاز به آنالیزهای
near realtime
روی دیتاهای دیتابیس بوجود اومد.

اما یک مشکلی هم وجود داشت، زمان خیلی کم بود و پاسخ‌دهی دیتابیس توی بعضی وقتها خیلی طول می‌کشید (بعد آنالیز متوجه شدیم cpu خیلی درگیر می‌شه و حتی بعضی وقتا اجازه هیچ کاری رو نمی‌ده)
راه‌کار ساده اما زمان بر خرید و راه‌اندازی سرور قوی‌تر یا استفاده از دیتابیس بکاپ و ... برای تحلیل‌های تیم هوش مصنوعی.
مورد اول، زمان وجود نداشت
مورد دوم، near realtime بودن راه‌حل که خیلی مهم بود رو از دست می‌دادیم.

به لطف تجربیاتی که بعنوان
Server Administrator
داشتم، بجای دنبال کردن یا منتظر بودن برای راهکارهای تیم‌ها، ترجیح دادم به کمک دستور
sar
آنالیز فایل‌های
/proc
و به لطف اعتماد مدیر ارشد پروژه، ی سری تغییرات رو توی سرور اعمال کنم
مهمتر از همه فعال سازی
Linux Huge Pages
برای دیتابیس بود.

مشکل ما رو این مورد حل کرد، امیدوارم بدرد دوستان دیگه هم بخوره مخصوصاً اینکه پیدا کردن دلیل این مشکل و راه‌حل اون اصلا کار ساده‌ای نبود.

اینم ی بنچمارک جالب روی، postgresql هست :

Benchmark PostgreSQL with Huge Pages

من تا حالا چندین هزار بار به اهمیت دیتا در برابر مدل اشاره کردم و این اواخر توی تمام دوره‌ها و سخنرانی و ...
همیشه ی وقتی رو براش اختصاص دادم
تا حالا خیلی گفتم و ازین به بعد هم خیلی راجبش خواهم گفت

Andrew NG
هم توی کورس‌های جدیدی که به تازگی منتشر شد خیلی خیلی روی این موضوع صحبت می‌کنه (چون واقعاً کار توی دنیای واقعی همین هست)

به تازگی تیم DeepLearning.ai بهمراه Landing.ai یک مسابقه رو راه‌اندازی کردند که اتفاقاً اینبار مدل ثابت هست و شما فقط و فقط دیتاهارو می‌تونید تغییر بدید (بسیار مفید) :

Competition Link

کورس هاگینگ فیس که نحوه کار با این لایبراری رو بخوبی آموزش میده خیلی چیز جالبی هست

اما بهتر ازون ویدئوهای آموزش (لایو توویچ این کورس هست)

اگر لایو رو از دست دادید، میتونید توی یوتیوب ویدئو‌ها رو دنبال کنید :

HuggingFace Course Chapter 1

بپاس 2K شدن کانال,
🌹 Thank You 🌹

Ben E.King, #StandByMe

ی overview جالب از
Graph Neural Network (GNN)

Colab Link

ویدئو مربوط به Chapter 2 هم قرار گرفت 👌

خیلی وقته که به
PopOS
دسترسی نداشتم، هفته قبل بعد از آپدیت یکی از سیستم‌ها ی فیچر فوق‌العاده توش دیدم به اسم

Auto Tiling

بدون شک خیلی فوق‌العاده‌اس اگر نمی‌دونید چیه این ویدئو رو ببینید
System76 youtube

روی دسکتاپ که کدهای شرکت رو میزنم حجم زیادی دیتا دارم که باعث می‌شه فکر کردن به تغییر OS هم عذاب آور باشه، از طرفی هم بخاطر این فیچر هم که شده نمی‌تونم از PopOS جابجا بشم

پس نصبش کنیم رو اوبنتو 20.04 :

$ sudo apt install node-typescript make
$ git clone https://github.com/pop-os/shell
$ cd shell && make local-install

فقط نکته اینکه،
Keyboard shortcut
هایی که خودتون تعریف کردید یا کلی نیست رو از دست میدید مثلاً
ctrl+alt+t
که البته اگر لازمه بعداً می‌تونید اضافه کنید.

قطعاً برای کد زدن خیلی مفیده، مخصوصاً اگه مثه من بیش از یک wide monitor دارید‌.

🔺طرح صیانت از حقوق کاربران فضای مجازی این هفته به مجلس می‌رود | استفاده شهروندان از اینترنت دوباره محدود می‌شود؟

▪️طبق این طرح که در دستور کار بررسی مجلس قرار گرفته است، نمایندگان درصدد هستند قوانین محدودکننده جدیدی را برای استفاده شهروندان از اینترنت تصویب کنند. ممنوعیت استفاده از پیام‌رسان‌های خارجی، تغییر در پهنای باند اینترنت داخلی و خارجی و نیز غیرقانونی اعلام شدن استفاده از فیلترشکن برای دسترسی به سایت‌های فیلتر شده و جریمه نقدی و حبس برای استفاده‌کنندگان از آن، از جمله بندهای مختلف این طرح است.

منبع: کلیک

اگر قرار باشه بخاطر استفاده از VPN مجرم حساب بشم.

توی کلاب هوس،
اکانت من :
https://www.clubhouse.com/@pykeras

سعی می‌کنم روم‌ها و مباحث جالب رو دنبال کنم

اگر روم مربوط به برنامه‌نویسی، بخصوص Ai دارید توی بخش کامنت این پست به اشتراک بذارید

مخصوصاً اگه روم‌ها توسط متخصص موضوع ایجاد و رهبری میشه

زمان مصاحبه‌های :
صف بنویسید که ...
پشته طراحی کن که ...
و ...
چندین سال هست که تموم شده و خیلی از دوستانی که افتخار داشتم مصاحبه‌ کننده باشم، می‌دونن من هیچ اهمیتی به این موضوعات نمی‌دم.

چیزای مهم اینه که
چجوری دولوپر خودش رو بروز نگه میداره
چطور مسئله رو حل می‌کنه
با موضوعات و تکنولوژی جدید چطور برخورد و پیشرفت می‌کنه

هیچ برنامه‌نویسی توی سوالاتی که اول گفتم نمی‌مونه (گوگل کنی ۵۰۰.۰۰۰ تا کد میاد و گوگل و استک‌اورفلو کاریه که همه‌ی برنامه‌نویسا هرروز می‌کنند)
اما توی برخورد با مسئله جدید ۹۰٪ افراد حتی نمی‌تونن ی راه‌حل موقتی ارائه بدند

همه‌ی اینها رو گفتم که اشاره کنم اگر جزو دسته اول مصاحبه کننده‌ها هستید، شما برنامه‌نویس استخدام نمی‌کنید.

ابزار Copilot گیت‌هاب (شدیداً دنبال ی ریلیز رسمی ازش بودم) می‌دونه که چقدر وقت ی برنامه‌نویس واقعی با ارزش هست
و توی تسک‌های ساده و روزمره بطور کامل پشتیبان برنامه‌نویس‌هاس

https://copilot.github.com/

Vscode Extension is Available

ای
قدرت اول موشکی منطقه،
دارای انرژی هسته‌ای،
برترین صادر کننده نفت و گاز،
توسعه دهنده‌ی اولین دیش کرونا یاب دنیا،
توسعه دهنده‌ی بیش از ۴ نوع واکسن کرونا،
و ...

جون مادرت ۲۴ ساعت برق رو قطع نکن
دمو و تحویل پروژه داریم، مشتری باور نمی‌کنه برق ایرانم قطع می‌شه.