​​Machine Unlearning nima? U qanday ishlaydi?

Machine Unlearning - bu MLning kichik bir sohasi bo'lib, u o'rgatilgan modeldan ma'lum bir ma'lumotlar qismi - "unutish to'plami" (forget set) ta'sirini olib tashlashga qaratilgan.

Yani soddaroq qilib tushuntiradigan bo'lsak, misol uchun bizning ML modelimiz bir ma'lumotlar toplami bilan training qilingan bo'lsin va bu ma'lumotlar toplami o'z ichiga 100 nafar odamning ko'plap suratlaridan tashkil topgan.

Keyinchalik ayrim sabablarga ko'ra bir odamning rasmlaridan foydalanmasligimiz kerak bo'lib qodi. Unda qanday yo'l tutamiz?

Birinchi yo'l: Malumotlar to'plamidan o'sha inson suratlarini olib tashlab qolgan 99 kishi rasmlari uchun modelimizni qaytadan train qilamiz. Bu yo'l ananaviy yo'l lekin katta malumotlar toplami bilan modelni qayta train qilish juda qimmatga tushishi mumkin.

Ikkinchi yo'l: Machine Unlearning metodini qo'llash orqali train qilingan orginal modelni faqat bir kishining (rasmlari o'chirilishi kerak bo'lgan kishi) rasmlaridan iborat ma'lumotlar to'plamida training qilishdir. Bu yo'l ancha arzon hisoblanadi. Ammo o'ziga yarasha kamchiliklari mavjud. Masalan orginal modelning aniqlik darajasiga salbiy ta'sir ko'rsatishi mumkin va birinchi yo'l orqali erishilgan darajaga erishish imkonsiz. bundan tashqari o'chirilishi kerak bo'lgan ma'lumot to'liq o'chmasligi mumkin.

Quyidagi rasmda Machine Unlearning algoritmining umumiy arxitekturasi keltirilgan.

Bu Machine Unlearning sohasi nisbatan yangi va o'ziga yarasha kamchiliklari borligi uchun Google o'zining Birinchi Machine Unlearning Challenge ini shu oyning (iyul) o'rtalarida Kaggle platformasida e'lon qiladi. Bunda siz ham qatnashish imkoniyatiga egasiz😎.

👉 @machine_learning_lab

#loyiha

Smart Farm project

Loyihamizning ‘hardware’ qismi deyarli tugadi! Hozirda software qismida ishlayapman!

Insect detection (hashoratlarni aniqlash) uchun dataset tayyorlab Yolov-5 modelida datani o’qitib keyin to’liq experimentni boshlasak bo’ladi. insha Alloh!

👉 @machine_learning_lab

#loyiha #smartfarm

Ushbu haftada Smart Farm loyihamizga doir bo'lgan zararli hashoratlarni aniqlash (Insects detection) qismida ishladim.

Ma'lumotlar toplamini tayyorlashda 7 xil issiqxonalarda eng ko'p uchraydigan hashoratlarni tanlab oldik va jami 1300 dan ortiq rasmlar toplandi. Bular quyidagicha (nomlari inglizchada ☺️):

Aphids
Caterpillars
Fungus gnats
Leafhoppers
Mealybugs
Spider mites
Whiteflies

Zararli hashoratlarni aniqlash (Insects detection) uchun Yolov5 modelidan foydalanildi. Natijalar qoniqarli hozircha (rasmda keltirilgan). Lekin natijani yaxshilasa bo'ladi.

Datasetni hozircha ommaga ochiq qilmadik ☺️.

Telegram | Instagram | YouTube

AI ni o'rganish va mavjud mahoratingizni oshirish uchun zo'r imkoniyat!

ML engineerlari uchun Microsoft kompaniyasi "Microsoft Learn AI Skills Challenge" nomli challenge ini e'lon qildi. Ushbu challenge quyidagi 4 yo'nqlishni o'z ichiga oladi:

👉Machine Learning Challenge
👉Machine Learning Operations (MLOps) Challenge
👉Cognitive Services Challenge
👉AI Builder Challenge

Ushbu challenge 17-iyuldan 14-avgutgacha davom etadi. Yuqoridagi 4 yo'nalishdan kamida bittasini tamomlagan ishtirokchiga Microsoft Learn AI Skills test nishoni va yakuniy sertifikat topshiriladi. Ular Microsoft Learn profilingiz bilan bog'langan elektron pochta manziliga yetkaziladi.

P.s: AI ga qiziquvchi yaqinlaringizga albatda bu xabarni yetkazing. Zero bir yaxshilikka sababchi bo'lib qolsangiz.

Telegram | Instagram | YouTube

Microsoft AI Challenge haqida qisqacha xulosa!

Ushbu Microsoft kompaniyasi tomonidan e'lon qilingan challenge-ning ikkitasiga (Machine Learning Challenge va Machine Learning Operations (MLOps) Challenge) ro'yxatdan o'tgan edim.

Ikki kun davomida vaqt ajratib ushbu dasturlarni tamomladim. Unda asosan Machine Learning haqida umumiy tushunchalar, regression, classification va clustering ga doir mashqlar berilgan.

Keyingi asosiy urg'u Microsoftning ML engineerlari uchun maxsus Azure Machine Learning Studio platformasida ko'nikma hosil qilishga qaratilgan. Ammo bu platformadan ro'yhatdan o'tish pullik 😉. Bu platforma sizga ML modelingizni online ishlab chiqarishga muvaffaqiyatli qo'yishga va uni nazorat qilib turishga katta yordam beradi va juda qulay.

Ushbu challenge-larni boshlang'ich bilimga ega yoki endi o'rganishni boshlagan ML engineerlari uchun juda foydali deb hisoblayman.

P.s: Aytgancha certificate berilar ekan. Portifolioingiz uchun kerak bo'ladi albatda ☺️

👉 @machine_learning_lab

​​Photoshop AI - yangi darajadagi Photoshop !!!

Photoshop AI - bu Adobe Photoshop-ning sun'iy intellektga asoslangan yangi xususiyati bo'lib, u sizni hayratda qoldiradigan, zavqlantiradigan haqiqiy natijalarga erishish uchun oddiy matnli ko'rsatmalardan foydalanib, soniyalar ichida, tasvirlaringizga buzilmaydigan tarzda kontent qo'shish, kengaytirish yoki o'chirish imkonini beradi.

Photoshop AI qanday ishlaydi?

Photoshop AI tasviringizni tahlil qilish va asl tasviringiz uslubi, istiqboli va yoritilishiga mos keladigan real kontent yaratish uchun Adobe Firefly AI mexanizmidan foydalanadi. Photoshop AI-ga rasmingizga nima qo'shish, kengaytirish yoki olib tashlashni xohlayotganingizni aytish uchun oddiy matnli ko'rsatmalardan foydalanishingiz mumkin. Masalan, siz "orqa fonga yelkanli qayiq qo'shing (add a sailboat to the background)" yoki "odamni oldingi plandan olib tashlang (remove the person from the foreground)" deb aytishingiz mumkin.

Photoshop AI-dan foydalanishning qanday afzalliklari bor?

Photoshop AI an'anaviy fotosuratlarni tahrirlash usullariga nisbatan bir qator afzalliklarni taklif etadi:

1. Tez va ishlatish uchun qulay. Siz qo'lda chizishingiz yoki bo'yashingiz shart emas, bir necha soniya ichida real kontent yaratishingiz mumkin.
2. Photoshop AI yordamida amalga oshirgan o'zgarishlar buzilmaydi, shuning uchun siz har doim asl tasviringizga qaytishingiz mumkin.
3. Photoshop AI tasvirlarning katta ma'lumotlar to'plamida o'qitilgan, shuning uchun u asl tasviringizning uslubi va istiqboliga mos keladigan real kontent yaratishi mumkin.

Photoshop AI bilan nima qilishingiz mumkinligiga ba'zi misollar:

1. Tasvirlaringizdan ob'ektlar qo'shish yoki olib tashlash amallarini bajarishingiz mumkin.
2. Tasvirlaringiz fonini o'zgartirishingiz mumkin.
3. Haqiqiy tekstura va naqshlar yaratishingiz mumkin.
4. Tasvirlaringizni retush qilishingiz mumkin.
5. Abstrakt san'at yaratishingiz mumkin.

Umuman olganda, Photoshop AI - bu qisqa vaqt ichida ajoyib tasvirlarni yaratishga yordam beradigan kuchli yangi vosita. Agar siz Adobe Photoshop obunachisi bo'lsangiz, uni sinab ko'rishingizni mumkin.

👉 @machine_learning_lab

3D-aware Conditional Image Synthesis (pix2pix3D)

Ushbu loyiha pix2pix Deep Learning model arxitekturasi asosiga qurilgan bo'lib, u 2 o'lchamli oddiy tasvirlarni qalub qiladi va unga mos 3 o'lchamli tasvirlarni hosil qilib beradi.

Yuqoridagi qisqa video orqali loyihaning maqsadini tushunib olishingiz mumkin.

👉 Github code 👈

👉 Maqola 👈

👉 Loyiha 👈


Ma'lumotlar to'plami:
CelebAMask , AFHQ-Cat-Seg , Shapenet-Car-Edge

👉 @machine_learning_lab

#foydali

Loyiha uchun talab qilinadigan kutubxonalar ro'yhatini hosil qilish.

Odatda deyarli barcha ML engineerlari ma'lum bir loyiha ustida ishlashni boshlasa o'sha loyiha uchun alohida virtual muhit yaratib ishni boshlaydilar. Kimdur conda kimdur vnev va hokozolardan foydalanishadi.

Loyiha davomida ko'plab kutubxonalar o'rnatiladi va loyihangiz to'g'ri ishlashi uchun bu kutubxonalarning versiyalari o'zaro bir biriga ta'sir qiladi. Shuning uchun har bir loyiha uchun alohida muhit yaratish eng aqilli yo'l.

Loyihani tugatib uni foydalanuvchiga berishdan oldin albatda loyiha xatosiz ishlashi uchun talab qilinadigan kutubxonalar ro'yhatini (requirements.txt) shakllantirishingiz kerak bo'ladi. Albatda loyiha davomida o'rnatgan barcha kutubxonalaringiz va ularni versiyalari esingizda qolishingiz amri mahol.

Bunda ushbu ro'yxanti shakllantirishning eng oson yo'li bu o'sha ishlash muhiningizda turib terminaldan quyidagi buyuruqni berishdir.

pip freeze > requirements.txt

Shunda sizda 'requirements.txt' nomli fayl hosil bo'ladi. U o'z ichida muhitga o'rnatilgan barcha kutubxonalar va ularni versiyalarini oladi.

Foydalanuvchi esa sizni loyihangizni olib, yangi muhitda osongina

pip install -r requirements.txt

buyurug'i orqali barcha talab etiladigan kutubxonalarni o'rnatib oladi. Keyin esa bemalol loyihangizdan foydalanishi mumkin 😎.

👉 @machine_learning_lab

Ajoyib tasvir yaratmoqchimisiz?

Artbreeder o'zining sun'iy intellektga asoslangan Mixer deb nomlangan loyihasini bepul ommaga foydalanishga topshirgan. Unda siz o'zingizni ijtimoiy tarmoqlaringiz uchun yoki shaxsiy brandingiz uchun turli xil ko'plab tasvirlar hosil qilishingiz mumkin.

Bu Mixer da bir necha rasmlar va textlar integratsiyasidan umumlashgan tasvir hosil qilishingiz mumkin.

Link: bu yerda

👉@machine_learning_lab

#loyiha #project

📑Portfolio uchun loyiha!

Loyiha nomi: Raqamlarni tanish.

Ushbu loyiha junior ML engineerlar uchun Deep Learning modellarini qanay qurish, uni ma'lumotlar to'plami bilan o'qitish va foydalanuvchilar uchun ishlab chiqarishga qo'yish haqida qisqacha ma'lumot berishni maqsad qilgan.

Loyihani mana buyerdan topishingiz mumkin.

Loyihada ishlatilgan dasturlash tillari: Python, JavaScript, CSS, HTML

Qanday loyihalarni amalga oshirishimizni xohlaysiz? 👇

👉 @machine_learning_lab

ML engineerlari va Data Science lar uchun ‘soqqali’ tanlov.

CrunchDAO $100 000 mukofot jamg'armasi bilan ADIA Laboratoriya bozorini bashorat qilish tanlovini e’lon qildi!

-Mukofot puli asosiy qismi eng yaxshi natija ko’rsatgan top 10 ishtirokchiga bo’lib beriladi. Bundan tashqari:

- Agar > 3,5 ball to'plagan bo'lsangiz, 128$ (40$Crunch).

- Agar > 4 ball toʻplasangiz, 320$ (100$Crunch).

Ushbu mukofotlar $Crunchda to'lanadi (istaganingizda uni USDC ga almashtirishingiz mumkin). Batafsil ma’lumotni havola orqali olishingiz mumkin!

Agar musobaqaga qatnashmoqchi bo’lsangiz ushbu havola orqali ro'yxatdan o’tishingiz mumkin.

https://crunchdao.com/live/adialab

Tanlovning vazifasi har bir sanada investitsiyalarni eng yaxshidan eng yomonigacha tartiblashdir. Musobaqa uchun reyting funksiyasi investitsiyalarning bashorat qilingan reytingi haqiqiy reytingga qanchalik mos kelishini o'lchaydigan Spearmanning daraja korrelyatsiyasiga asoslanadi.

P.s: Ikki yoki uch kishi jamoa bo’lib qatnashsangiz ham bo’ladi bir kishini nomidan. Mukofot pulini yutib olmagan taqdiringizda ham real hayotdagi loyihalar bilan ishlab malaka va bilm olganingiz qoladi!

👉 @machine_learning_lab

Qachonki Deep Learning modelim bilan tajriba qilganimda train set, validation set va test set larda bir xilda yuqori aniqlikdagi natija olganimda men 👆👆👆😂😂😂

👉 @machine_learning_lab

​​#Loyiha #smart_greenhouse

Ilmiy ish bo'yicha ekskursiya!

Kuni kecha Professorim bilan Janubiy Koreadagi eng katta Qishloq xo'jaligi bo'yicha ilmiy institut (National Institute of Agricultural Science) ga tashrif buyurdik.

Institut olimlari internet va sun'iy intelektga asoslanga kelajak issiqxonalari loyihasi ustida ish olib borishyapti ekan. Loyihani birinchi qismi 5 yillikga reja qilingan bugungi kunda yana 3 yil muddat bor.

Bizning labaratoriyamiz ham ushbu loyihada hamkorlikda ish olib bormoqda.
Tashrif maqsadi loyiha bilan yaqindan to'liqroq tanishish, qilingan ishlar hisobotini namoyish etish va mavjud muammolarni yechish rejasini tuzish bo'ldi.

Bu ilmiy institutga begonalar kirishi taqiqlanar ekan. Chet-elliklarni gapirmasa ham bo'ladi. Lekin Professorim bir narsa qilib yurib ko'ndirdi 😁. U yerdan ko'plab videolar va rasmlar olgan edim sizlar bilan ulashaman deb, lekin "chuchvarani xom sanagan" ekanman. Bu ma'lumotlarni ommaga chiqarish taqiqlangan ekan faqat ilmiy ishlanmalarda ishlatish mumkin ekan xolos.

Quyidagi rasm internetdan "uxlatildi" 😁

P.s: Aslida men qishloq xo'jaligi sohasidan "100 km" uzoqlikdaman. Agar bugungi kunda AI ni bilsangiz siz xohlagan sohangizga "burun suqsangiz" bo'ladi (ma'lum darajada) 😉.

👉 @machine_learning_lab

Fourier qonuni!

Ushbu olimning (Joseph Fourier) qonunini yaxshilab o'rganib qo'yishni tavsiya etaman!

Chunki bu qonun 'Image Processing' va 'Signal Processing' larda eng asosiy kalit qonun bo'lib hisoblanadi.

ML engineerlari ushbu qonundan ma'lumotlardan asosiy xususiyatlarni (Feature Extraction) ajratib olishda ko'p foydalanishadi.

👉 @machine_learning_lab

​​Bepul AI darslari!!!

OpenClassroom platformasi haqida eshitgan bo'lsangiz kerak. Bu platforma 500 dan ortiq ITga oid bepul 100% online darslarini o'rganuvchilarga taklif qiladi.

Ushbu darslar orasida AI ga oid talaygina kurslar ham bor. Siz bu kurslarni elektron pochtangiz orqali ro'yhatdan o'tib olishingiz mumkin. Kursni tamomlaganingizda esa platforma tomonidan sertifikat hma beriladi. Bu esa sizning portifolioingiz uchun foydali albatda. Sertifikat namunasi quyidagi rasmda keltirilgan.

Bu platformada nafaqt AI engineerlar uchun balki web developerlar, app developerlar, programmerlar va boshqalar uchun ham darslar mavjud.

Link: https://openclassrooms.com/en/courses

Yaqinlarga ushbu xabarni ulashib qo'yamiz. Zora kimningdur muofaqiyatiga sababchi bo'lib qolsak😊.

👉@machine_learning_lab