Model-Based Reinforcement Learning: From Data to Continuous Actions with a Python-based Toolbox
Milad Farsi
2023

Обучение с подкреплением является одной из основных парадигм машинного обучения (ML), в которой интеллектуальный агент выполняет действия, обеспечивающие оптимальное поведение устройств. Хотя эта парадигма машинного обучения приобрела огромный успех и популярность в последние годы, предыдущие исследования были сосредоточены либо на теории - оптимальном управлении и динамическом программировании - либо на алгоритмах, большинство из которых основаны на моделировании.

🤓СКАЧАТЬ КНИГУ

#python #machinelearning #eng

Масштабируемый Production-Ready Telegram бот на Python

Масштабируемый значит, что бот сможет обрабатывать как одного пользователя, так и 300 000 юзверей. Production-Ready значит, что его можно заливать на прод.

Автор создал такого бота использую Django, Celery и python-telegram-bot. Всё выложил на Dokku (альтернатива Heroku).

Перейти к чтению

#статья

Литералы

Чтобы указать, что функция может принимать заранее известные значения ("left", "center", "right"), используется тип Literal.

Его можно заметить в open(). Функция принимает 'r', 'rb', 'w', но если передать 'kwargs', IDE выдаст предупреждение.

Literal можно вкладывать друг в друга: Literal['a', Literal['b']]. Это удобно для связывания нескольких литералов.

📌 PEP 586

#теория

Что такое PEP

Python Enhancement Proposals (PEP) — Предложения по улучшению Python. Здесь описываются все нововведения в Python.

Основной — PEP 0, здесь хранятся ссылки на все предложения. Вас может заинтересовать with, __getattr__ у модулей, ленивые импорты (реализованы в Python 3.12).

P.S. Здесь я беру темы для постов :)

#теория

types.MappingProxyType

Доступный только для чтения словарь. По своей сути — Read-only обёртка для словаря. Данные считывать можно, а менять — нельзя.

#теория

from enum import Enum

Библиотека для создания именованных перечислений. Признайте, что намного проще понять STATUS_CODE.ACCEPTED, чем просто 202.

Несмотря на свою простоту, у модуля огромный функционал. Если у вас в коде есть магические числа (1, 2, 3, 4), то воспользуйтесь enum.

📌 Документация

#теория

Переменная __path__

У каждого пакета есть переменная __path__ в которой он ищет нужные модули. Переменную можно использовать для подмены методов или во время поиска ошибок.

Изменять переменную вручную — плохая идея, лучше таким не заниматься.

#теория

Шпаргалка по Django

Будет полезна тем, кто желает освоить веб-разработку на Python. Здесь вы найдёте базовую информацию по работе с фреймворком — от его установки и до операций с Git.

https://cheatography.com/sebtoga/cheat-sheets/django/

#Шпаргалка

Пакет

Это набор модулей (исходных файлов Python), которые предоставляют определенный набор функций или возможностей.

С Python 3.6 это любая папка с .py файлами. Но вообще считается хорошим тоном создавать в пакетах файл __init__.py.

Файл __init__.py вызывается когда модуль импортируется.

#теория

importlib

Библиотека появилась в Python 3.1 и реализует функцию __import__(). importlib применяется не так часто и нужен только при работе с модулями.

#теория

math.tau

Это значение 2 * pi (2π). Его добавили, поскольку отношение длины окружности к ее радиусу является гораздо более фундаментальным и интересным, чем отношение между ее окружностью и диаметром (скопировано из PEP).

#теория

 typing import TypedDict

Класс позволяет задать подсказки для словаря. Таким образом мы получаем предупреждения, если словарь не соответствует структуре и подсказки для ключей.

📌 PEP 589

#теория

from __future__ import barry_as_FLUFL

Пасхальное яйцо, которое работает только в интерактивной оболочке. Оно появилось, когда Guido, спустя 20 лет работы над языком, ушёл в отставку.

Дядя Барри, преемник Гвидо, как новый руководитель решил внести ряд изменений, одним из которых было использование «алмазного оператор» (<>)

PEP 401

#объяснение

Несколько слов про ChatGPT

Это нейросеть от Илона Маска, способная генерировать текст, отвечать на вопросы, искать баги в коде, пикапить девочек в Tinder и решать домашку.

Мне нравится ИИ, ведь теперь посты будет писать она поскольку она показывает уровень развития человека. А ещё мотивирует учиться, так как сейчас робот спокойно заменит джуна.

Посмотрите на фото, так пишут юные Senior'ы

#оффтоп

💾 Карманные шпаргалки в PDF по скрапингу/парсингу данных

🌵 Selenium
🌵 BeautifulSoup
🌵 Scrapy

🟢 Скачать шпаргалки

#doc #cheatsheet #python

from functools import lru_cache

Декоратор сохраняет результат работы функции и входные данные. Если функция вызывается ещё раз с такими же параметрами, lru_cache возвращает результат предыдущей работы.

Это полезно в работе с «чистыми» функциями, у которых результат зависит только от входных данных. Так можно не просчитывать ресурсоёмкие команды, а сохранить их и возвращать.

📌 Документация

#объяснение

🔥 Полезные библиотеки Python

Cloudmare - простой инструмент для деанона IP адресов серверов веб-сайтов, защищенных Cloudflare, Sucuri или Incapsula с неправильной настройкой DNS.

Установка:

 git clone https://github.com/MrH0wl/Cloudmare.git
$ cd Cloudmare
$ python Cloudmare.py -h or python Cloudmare.py -hh

Использование:

 python Cloudmare.py -u target.site --bruter -sC -sSh -sSt --host verified.site

⚙️ GitHub/Инструкция

#python #soft #github

🍔 Разработчики нейронных сетей компания OpenAI выкатила новое детище, нейросеть которая решает любую задачу за несколько секунд и выдаёт подробный ответ