Парсинг динамических сайтов на Python. Интенсив по созданию парсера на Python

Главный методист технического направления Skillbox Михаил Овчинников провёл вебинар, посвящённый Selenium Python парсингу. Спикер научил пользователей получать данные через API, при этом не используя парсинг.

• Перейти к просмотру

🔗 Python tricks

Keras. Обучение сети распознаванию рукописных цифр. Нейросети на Python

Создаем полносвязную сеть в Keras для распознавания рукописных цифр из базы MNIST. Рассмотрим вопросы подготовки тестовой, обучающей и проверочной выборок.

• Перейти к просмотру

🔗 Python tricks

5 полезных библиотек Python

Популярность языка и его большое сообщество привело к тому, что сейчас для Python существует огромное число библиотек. К сожалению, большая часть этих библиотек была создана энтузиастами и больше не поддерживается. Давайте посмотрим на 5 хороших развивающихся библиотек, которые могут помочь при решении практических задач.

• Перейти к просмотру

🔗 Python tricks

PySpark: Выгрузка данных с помощью toPandas

Продолжаем делиться циклом статей, где автор рассказывает про применение PySpark для аналитиков. В этот раз ты узнаешь, как правильно использовать функцию toPandas для подсчета и выгрузки данных. Автор также демонстрирует, когда не стоит использовать toPandas и альтернативы.

• Перейти к просмотру

🔗 Python tricks

Bokeh

Bokeh - это библиотека визуализации данных. Она предоставляет высокоуровневый интерфейс для создания интерактивных графиков, диаграмм и визуализаций, которые могут быть отображены в веб-браузере.

- Bokeh позволяет очень быстро строить сложные статистические графики с помощью простых команд. Он поддерживает вывод HTML, блокнота или сервера.

- Визуализацию Bokeh можно интегрировать в приложения Flask и Django или визуализации, написанные в других библиотеках, таких как matplotlib, seaborn, ggplot.

🔗 Python tricks

Как выучить Python с нуля?

В этом видео автор подробно разбирает как выучить Python для начинающих и как эти знания применять на практике для web-разработки и data science.

• Перейти к просмотру

🔗 Python tricks

Поиск объектов на изображении.

Компьютерное зрение - удивительная область, которая позволяет компьютерам видеть и понимать мир через обработку изображений и видео.

• Перейти к просмотру

🔗 Python tricks

Python с нуля. Уроки программирования для начинающих безопасников

В этом видео мы разберёмся, зачем же современным специалистам по информационной безопасности нужно иметь представление о программировании на языке Python. Зачем же всё таки нужны нужны все эти условные операторы, интерпретаторы, коллекции, циклы.

• Перейти к просмотру

🔗 Python tricks

Парсинг Python на примере двух сайтов с криптовалютой

В данном видео мы рассмотрим парсинг Python (Web-Scraping) на примере двух сайтов с криптовалютой. На одном из сайтов данные подгружаются динамически, во время загрузки сайта. Мы научимся извлекать данные на подобных сайтах используя библиотеки requests, bs4.

• Перейти к просмотру

🔗 Python tricks

Курс по wxPython

wxPython - Одна из альтернатив Tkinter, которая поставляется вместе с Python. Реализована в виде модуля расширения Python. Обучающий курс по созданию программ на WxPython.

• Перейти к просмотру

🔗 Python tricks

Python 3 + C

Делимся статьей, где автор рассказывает про интеграцию методов из С в проекты, написанные на Python 3. Ты узнаешь, как это сделать. Также продемонстрировано, насколько эффективным является данное решение.

• Перейти к просмотру

🔗 Python tricks

Нейросети: Ускорение обучения

Продолжаем делиться циклом видео, где автор рассказывает про нейросети. В этот раз продемонстрированы способы ускорения работы градиентного спуска при обучении нейронных сетей. Также рассказано об инициализации начальных значений весовых коэффициентов и bias.

• Перейти к просмотру

🔗 Python tricks

Размещение Телеграм бота на сервере

Благодаря данной статье ты узнаешь, как развернуть телеграм бота на Python в облаке. В качестве облака используется облачный провайдер Amvera. Подойдет и любой другой провайдер с возможностью деплоя через push в GIT.

• Перейти к просмотру

🔗 Python tricks

Библиотеки Для Машинного Обучения: Scikit-learn, TensorFlow, Keras, PyTorch | В Чём Разница?

В этом видео мы поговорим о таких библиотеках машинного обучения, как PyTorch, Tensorflow, Scikit-learn и Keras. Посмотрим на что они способны, и в чём между ними разница.

• Перейти к просмотру

🔗 Python tricks

Scrapy

Scrapy - это фреймворк для извлечения данных из веб-сайтов. Он используется для автоматического сбора структурированных данных из веб-страниц, таких как цены товаров, информация о продуктах, контактные данные и многое другое.

Этот код создает веб-паука, который извлекает цены товаров с сайта example.com. Он использует CSS-селекторы для поиска элементов страницы, содержащих информацию о продуктах, и извлекает их название и цену

🔗 Python tricks

Мокинг внешних API

Интеграция со сторонним приложением — отличный способ расширить функциональность продукта. Однако это может вызвать определенные проблемы. Так как ты не владеешь внешней библиотекой, ты не можешь контролировать серверы, на которых она размещена, код, содержащий ее логику, или данные, которые передаются между ней и приложением. Делимся статьей, где автор рассказывает про мокинг внешних API.

• Перейти к просмотру

🔗 Python tricks

Удаляем файл из папки на компьютере

Для удаления файла из папки на ПК в Python можно использовать модуль os.

Здесь сначала мы импортируем модуль os. Затем указываем полный путь к удаляемому файлу в переменной file_path. С помощью функции os.path.exists() проверяем, существует ли файл по указанному пути.

Если файл существует, мы удаляем его с помощью функции os.remove(). В противном случае выводим информацию, что такой файл не найден.

🔗 Python tricks

Обратное распространение ошибки

В этом видео мы самостоятельно выведем все необходимые формулы для реализации алгоритма обучения нейронной сети с нуля. Для обучения нейросети можно использовать градиентный спуск, а для его работы нам потребуется градиент функции потерь по всем параметрам модели (весам нейросети).

• Перейти к просмотру

🔗 Python tricks

Shawarma as a service: как создать бота для заказа шавермы

В этой статье автор расскажет, как автоматизировал организацию шавадея написав бота, как Telegram вставлял палки в колеса, как он с этим боролся и что в итоге получилось. В конце вас ждет статистика, которая покажет вкусовые предпочтения разработчиков и «охваты» традиции.

• Перейти к просмотру

🔗 Python tricks

🐍 Как создавать веб-сокеты в Python

Мы научимся настраивать собственный веб-сокет на Python, используя WebSockets API, который делает возможным двусторонний интерактивный сеанс связи между клиентом и сервером. С веб-сокетами вы можете отправлять и получать сообщения в режиме отслеживания событий без необходимости все время запрашивать данные у сервера, что уменьшает накладные расходы и позволяет передавать данные с сервера и на сервер в режиме реального времени.

//Читать статью

🔗 Python tricks

🎬 Creating a Voxel Engine (like Minecraft) from Scratch in Python

Мы ждали и этот день настал! Майнкрафт на питоне 😎🔥

➖ https://www.youtube.com/watch?app=desktop&v=Ab8TOSFfNp4&feature=youtu.be

🔗 Python tricks