🌐👺🌐👺🌐👺🌐👺🌐

Как чекать сторисы в инсте через Python? Еще и анонимно. Еще и скачивать.

Еще и все это в тг боте! Чекаем!!

🤿🤿🤿🤿🤿🤿🤿🤿🤿

https://youtu.be/4XEFDqTrZqM

Обработка естественного языка с spaCy: анализ и генерация текста 📊

1. Анализ текста с помощью spaCy 🔍

1.1. Токенизация и лемматизация

SpaCy предоставляет эффективные инструменты для разбиения текста на токены и определения их базовых форм:

import spacy

nlp = spacy.load("ru_core_news_sm")
doc = nlp("Кошки любят спать на мягких подушках.")

for token in doc:
    print(f"{token.text} -> {token.lemma_}")

1.2. Определение частей речи

SpaCy автоматически определяет части речи для каждого токена:

for token in doc:
    print(f"{token.text} - {token.pos_}")

1.3. Распознавание именованных сущностей

Библиотека способна выделять в тексте именованные сущности, такие как имена, организации и локации:

for ent in doc.ents:
    print(f"{ent.text} - {ent.label_}")

2. Генерация текста с использованием spaCy 📝

Хотя spaCy в первую очередь предназначен для анализа текста, его можно использовать и для помощи в генерации:

2.1. Использование зависимостей для построения предложений

SpaCy определяет синтаксические зависимости между словами, что может быть использовано для создания новых предложений:

def generate_sentence(subject, verb, object):
    doc = nlp(f"{subject} {verb} {object}")
    return " ".join([token.text for token in doc])

print(generate_sentence("Программист", "пишет", "код"))

2.2. Использование векторных представлений слов

Векторные представления слов в spaCy могут быть использованы для поиска семантически близких слов:

def find_similar_word(word, n=3):
    token = nlp(word)[0]
    similar_words = []
    for lex in nlp.vocab:
        if lex.has_vector:
            if lex.is_lower == token.is_lower and lex.is_alpha:
                similarity = token.similarity(lex)
                similar_words.append((lex.text, similarity))
    return sorted(similar_words, key=lambda x: x[1], reverse=True)[:n]

print(find_similar_word("компьютер"))

🌍 Работа с геоданными: использование библиотеки GeoPandas


📊 Основные возможности GeoPandas

GeoPandas расширяет функциональность pandas, добавляя поддержку геометрических типов данных. Это позволяет эффективно работать с пространственными данными, выполнять геометрические операции и визуализировать результаты.

Ключевые особенности:

- Поддержка различных форматов геоданных (Shapefile, GeoJSON и др.)
- Геометрические операции (пересечение, объединение, буферизация)
- Пространственные соединения и агрегации
- Интеграция с matplotlib для визуализации

🔧 Установка и начало работы

Установка GeoPandas производится через pip:

pip install geopandas

После установки можно приступать к работе:

import geopandas as gpd

# Чтение геоданных
gdf = gpd.read_file('path/to/your/geodata.shp')

# Базовые операции
print(gdf.head())
print(gdf.crs)  # Система координат

🛠 Практические примеры использования

1. Визуализация данных

GeoPandas позволяет легко визуализировать геоданные:

import matplotlib.pyplot as plt

gdf.plot()
plt.title('Визуализация геоданных')
plt.show()

2. Пространственные операции

Выполнение геометрических операций, таких как буферизация:

buffered = gdf.geometry.buffer(1)  # Создание буфера в 1 единицу

3. Пространственные соединения

Объединение двух наборов геоданных на основе их пространственных отношений:

cities = gpd.read_file('cities.shp')
countries = gpd.read_file('countries.shp')

cities_with_countries = gpd.sjoin(cities, countries, how="inner", predicate="within")

📈 Преимущества использования GeoPandas

Использование GeoPandas предоставляет ряд преимуществ:

- Эффективная обработка больших объемов геоданных
- Интеграция с экосистемой Python для анализа данных
- Упрощение сложных геопространственных операций
- Возможность создания высококачественных картографических визуализаций

Источник: Python Hub - сборище Питонистов 👩‍💻

Python укрепляет лидерство в рейтинге TIOBE 🥇

Согласно последнему индексу TIOBE, Python продолжает укреплять свои позиции как самый популярный язык программирования. За месяц его доля выросла с 16,12% до 18,04%, что является значительным скачком.

Генеральный директор TIOBE Software Пол Янсен отмечает:

"Вероятно, Python станет самым популярным языком программирования в истории"

Ключевые моменты:

- Python опережает C++ на рекордные 8%
- Rust и Kotlin названы потенциальными конкурентами в будущем
- Kotlin поднялся с 27-го на 18-е место за год
- Go также набирает популярность

Стоит отметить, что TIOBE — не единственный источник данных о популярности языков. Например, по данным опроса Stack Overflow, расстановка сил немного отличается.

Статистика по другим яп читать тут

Источник: Python Hub - сборище Питонистов 👩‍💻

🖥 Программисту нужна поддержка? Как коту — клавиатура!

DevGurt — для тех, кто живет кодом и дышит переменными. 👩‍💻

Для питонистов есть свой отдельный уголок счастья — Python Hub. 👩‍💻

💬 В нашем чатике можно обсудить все — от лучших библиотек до выбора кофе для ночных релизов. А вдруг еще и работу найдешь.

📖 Лень читать тут? Забегай на devgurt.com, там уже есть статьи, которые помогут тебе победить любые баги. Кстати, авторы статей в скором времени смогут их монетизировать.

▶️ А если лень читать — открой YouTube и включи канал Shcoder. О сложных вещах простым языком.

😎 Кодь как боженька, присоединяйся!

👩‍💻 Лучшие пакеты PyPi !?

Решил повторно проверить, какие вообще самые популярные (по каким-то критериям, хз сам каким) библиотеки на PyPi

PyPI (Python Package Index) — это официальный репозиторий пакетов для языка программирования Python. Здесь собраны тысячи библиотек, модулей и приложений, которые могут быть полезны для разработчиков Python.

Перейти к стате

Для ленивых предлагаю скрин!


Источник: Python Hub - сборище Питонистов 👩‍💻

📕 Введение в множества Python

Множество в Python - это неупорядоченная коллекция уникальных элементов. Представьте себе мешок с разноцветными шариками, где каждый цвет встречается только один раз. Вот это и есть множество!

Создать множество очень просто:

colors = {"red", "blue", "green"}
print(colors)  # Вывод: {'blue', 'green', 'red'}

Заметили, что порядок элементов изменился? Это нормально для множеств - они не сохраняют порядок.

➡️Методы множеств

Теперь давайте рассмотрим самые полезные методы для работы с множествами.

➡️1. add() - Добавление элемента

Метод add() позволяет добавить новый элемент в множество. Если элемент уже существует, ничего не произойдет.

fruits = {"apple", "banana", "cherry"}
fruits.add("orange")
print(fruits)  # Вывод: {'apple', 'banana', 'cherry', 'orange'}
fruits.add("apple")  # Ничего не изменится
print(fruits)  # Вывод: {'apple', 'banana', 'cherry', 'orange'}

➡️ 2. remove() и discard() - Удаление элементов

Оба метода удаляют элемент из множества, но есть важное различие:

- remove() вызовет ошибку, если элемента нет в множестве
- discard() просто ничего не сделает, если элемента нет

numbers = {1, 2, 3, 4, 5}
numbers.remove(3)
print(numbers)  # Вывод: {1, 2, 4, 5}

numbers.discard(10)  # Ничего не произойдет
print(numbers)  # Вывод: {1, 2, 4, 5}

numbers.remove(10)  # Вызовет ошибку KeyError

➡️ 3. union() - Объединение множеств

Метод union() объединяет два или более множеств. Это как смешать шарики из разных мешков в один большой мешок!

set1 = {1, 2, 3}
set2 = {3, 4, 5}
set3 = set1.union(set2)
print(set3)  # Вывод: {1, 2, 3, 4, 5}

➡️ 4. intersection() - Пересечение множеств

Этот метод находит общие элементы между множествами. Представьте, что вы ищете друзей, которые любят и пиццу, и мороженое!

pizza_lovers = {"Алиса", "Боб", "Чарли", "Дэвид"}
ice_cream_lovers = {"Боб", "Чарли", "Ева", "Фрэнк"}
pizza_and_ice_cream = pizza_lovers.intersection(ice_cream_lovers)
print(pizza_and_ice_cream)  # Вывод: {'Боб', 'Чарли'}

➡️ 5. difference() - Разность множеств

Метод difference() возвращает элементы, которые есть в одном множестве, но отсутствуют в другом.

set1 = {1, 2, 3, 4, 5}
set2 = {4, 5, 6, 7, 8}
diff = set1.difference(set2)
print(diff)  # Вывод: {1, 2, 3}

➡️ 6. symmetric_difference() - Симметричная разность

Этот метод возвращает элементы, которые есть в одном из множеств, но не в обоих сразу. Это как найти уникальные предпочтения в группе друзей!

group1 = {"пицца", "бургер", "суши"}
group2 = {"суши", "рамен", "пицца"}
unique_preferences = group1.symmetric_difference(group2)
print(unique_preferences)  # Вывод: {'бургер', 'рамен'}

➡️ Заключение
Множества в Python - это невероятно полезный инструмент для работы с уникальными элементами и выполнения различных операций над наборами данных.


Источник: Python Hub - сборище Питонистов 👩‍💻

📕 Библиотека composio-core на Python: Инновационный Инструмент для Разработчиков


composio-core - это мощная библиотека для Python, предназначенная для упрощения процесса композиции и декомпозиции сложных объектов. Она предоставляет элегантный и интуитивно понятный API, который позволяет разработчикам легко создавать, модифицировать и анализировать сложные структуры данных.

➡️ Установка composio-core

Установить библиотеку composio-core очень просто. Вы можете использовать pip, стандартный менеджер пакетов Python. Вот команда для установки:

pip install composio-core

➡️ Основные возможности

- Гибкая система композиции объектов
- Мощные инструменты для декомпозиции и анализа
- Поддержка асинхронных операций
- Интеграция с популярными фреймворками
- Расширяемая архитектура плагинов

➡️ Пример использования

Давайте рассмотрим простой пример использования composio-core для создания и анализа сложного объекта:

from composio_core import Composer, Analyzer

# Создаем композицию
composer = Composer()
complex_object = composer.create({
    "name": "Проект X",
    "components": [
        {"type": "module", "name": "Auth", "version": "1.2.0"},
        {"type": "database", "name": "UserDB", "engine": "PostgreSQL"},
        {"type": "service", "name": "EmailNotifier", "protocol": "SMTP"}
    ]
})

# Анализируем созданный объект
analyzer = Analyzer()
analysis_result = analyzer.analyze(complex_object)

print(analysis_result.summary())
print(f"Количество компонентов: {analysis_result.component_count}")
print(f"Типы компонентов: {', '.join(analysis_result.component_types)}")

В этом примере мы создали сложный объект, представляющий структуру проекта, а затем проанализировали его с помощью инструментов composio-core.

➡️ Преимущества использования composio-core

➡️ 1. Повышение читаемости кода

Благодаря четкой структуре и интуитивно понятному API, код, использующий composio-core, становится более читаемым и понятным. Это особенно важно при работе в команде или при поддержке долгосрочных проектов.

➡️ 2. Ускорение разработки

Библиотека предоставляет множество готовых инструментов для работы со сложными структурами данных, что значительно ускоряет процесс разработки и уменьшает количество потенциальных ошибок.

➡️ 3. Гибкость и расширяемость

Архитектура composio-core позволяет легко расширять функциональность библиотеки с помощью плагинов, что делает ее идеальным выбором для проектов с уникальными требованиями.

➡️ Продвинутые возможности

Помимо базовой функциональности, composio-core предлагает ряд продвинутых возможностей:

### Асинхронная композиция

import asyncio
from composio_core import AsyncComposer

async def create_complex_object():
    composer = AsyncComposer()
    object = await composer.create_async({
        "name": "Async Project",
        "components": [
            {"type": "api", "name": "UserAPI", "version": "2.0.0"},
            {"type": "queue", "name": "TaskQueue", "technology": "RabbitMQ"}
        ]
    })
    return object

complex_object = asyncio.run(create_complex_object())
print(complex_object)

➡️ Интеграция с популярными фреймворками

composio-core легко интегрируется с популярными Python-фреймворками, такими как Django и Flask. Например, вот как можно использовать библиотеку в Django-проекте:

from django.views import View
from django.http import JsonResponse
from composio_core import Composer

class ProjectView(View):
    def post(self, request):
        composer = Composer()
        project = composer.create(request.POST)
        return JsonResponse({"project": project.to_dict()})

🔺 Заключение

Библиотека composio-core представляет собой мощный и гибкий инструмент для работы со сложными структурами данных в Python.

Независимо от того, разрабатываете ли вы веб-приложение, систему анализа данных или инструмент для машинного обучения, composio-core может значительно упростить процесс работы с комплексными объектами и структурами данных.

Источник: Python Hub - сборище Питонистов 👩‍💻

📕 Точность целых чисел в Python бесконечна

В Python целые числа имеют "бесконечную" точность. Это означает, что вы можете работать с целыми числами любого размера, не беспокоясь о переполнении.

Например, давайте возьмем число 2 и возведем его в степень 1000:

print(2**1000)

Результат:

10715086071862673209484250490600018105614048117055336074437503883703510511249361224931983788156958581275946729175531468251871452856923140435984577574698574803934567774824230985421074605062371141877954182153046474983581941267398767559165543946077062914571196477686542167660429831652624386837205668069376

Это число содержит 302 цифры!

В других языках программирования, таких как C или Java, вы бы столкнулись с ограничениями при работе с такими большими числами. Но в Python вы можете спокойно работать с числами практически любого размера.

Это очень удобно для таких областей, как криптография или научные вычисления, где часто требуется работа с очень большими числами.

Однако важно помнить, что хотя Python может обрабатывать такие большие числа, это может повлиять на производительность при выполнении операций с ними. Поэтому, если вам не нужна такая высокая точность, лучше использовать стандартные типы данных.

В целом, эта особенность Python делает его очень мощным инструментом для работы с целыми числами любого размера.


Источник: Python Hub - сборище Питонистов 👩‍💻

Решил добавить еще отдельный видос про Яндекс.👨‍💻🙃

Может кому-то будет полезно.

Гоу смотреть👀

https://youtu.be/hDd0p87VZOI

Python-библиотека `googlesearch`: Google-поиск прямо из питона 🐍

🔎 googlesearch — это простая в использовании библиотека для Python, которая позволяет отправлять запросы в Google и получать ссылки на результаты поиска прямо из вашего кода. Она предоставляет гибкий и мощный интерфейс, который можно настроить для различных задач поиска.

Основной функционал

Основной метод библиотеки — это функция search(), которая возвращает результаты поиска в виде генератора, содержащего объекты SearchResult или URL-ссылки в зависимости от параметров.

Аргументы функции:
- term — строка с запросом, которую вы хотите найти в Google.
- num_results — количество результатов, которые нужно вернуть (по умолчанию 10).
- lang — язык результатов поиска (по умолчанию "en").
- proxy — возможность использования прокси для запросов (по умолчанию None).
- advanced — расширенный режим поиска, возвращает объекты с более детализированной информацией, такими как заголовок и описание страницы (по умолчанию False).
- sleep_interval — время ожидания между запросами в секундах (по умолчанию 0).
- timeout — максимальное время ожидания ответа от Google (по умолчанию 5 секунд).
- safe — настройка безопасного поиска: "off" для отключения, "active" для фильтрации контента для взрослых (по умолчанию "active").
- ssl_verify — возможность включить или отключить проверку SSL-сертификатов (по умолчанию None).
- region — регион для таргетирования поиска (по умолчанию None).

💻 Примеры использования

Простой поиск:

from googlesearch import search

query = "Python best practices"
for result in search(query, num_results=5):
    print(result)

Этот код отправляет запрос "Python best practices" и возвращает первые пять ссылок на результаты поиска.

Расширенный поиск с дополнительными параметрами:

for result in search("новости технологий", num_results=3, lang='ru', safe='off', region='RU', advanced=True):
    print(result.title, result.url)

Поиск по русскоязычным ресурсам с отключенным безопасным поиском и указанием региона RU. В данном случае возвращаются не только ссылки, но и заголовки страниц.

🚀 В общем, googlesearch это это мощный инструмент, который позволяет интегрировать Google-поиск в Python-приложения, делая его отличным для автоматизации и поиска данных.

Лайк, репост, подписка, все по стандарту, помнишь, да?

📕 Как создать QR-генератор с помощью Flask и qrcode


➡️ Настройка четверга среды

Шаг 1: Настройка проекта

- Установите Python с официального сайта
- Создайте файлы: app.py templates/index.html`

Шаг 2: Установка библиотек

pip install qrcode Flask

➡️ Реализация

Шаг 3: Написание кода

Откройте файл app.py и добавьте следующий код:

import qrcode
from flask import Flask, request, render_template, send_file

app = Flask(__name__)

@app.route("/", methods=["GET", "POST"])
def generate_qr():
    if request.method == "POST":
        data = request.form["data"]
        qr_img = qrcode.make(data)
        
        qr_path = "static/qr_code.png"
        qr_img.save(qr_path)
        
        return send_file(qr_path, mimetype='image/png')
    
    return render_template("index.html")

if __name__ == "__main__":
    app.run(debug=True)

Теперь откройте файл templates/index.html и добавьте следующий HTML-код:

<!DOCTYPE html>
<html lang="ru">
<head>
    <meta charset="UTF-8">
    <title>QR-код генератор</title>
</head>
<body>
    <h1>QR-код генератор</h1>
    <form method="POST">
        <input type="text" name="data" placeholder="Введите текст или URL">
        <button type="submit">Сгенерировать QR-код</button>
    </form>
    {% if qr_code %}
    <img src="{{ qr_code }}" alt="QR-код">
    {% endif %}
</body>
</html>

➡️ Тестирование приложения

Запустите приложение командой:

python app.py

Откройте браузер и перейдите по адресу http://127.0.0.1:5000. Вы увидите форму для ввода текста или URL. После ввода данных и нажатия кнопки "Сгенерировать QR-код", вы получите изображение с QR-кодом.



Источник: Python Hub - сборище Питонистов 👩‍💻

📕 Веб-приложения: Что это такое и почему они важны

➡️ Что такое веб-приложение?

Веб-приложение - это программное обеспечение, которое работает в веб-браузере. Основные характеристики веб-приложений включают:

- Независимость от платформы
- Работа на любом устройстве, включая мобильные
- Зависимость от интернет-соединения (как минимум для начальной загрузки)
- Динамический контент с частыми обновлениями

➡️ Технологии, лежащие в основе веб-приложений

Веб-приложения создаются с использованием различных технологий:

- Фронтенд: HTML, CSS и JavaScript
- Бэкенд: Node.js, Python (с Django или Flask), Java и другие
- Базы данных: SQL и NoSQL варианты (например, MongoDB, PostgreSQL)

➡️ Примеры веб-приложений

Многие популярные сервисы, которые мы используем ежедневно, являются веб-приложениями:

- Gmail
- Google Документы
- Trello
- Slack
- Онлайн-банкинг

➡️ Безопасность в веб-приложениях

Веб-приложения имеют преимущество в виде встроенных функций безопасности, таких как HTTPS для шифрования передаваемых данных. Это освобождает разработчиков от необходимости создавать меры безопасности с нуля.

➡️ Время загрузки веб-приложений

Типичное время загрузки веб-приложений:

- Первая загрузка: около 7-8 секунд
- Последующие загрузки: около 1 секунды (благодаря кэшированию)

➡️ Гибридный подход

Многие компании используют гибридный подход:

- Веб-сайт для презентации и продажи идеи (оптимизирован для SEO)
- Веб-приложение для основного продукта (оптимизировано для удобства пользователей)

➡️ Почему веб-приложения важны?

Веб-приложения имеют ряд преимуществ, которые делают их важными в современном мире:

- Доступность с любого устройства с браузером
- Не требуют установки и обновления на устройстве пользователя
- Легко обновляются и поддерживаются разработчиками
- Обеспечивают единообразный пользовательский опыт на разных платформах


Источник: Python Hub - сборище Питонистов 👩‍💻