Почему Get-Content тормозит?

📖 Вы читаете лог-файл в 10 ГБ через Get-Content, а PowerShell зависает на час. В чём проблема?

Get-Content загружает весь файл в память перед обработкой. Для больших файлов — это убийственно.

🛠 Решение:

# Медленно:  
$lines = Get-Content "huge.log"  # Тормозит и жрёт память  

# Быстро (чтение построчно):  
$reader = [System.IO.StreamReader]::new("huge.log")  
while ($line = $reader.ReadLine()) {  
    # Обрабатываем $line здесь  
}  
$reader.Close()  

❓Почему это лучше:
- StreamReader читает файл потоково, без загрузки в память.
- Подходит для гигабайтных логов.

А как вы обрабатываете огромные файлы? Делитесь лайфхаками!

Get-Content для больших файлов — как пытаться выпить океан через трубочку.

🌐 @automate_today | #powershell

Почему sleep(1) в скриптах — признак лени?

Вы добавили sleep 5 в скрипт, чтобы «подождать завершения процесса». Но мир знает лучшие способы!

Проблемы sleep:
- Точное время ожидания неизвестно (может быть 1 сек, а может и 10).
- Блокирует выполнение скрипта впустую.

Альтернативы:

# Вместо sleep:  
until ps aux | grep -q "[p]rocess_name"; do sleep 0.5; done  # Ждём завершения  

# Или в Python:  
from watchdog.observers import Observer  # Реагировать на изменения файлов  

❓Когда sleep допустим:
- Только для демо-кода или тестов.
- Если альтернатив действительно нет (но это редкость).

Как вы организуете ожидание в скриптах?

🌐 @automate_today | #bash

Скрипт для автоматического удаления неиспользуемых импортов

В Python-проекте накопились import os, sys, re, pandas, numpy, tensorflow, хотя используется только os. Пора навести порядок!

Решение:

# Удаляем неиспользуемые импорты:  
pip install autoflake  
autoflake --remove-all-unused-imports -r --in-place ./  

# Сортируем оставшиеся (опционально):  
pip install isort  
isort .  

❓Почему это важно:
- Чистый код = меньше багов.
- Меньше зависимостей = быстрее установка.

Какие инструменты для чистки кода используете вы?

Неиспользуемые импорты — как носки, которые ты давно не носил, но всё ещё хранишь.

🌐 @automate_today | #bash

Как заставить PowerShell приносить тебе кофе? Ну почти…

🛠 PowerShell может автоматизировать что угодно — даже отправлять сообщения в Telegram или включать умный чайник.

Пример:

# Отправляем уведомление (через Telegram Bot API):  
$token = "YOUR_BOT_TOKEN"  
$chat_id = "YOUR_CHAT_ID"  
$message = "Кофе готов! 🚀"  
Invoke-RestMethod -Uri "https://api.telegram.org/bot$token/sendMessage?chat_id=$chat_id&text=$message"  

💡Идеи для автоматизации:
- Скрипт, который пишет вам, когда заканчивается CI/CD-пайплайн.
- Уведомление, если сервер падает.

Что бы вы автоматизировали в повседневной жизни?

🌐 @automate_today | #powershell

Эта Bash-команда спасла мне пятницу. Делюсь!

🕓 Иногда одна команда экономит часы ручной работы.

🛟 Спасительная команда:

# Найти все дубликаты файлов по хешу:  
find . -type f -exec md5sum {} + | sort | uniq -w32 -dD  

❓Как это работает:
1. find ищет все файлы.
2. md5sum считает хеш.
3. uniq -dD показывает только дубликаты.

А какие команды вас выручали?

Как отличить senior от junior? Junior удаляет дубликаты вручную.

🌐 @automate_today | #bash

Почему ваш Python-скрипт работает медленно? Возможно, вы делаете эти 3 ошибки.

Скрипт должен отрабатывать за секунду, но работает минуту. В чём дело?

Типичные ошибки:
1. Использование for вместо map/list comprehensions:

   # Медленно:  
   result = []  
   for x in range(10_000):  
       result.append(x * 2)  

   # Быстрее:  
   result = [x * 2 for x in range(10_000)]  
   

2. Чтение файла построчно без буферизации:

   # Медленно:  
   with open("file.txt") as f:  
       for line in f:  
           process(line)  

   # Быстрее (если файл помещается в память):  
   with open("file.txt") as f:  
       lines = f.readlines()  # Чтение за один вызов  
   

3. Использование global в циклах:

   # Медленно:  
   global_var = 0  
   def update():  
       global global_var  
       global_var += 1  

   # Лучше: передавать переменную как аргумент.  
   

Какие ещё узкие места в Python вы знаете?

🌐 @automate_today | #python

Ansible: как не сломать все сервера разом

🛠 Ansible — мощный инструмент, но одна ошибка в плейбуке может привести к массовому апокалипсису.

❓Как избежать катастроф:
1. Всегда использовать --check перед запуском:

   ansible-playbook playbook.yml --check --diff

2. Ограничивать выполнение конкретными хостами:

   ansible-playbook playbook.yml --limit "web-servers"

3. Не использовать shell или command без changed_when:

   - name: "Опасная команда"  
     command: rm -rf /tmp/*  
     changed_when: false  # Иначе Ansible будет считать задачу «изменившей» систему

Какие best practices по Ansible используете вы?

Запускать Ansible без --check — это как играть в рулетку со всеми серверами сразу.

🌐 @automate_today | #bash

subprocess.​run() vs os.system(): битва на миллион долларов

os.system("ping " + user_input) — звучит невинно, пока в user_input не окажется ; rm -rf /.

Чем плох os.system?
- Не контролирует аргументы (уязвимость к shell-инъекциям).
- Возвращает только код выхода (а stdout/stderr — в никуда).

Как правильно?

import subprocess

# Безопасно, даже если user_input = "8.8.8.8; rm -rf /"
result = subprocess.run(["ping", "-c", "4", user_input], capture_output=True, text=True)
print(result.stdout)

Почему это важно?
- Аргументы передаются списком — шелл их не интерпретирует.
- Можно ловить вывод, проверять коды ошибок.

subprocess — это как шелл, но с seatbelt.

👉 Вы тоже когда-то использовали os.system?

🌐 @automate_today | #python

Почему dict.get() — это не всегда хорошо?

dict.get(key, default) — классика, но…

Проблема 1: Если default — тяжёлый объект (например, запрос в БД), он создаётся даже когда ключ есть!

# Плохо: get_user() вызовется в любом случае
value = my_dict.get(key, get_user())  

Решение: defaultdict или try/except

from collections import defaultdict

d = defaultdict(get_user)  # get_user() только если ключа нет
value = d[key]

Проблема 2: get() маскирует ошибки. Если ключ должен быть, лучше явное KeyError:

try:
    value = my_dict[key]  # Чётко видно проблему
except KeyError:
    logger.error("Ключ отсутствует!")  

👉 Какой подход используете вы?

🌐 @automate_today | #python

Почему __init__.py — это не просто пустой файл?

Раньше __init__.py был маркером «тут есть Python-модуль». Но сейчас он может:

1. Контролировать импорты

# __init__.py
from .utils import clean_data  # Импорт при загрузке пакета
__all__ = ["clean_data"]      # Что будет доступно при from package import *

2. Хранить общий код (инициализация БД, кэширование).

3. Ленивая загрузка (ускорение старта):

def expensive_function():
    from .heavy_module import stuff  # Импорт только при вызове

👉 А вы используете all или просто кидаете всё в __init__.py?

🌐 @automate_today | #python

Скрипт для автоматического рестарта зависших процессов

psutil + Telegram-бот = спасённые выходные

import psutil
import requests

def check_process(process_name):
    for proc in psutil.process_iter(['name']):
        if proc.info['name'] == process_name and proc.status() == 'zombie':
            proc.kill()
            requests.post(TELEGRAM_API, json={"text": f"Убил {process_name}!"})

# Запускаем каждые 5 минут (cron или systemd)

Фишки:
- psutil — кросс-платформенный (работает и на Linux, и на Windows).
- Можно добавить логику «если процесс грузит CPU > 90%».

👉 Как вы мониторите процессы?

🌐 @automate_today | #python

Автоматизация Excel без макросов

ImportExcel — модуль, который меняет всё

# Установка: Install-Module ImportExcel -Force
$data = Get-Process | Select Name, CPU
$data | Export-Excel -Path "report.xlsx" -AutoSize -TableName "Processes"

➕ Плюсы:
- Не требует Excel на сервере.
- Поддержка стилей, графиков и даже PivotTables!

👉 Кто ещё ненавидит VBA?

🌐 @automate_today | #powershell

Почему -ErrorAction SilentlyContinue — это зло?

-ErrorAction SilentlyContinue — это как заглушить Check Engine в машине и надеяться, что всё ок. 🚗💥

🚨 Проблемы:
- Ошибки пропадают, а скрипт продолжает работать с битыми данными.
- Невозможно отладить, потому что вы даже не знаете, что что-то сломалось.

Что делать вместо этого?

# Вариант 1: Ловить ошибки и логировать
try {
    Get-Item "C:\NonExistentFile.txt" -ErrorAction Stop
} catch {
    Write-Warning "Файл не найден: $_"
    # Или отправить в Telegram/Slack
}

# Вариант 2: Проверять результат
$file = Get-Item "C:\NonExistentFile.txt" -ErrorAction SilentlyContinue
if (-not $file) {
    Write-Warning "Файл не найден, но мы это обработали!"
}

❓Когда можно использовать SilentlyContinue?

Только если ошибка ожидаема и не критична (например, проверка, существует ли файл перед удалением).

👉 Вы тоже когда-то глушили ошибки, а потом час искали баг? Поделитесь в коментариях!

🌐 @automate_today | #powershell

Как автоматизировать IIS?

WebAdministration модуль — ваш друг

Хотите управлять сайтами, пулами приложений или настройками SSL без ручного кликания? PowerShell спешит на помощь!

Примеры:

# Получить список всех сайтов
Get-Website | Select Name, State

# Перезапустить пул приложений
Restart-WebAppPool -Name "MyAppPool"

# Создать новый сайт
New-Website -Name "TestSite" -Port 8080 -PhysicalPath "C:\sites\test"

Плюсы:
- Можно полностью автоматизировать развёртывание.
- Интеграция с Ansible/Terraform (через PowerShell-провижнры).

👉 Кто ещё ненавидит IIS Manager? Дайте знать!

🌐 @automate_today | #powershell

Почему curl | bash — это опасно?

curl http://example.com/install.sh | bash — это как есть суши, которые вам подали в тёмном переулке. 🍣🔪

❓Чем плохо?
- Нет проверки целостности (скрипт мог подмениться).
- Запускается сразу, без возможности посмотреть код.

Как правильно?

# 1. Скачать, проверить, потом запустить
curl -O https://example.com/install.sh
less install.sh  # Посмотреть код
chmod +x install.sh
./install.sh

# 2. Проверить хэш (если автор его предоставляет)
echo "ожидаемый_sha256sum  install.sh" | sha256sum --check

❗️Если скрипт требует sudo — внимательно читайте, что он делает!

👉 Вы когда-нибудь запускали curl | bash и потом жалели?

🌐 @automate_today | #bash

Скрипт для мониторинга нагрузки на сервер

top, vmstat, iostat — автоматизируем это!

#!/bin/bash
LOG_FILE="/var/log/server_monitor.log"

echo "=== $(date) ===" >> $LOG_FILE
echo "--- Top 5 процессов по CPU ---" >> $LOG_FILE
top -b -n 1 | head -12 | tail -5 >> $LOG_FILE

echo "--- Память ---" >> $LOG_FILE
vmstat -s >> $LOG_FILE

echo "--- Диски ---" >> $LOG_FILE
iostat -dx >> $LOG_FILE

❓Как использовать?
- Добавить в cron (например, каждые 5 минут).
- Отправлять логи в Telegram/Grafana.

👉 Как вы мониторите сервера? Пишите в комментах!

🌐 @automate_today | #bash

Почему awk — это must-have?

awk — это как нож швейцарской армии для текста. Вот где он сияет:

1. Фильтрация строк по условию

# Вывести только 404 ошибки из лога
awk '$9 == 404 {print $0}' access.log

2. Суммирование значений

# Сумма байт, переданных сервером
awk '{sum += $10} END {print sum}' access.log

3. Разбор CSV/TSV

awk -F',' '{print $1, $3}' data.csv  # Разделитель — запятая

👉 Кто ещё помнит, что awk — это язык, а не просто команда?

🌐 @automate_today | #bash

asyncio — магия или боль?

⚙️ asyncio в Python — это мощный инструмент для асинхронного программирования, но он может сломать мозг, если подойти без подготовки. Потоки — это сложно, asyncio — сложно вдвойне, но когда оно работает, это выглядит как чистая магия.

Пример простого HTTP-запроса:

import asyncio
import aiohttp

async def fetch(url):
    async with aiohttp.ClientSession() as session:
        async with session.get(url) as response:
            return await response.text()

async def main():
    html = await fetch("https://example.com")
    print(html[:100])  # первые 100 символов

asyncio.run(main())

❓Почему это важно?
- Экономит время при множестве I/O операций (запросы, файлы, БД).
- Но… если накосячить с await, скрипт может висеть вечность.

Какой ваш самый болезненный опыт с asyncio? Делитесь в комментах — вместе разберёмся!

Если asyncio — магия, то async/await — это заклинания, которые иногда взрываются в руках

🌐 @automate_today | #python

Как автоматизировать отправку email с вложениями?

Если вы копируете файлы в Outlook или отправляете письма через веб-интерфейс, но хотите упростить данные действия - этот код для вас.

Python + smtplib (просто и мощно)

import smtplib
from email.mime.multipart import MIMEMultipart
from email.mime.text import MIMEText
from email.mime.application import MIMEApplication

def send_email(subject, body, to, file_path):
    msg = MIMEMultipart()
    msg['Subject'] = subject
    msg['From'] = 'your_email@gmail.com'
    msg['To'] = to

    msg.attach(MIMEText(body, 'plain'))

    with open(file_path, 'rb') as f:
        part = MIMEApplication(f.read(), Name=file_path.split('/')[-1])
        part['Content-Disposition'] = f'attachment; filename="{file_path.split("/")[-1]}"'
        msg.attach(part)

    with smtplib.SMTP('smtp.gmail.com', 587) as server:
        server.starttls()
        server.login('your_email@gmail.com', 'your_password')
        server.send_message(msg)

send_email("Отчёт за июль", "Вот файл!", "boss@company.com", "report.pdf")

❗️Важно:
- Для Gmail нужен App Password, если включена 2FA.
- Не храните пароли в коде! Используйте переменные окружения (os.getenv).

Как вы отправляете письма в автоматическом режиме? SMTP, API, или что-то ещё?

Если письмо не отправляется, проверьте, не блокирует ли его антиспам. Или, может, вы забыли starttls()?

🌐 @automate_today | #python

Как написать бота для Telegram за 15 минут?

Telegram-боты — это не только для спама и мемов. С их помощью можно делать уведомления, автоматизировать задачи и даже управлять сервером.

Код на Python + python-telegram-bot:

from telegram import Update
from telegram.ext import Updater, CommandHandler, MessageHandler, Filters

def start(update: Update, context):
    update.message.reply_text("Привет! Я бот. Напиши /help для списка команд.")

def echo(update: Update, context):
    update.message.reply_text(f"Ты написал: {update.message.text}")

updater = Updater("YOUR_TOKEN")  # Получите у @BotFather
updater.dispatcher.add_handler(CommandHandler("start", start))
updater.dispatcher.add_handler(MessageHandler(Filters.text & ~Filters.command, echo))

updater.start_polling()
updater.idle()

❓Как это работает?
1. Получаете токен у @BotFather.
2. Запускаете скрипт.
3. Бот отвечает на сообщения и команды.

💡Идеи для улучшения:
- Добавить команду /status для проверки сервера.
- Прикрутить базу данных для хранения запросов.

Какой функционал вам хотелось бы видеть в боте? Делитесь идеями!

Если бот внезапно замолчал, проверьте, не упал ли скрипт. Или, может, вы превысили лимит запросов?

🌐 @automate_today | #python