Ansible: как не сломать все сервера разом

🛠 Ansible — мощный инструмент, но одна ошибка в плейбуке может привести к массовому апокалипсису.

❓Как избежать катастроф:
1. Всегда использовать --check перед запуском:

   ansible-playbook playbook.yml --check --diff

2. Ограничивать выполнение конкретными хостами:

   ansible-playbook playbook.yml --limit "web-servers"

3. Не использовать shell или command без changed_when:

   - name: "Опасная команда"  
     command: rm -rf /tmp/*  
     changed_when: false  # Иначе Ansible будет считать задачу «изменившей» систему

Какие best practices по Ansible используете вы?

Запускать Ansible без --check — это как играть в рулетку со всеми серверами сразу.

🌐 @automate_today | #bash

subprocess.​run() vs os.system(): битва на миллион долларов

os.system("ping " + user_input) — звучит невинно, пока в user_input не окажется ; rm -rf /.

Чем плох os.system?
- Не контролирует аргументы (уязвимость к shell-инъекциям).
- Возвращает только код выхода (а stdout/stderr — в никуда).

Как правильно?

import subprocess

# Безопасно, даже если user_input = "8.8.8.8; rm -rf /"
result = subprocess.run(["ping", "-c", "4", user_input], capture_output=True, text=True)
print(result.stdout)

Почему это важно?
- Аргументы передаются списком — шелл их не интерпретирует.
- Можно ловить вывод, проверять коды ошибок.

subprocess — это как шелл, но с seatbelt.

👉 Вы тоже когда-то использовали os.system?

🌐 @automate_today | #python

Почему dict.get() — это не всегда хорошо?

dict.get(key, default) — классика, но…

Проблема 1: Если default — тяжёлый объект (например, запрос в БД), он создаётся даже когда ключ есть!

# Плохо: get_user() вызовется в любом случае
value = my_dict.get(key, get_user())  

Решение: defaultdict или try/except

from collections import defaultdict

d = defaultdict(get_user)  # get_user() только если ключа нет
value = d[key]

Проблема 2: get() маскирует ошибки. Если ключ должен быть, лучше явное KeyError:

try:
    value = my_dict[key]  # Чётко видно проблему
except KeyError:
    logger.error("Ключ отсутствует!")  

👉 Какой подход используете вы?

🌐 @automate_today | #python

Почему __init__.py — это не просто пустой файл?

Раньше __init__.py был маркером «тут есть Python-модуль». Но сейчас он может:

1. Контролировать импорты

# __init__.py
from .utils import clean_data  # Импорт при загрузке пакета
__all__ = ["clean_data"]      # Что будет доступно при from package import *

2. Хранить общий код (инициализация БД, кэширование).

3. Ленивая загрузка (ускорение старта):

def expensive_function():
    from .heavy_module import stuff  # Импорт только при вызове

👉 А вы используете all или просто кидаете всё в __init__.py?

🌐 @automate_today | #python

Скрипт для автоматического рестарта зависших процессов

psutil + Telegram-бот = спасённые выходные

import psutil
import requests

def check_process(process_name):
    for proc in psutil.process_iter(['name']):
        if proc.info['name'] == process_name and proc.status() == 'zombie':
            proc.kill()
            requests.post(TELEGRAM_API, json={"text": f"Убил {process_name}!"})

# Запускаем каждые 5 минут (cron или systemd)

Фишки:
- psutil — кросс-платформенный (работает и на Linux, и на Windows).
- Можно добавить логику «если процесс грузит CPU > 90%».

👉 Как вы мониторите процессы?

🌐 @automate_today | #python

Автоматизация Excel без макросов

ImportExcel — модуль, который меняет всё

# Установка: Install-Module ImportExcel -Force
$data = Get-Process | Select Name, CPU
$data | Export-Excel -Path "report.xlsx" -AutoSize -TableName "Processes"

➕ Плюсы:
- Не требует Excel на сервере.
- Поддержка стилей, графиков и даже PivotTables!

👉 Кто ещё ненавидит VBA?

🌐 @automate_today | #powershell

Почему -ErrorAction SilentlyContinue — это зло?

-ErrorAction SilentlyContinue — это как заглушить Check Engine в машине и надеяться, что всё ок. 🚗💥

🚨 Проблемы:
- Ошибки пропадают, а скрипт продолжает работать с битыми данными.
- Невозможно отладить, потому что вы даже не знаете, что что-то сломалось.

Что делать вместо этого?

# Вариант 1: Ловить ошибки и логировать
try {
    Get-Item "C:\NonExistentFile.txt" -ErrorAction Stop
} catch {
    Write-Warning "Файл не найден: $_"
    # Или отправить в Telegram/Slack
}

# Вариант 2: Проверять результат
$file = Get-Item "C:\NonExistentFile.txt" -ErrorAction SilentlyContinue
if (-not $file) {
    Write-Warning "Файл не найден, но мы это обработали!"
}

❓Когда можно использовать SilentlyContinue?

Только если ошибка ожидаема и не критична (например, проверка, существует ли файл перед удалением).

👉 Вы тоже когда-то глушили ошибки, а потом час искали баг? Поделитесь в коментариях!

🌐 @automate_today | #powershell

Как автоматизировать IIS?

WebAdministration модуль — ваш друг

Хотите управлять сайтами, пулами приложений или настройками SSL без ручного кликания? PowerShell спешит на помощь!

Примеры:

# Получить список всех сайтов
Get-Website | Select Name, State

# Перезапустить пул приложений
Restart-WebAppPool -Name "MyAppPool"

# Создать новый сайт
New-Website -Name "TestSite" -Port 8080 -PhysicalPath "C:\sites\test"

Плюсы:
- Можно полностью автоматизировать развёртывание.
- Интеграция с Ansible/Terraform (через PowerShell-провижнры).

👉 Кто ещё ненавидит IIS Manager? Дайте знать!

🌐 @automate_today | #powershell

Почему curl | bash — это опасно?

curl http://example.com/install.sh | bash — это как есть суши, которые вам подали в тёмном переулке. 🍣🔪

❓Чем плохо?
- Нет проверки целостности (скрипт мог подмениться).
- Запускается сразу, без возможности посмотреть код.

Как правильно?

# 1. Скачать, проверить, потом запустить
curl -O https://example.com/install.sh
less install.sh  # Посмотреть код
chmod +x install.sh
./install.sh

# 2. Проверить хэш (если автор его предоставляет)
echo "ожидаемый_sha256sum  install.sh" | sha256sum --check

❗️Если скрипт требует sudo — внимательно читайте, что он делает!

👉 Вы когда-нибудь запускали curl | bash и потом жалели?

🌐 @automate_today | #bash

Скрипт для мониторинга нагрузки на сервер

top, vmstat, iostat — автоматизируем это!

#!/bin/bash
LOG_FILE="/var/log/server_monitor.log"

echo "=== $(date) ===" >> $LOG_FILE
echo "--- Top 5 процессов по CPU ---" >> $LOG_FILE
top -b -n 1 | head -12 | tail -5 >> $LOG_FILE

echo "--- Память ---" >> $LOG_FILE
vmstat -s >> $LOG_FILE

echo "--- Диски ---" >> $LOG_FILE
iostat -dx >> $LOG_FILE

❓Как использовать?
- Добавить в cron (например, каждые 5 минут).
- Отправлять логи в Telegram/Grafana.

👉 Как вы мониторите сервера? Пишите в комментах!

🌐 @automate_today | #bash

Почему awk — это must-have?

awk — это как нож швейцарской армии для текста. Вот где он сияет:

1. Фильтрация строк по условию

# Вывести только 404 ошибки из лога
awk '$9 == 404 {print $0}' access.log

2. Суммирование значений

# Сумма байт, переданных сервером
awk '{sum += $10} END {print sum}' access.log

3. Разбор CSV/TSV

awk -F',' '{print $1, $3}' data.csv  # Разделитель — запятая

👉 Кто ещё помнит, что awk — это язык, а не просто команда?

🌐 @automate_today | #bash

asyncio — магия или боль?

⚙️ asyncio в Python — это мощный инструмент для асинхронного программирования, но он может сломать мозг, если подойти без подготовки. Потоки — это сложно, asyncio — сложно вдвойне, но когда оно работает, это выглядит как чистая магия.

Пример простого HTTP-запроса:

import asyncio
import aiohttp

async def fetch(url):
    async with aiohttp.ClientSession() as session:
        async with session.get(url) as response:
            return await response.text()

async def main():
    html = await fetch("https://example.com")
    print(html[:100])  # первые 100 символов

asyncio.run(main())

❓Почему это важно?
- Экономит время при множестве I/O операций (запросы, файлы, БД).
- Но… если накосячить с await, скрипт может висеть вечность.

Какой ваш самый болезненный опыт с asyncio? Делитесь в комментах — вместе разберёмся!

Если asyncio — магия, то async/await — это заклинания, которые иногда взрываются в руках

🌐 @automate_today | #python

Как автоматизировать отправку email с вложениями?

Если вы копируете файлы в Outlook или отправляете письма через веб-интерфейс, но хотите упростить данные действия - этот код для вас.

Python + smtplib (просто и мощно)

import smtplib
from email.mime.multipart import MIMEMultipart
from email.mime.text import MIMEText
from email.mime.application import MIMEApplication

def send_email(subject, body, to, file_path):
    msg = MIMEMultipart()
    msg['Subject'] = subject
    msg['From'] = 'your_email@gmail.com'
    msg['To'] = to

    msg.attach(MIMEText(body, 'plain'))

    with open(file_path, 'rb') as f:
        part = MIMEApplication(f.read(), Name=file_path.split('/')[-1])
        part['Content-Disposition'] = f'attachment; filename="{file_path.split("/")[-1]}"'
        msg.attach(part)

    with smtplib.SMTP('smtp.gmail.com', 587) as server:
        server.starttls()
        server.login('your_email@gmail.com', 'your_password')
        server.send_message(msg)

send_email("Отчёт за июль", "Вот файл!", "boss@company.com", "report.pdf")

❗️Важно:
- Для Gmail нужен App Password, если включена 2FA.
- Не храните пароли в коде! Используйте переменные окружения (os.getenv).

Как вы отправляете письма в автоматическом режиме? SMTP, API, или что-то ещё?

Если письмо не отправляется, проверьте, не блокирует ли его антиспам. Или, может, вы забыли starttls()?

🌐 @automate_today | #python

Как написать бота для Telegram за 15 минут?

Telegram-боты — это не только для спама и мемов. С их помощью можно делать уведомления, автоматизировать задачи и даже управлять сервером.

Код на Python + python-telegram-bot:

from telegram import Update
from telegram.ext import Updater, CommandHandler, MessageHandler, Filters

def start(update: Update, context):
    update.message.reply_text("Привет! Я бот. Напиши /help для списка команд.")

def echo(update: Update, context):
    update.message.reply_text(f"Ты написал: {update.message.text}")

updater = Updater("YOUR_TOKEN")  # Получите у @BotFather
updater.dispatcher.add_handler(CommandHandler("start", start))
updater.dispatcher.add_handler(MessageHandler(Filters.text & ~Filters.command, echo))

updater.start_polling()
updater.idle()

❓Как это работает?
1. Получаете токен у @BotFather.
2. Запускаете скрипт.
3. Бот отвечает на сообщения и команды.

💡Идеи для улучшения:
- Добавить команду /status для проверки сервера.
- Прикрутить базу данных для хранения запросов.

Какой функционал вам хотелось бы видеть в боте? Делитесь идеями!

Если бот внезапно замолчал, проверьте, не упал ли скрипт. Или, может, вы превысили лимит запросов?

🌐 @automate_today | #python

Invoke-WebRequest тормозит? Вот как ускорить в 5 раз

PowerShell и медленные запросы — вечная история

Если ваш Invoke-WebRequest или curl (да, в PowerShell есть алиас!) работает как улитка в сиропе, возможно, вы просто не знаете одну хитрость.

🛠 Ускоряем запросы:

# Медленный вариант (по умолчанию)  
$response = Invoke-WebRequest -Uri "https://api.example.com/data"  

# Быстрый вариант (отключаем проверку SSL + используем BasicParsing)  
$response = Invoke-WebRequest -Uri "https://api.example.com/data" -DisableKeepAlive -SkipCertificateCheck -UseBasicParsing  

❓Почему это работает?
- -SkipCertificateCheck убирает верификацию SSL (осторожно, только для доверенных источников!).
- -UseBasicParsing отключает парсинг DOM, если он не нужен.
- -DisableKeepAlive предотвращает "липкие" соединения, которые иногда тормозят.

🧑‍💻 Тест:
Попробуйте оба варианта с Measure-Command { ... } и сравните время (вставить команды выше вместо точек). Вы будете крайне удивлены. Разница примерно в 12 раз.

А какие у вас есть способы ускорения HTTP-запросов в PowerShell?

Если ваш запрос всё ещё медленный, возможно, проблема не в PowerShell, а в том, что API держит вас на кулдауне.

🌐 @automate_today | #powershell

Pester: как писать тесты для скриптов?

Если вы пишете PowerShell-скрипты без тестов — это как ехать на машине без тормозов. Раньше или позже будет больно.

Простейший тест с Pester:

# Файл MyScript.Tests.ps1  
Describe "Проверка функции сложения" {  
    It "2 + 2 должно быть 4" {  
        (2 + 2) | Should -Be 4  
    }  

    It "Скрипт должен содержать функцию Get-Data" {  
        Get-Command Get-Data -ErrorAction SilentlyContinue | Should -Not -BeNullOrEmpty  
    }  
}  

Как запустить?

Invoke-Pester -Path .\MyScript.Tests.ps1  

❓Зачем это нужно?
- Ловите баги до того, как скрипт уйдёт в продакшн.
- Рефакторинг становится безопаснее.
- Можно интегрировать в CI/CD (GitHub Actions, Azure DevOps).

А вы тестируете свои скрипты? Если да — какими инструментами?

Если тесты зелёные — можно мержить. Если красные — значит, вы хотя бы проверили.

🌐 @automate_today | #powershell

Мини-туториал: работа с jq в bash

jq — это как sed, но для JSON

Если вы парсите JSON в bash через grep и awk, остановитесь. Мир уже придумал jq — мощный и удобный инструмент.

⚙️ Примеры:

# 1. Достаём поле из JSON  
echo '{"name": "Alice", "age": 30}' | jq '.name'  # "Alice"  

# 2. Фильтрация массива  
echo '{"users": [{"name": "Alice", "active": true}, {"name": "Bob", "active": false}]}' | jq '.users[] | select(.active) | .name'  

# 3. Форматирование JSON  
cat ugly.json | jq '.' > pretty.json  

❔Где пригодится?
- Парсинг ответов API (например, от curl).
- Обработка конфигов в CI/CD.
- Быстрый анализ логов в JSON.

А какие ваши любимые jq-трюки?

P.S. Если jq кажется сложным, просто запомните: `.` — это текущий объект, `[]` — массив, а `|` — это pipe, как в bash. Всё просто!

🌐 @automate_today | #bash

Скрипт, который определяет, запущен ли он в Docker

"Я в контейнере или нет?" — философский вопрос для скрипта

Если ваш скрипт должен вести себя по-разному внутри и снаружи Docker, вот как это проверить.

Проверка в bash:

if grep -q docker /proc/1/cgroup 2>/dev/null || [ -f /.dockerenv ]; then  
    echo "Я в Docker! 🐳"  
else  
    echo "Я на хосте! 💻"  
fi  

Проверка в Python:

import os  
def is_docker():  
    return os.path.exists('/.dockerenv')  

if is_docker():  
    print("Я в Docker! 🐳")  
else:  
    print("Я на хосте! 💻")  

❔Зачем это нужно?
- Менять пути к файлам (в Docker они часто другие).
- Отключать лишние проверки (например, если в контейнере нет systemd).

А вы сталкивались с проблемами "а где я запущен"?

P.S. Если скрипт говорит, что он не в Docker, а на самом деле он в Docker — возможно, вы используете --privileged без /.dockerenv.

🌐 @automate_today | #bash #python

Как найти все битые ссылки в системе?

"Мёртвые" симлинки — тихие убийцы свободного места

Битые символьные ссылки (symlinks) не только бесполезны, но и могут сломать скрипты. Найдём и удалим их!

🛠 Bash-команда для поиска:

find /path/to/search -type l ! -exec test -e {} \; -print  

🛠 PowerShell-вариант:

Get-ChildItem -Path C:\ -Recurse -Force -ErrorAction SilentlyContinue |  
    Where-Object { $_.Attributes -match "ReparsePoint" -and !(Test-Path $_.FullName) }  

🛠 Что дальше?
- Удалить: find ... -delete (осторожно!).
- Заменить на актуальные пути.

А вы часто сталкиваетесь с битыми ссылками?

P.S. Если find ничего не нашёл — либо у вас идеальная система, либо вы искали не там.

🌐 @automate_today | #bash #powershell

Вы уверены, что ваш cron работает?

🤔 Cron не запускается? Вот где искать проблемы

Если ваш cron молчит, как рыба, вот чек-лист для проверки:

1. Проверьте логи:

   grep CRON /var/log/syslog  
   

2. Перезапустите cron:

   sudo service cron restart  
   

3. Проверьте переменные окружения (cron их не видит!):

   * * * * * echo $PATH > /tmp/cron_test.txt  
   

3. Проверьте права:

   chmod +x /path/to/script.sh  
   

🛠 Используйте crontab.guru для проверки синтаксиса расписания.

А какие грабли с cronом вас больно били?

P.S. Если cron всё ещё не работает, возможно, он просто вас не любит. Или вы забыли >> /dev/null 2>&1? 😅

🌐 @automate_today | #bash