-- V2__Add_email_to_users.sql
ALTER TABLE users ADD COLUMN email VARCHAR(255);
CREATE INDEX idx_users_email ON users(email);

import psycopg2
import pandas as pd

conn = psycopg2.connect("dbname=mydb")
df = pd.read_sql("SELECT * FROM sales WHERE date = CURRENT_DATE", conn)
df.to_csv('/reports/daily_sales.csv', index=False)

P.S. Автоматизированная работа с БД — как автопилот: можно спать спокойно, зная, что все операции выполнятся точно и вовремя.

#!/bin/bash
if curl -s --head --fail https://mysite.com > /dev/null; then
  echo "Сайт жив!"
else
  echo "Сайт лежит!" | send-slack-alert
fi

import requests

response = requests.get('https://mysite.com')
if response.status_code != 200 or 'Ваш сайт' not in response.text:
    send_alert('Сайт не работает или изменился контент!')

P.S. Хороший мониторинг — как система пожарной сигнализации: лучше ложное срабатывание, чем настоящий пожар.

// package.json
{
  "husky": {
    "hooks": {
      "pre-commit": "lint-staged"
    }
  }
}

# .git/hooks/pre-commit
#!/bin/bash
if git diff --cached --name-only | grep -E '\.(js|ts)$' | xargs eslint; then
  echo "ESLint проверка пройдена"
else
  echo "ESLint нашел ошибки"
  exit 1
fi

P.S. Pre-commit хуки — как автоисправление в телефоне: иногда раздражает, но чаще спасает от опечаток.

#!/bin/bash
docker system prune -f
docker image prune -a --filter "until=24h" -f
docker volume prune -f

import docker

client = docker.from_env()

for container in client.containers.list():
    stats = container.stats(stream=False)
    cpu_usage = stats['cpu_stats']['cpu_usage']['total_usage']
    print(f"{container.name}: CPU {cpu_usage}")

P.S. Чистый Docker — как убранная комната: приятно работать и ничего не мешает.

# Найти 10 самых частых ошибок
grep "ERROR" app.log | awk '{print $4}' | sort | uniq -c | sort -nr | head -10

from collections import Counter

errors = []
with open('app.log') as f:
    for line in f:
        if 'ERROR' in line:
            error_type = line.split('ERROR')[-1].split(':')[0].strip()
            errors.append(error_type)

print(Counter(errors).most_common(5))

P.S. Логи — это как медицинская карта пациента: нужно уметь читать между строк, чтобы поставить правильный диагноз.

def should_send_alert(error):
    # Не отправляем алерты ночью для некритичных ошибок
    if is_night_time() and error.severity == 'LOW':
        return False
    
    # Игнорируем известные плавающие ошибки
    if error.type in ['KNOWN_FLAPPING_ERROR', 'TEMPORARY_NETWORK_ISSUE']:
        return False
        
    return True

# Агрегируем одинаковые алерты за последние 5 минут
alert_count=$(grep -c "CRITICAL_ERROR" /var/log/app.log)
if [ $alert_count -gt 10 ]; then
    send_alert "Много критических ошибок: $alert_count за 5 минут"
fi

P.S. Умные алерты — как хороший секретарь: беспокоит только по действительно важным вопросам.

resource "aws_instance" "test_env" {
  count = 3
  ami = "ami-123456"
  instance_type = "t3.medium"
  tags = {
    Name = "test-env-${count.index}"
    Owner = var.developer
    TTL = "24h"
  }
}

version: '3.8'
services:
  test-db:
    image: postgres:14
    environment:
      POSTGRES_DB: test_${USER}

P.S. Идеальная тестовая среда — как одноразовая посуда: использовал и выбросил, не нужно мыть.

# docker-compose.yml для локальной разработки
version: '3.8'
services:
  app:
    build: .
    volumes:
      - .:/app # Монтируем код для live-перезагрузки
    depends_on:
      - db
      - redis
  db:
    image: postgres:15
    environment:
      POSTGRES_PASSWORD: example
  redis:
    image: redis:alpine

P.S. С Docker можно иметь проект на Python 3.6, другой на 3.11 и третий на PyPy, и они никогда не узнают о существовании друг друга.

curl -X POST -H "Authorization: Bearer $TOKEN" -H "Content-Type: application/json" \
  https://api.atlassian.com/ex/jira/.../issue \
  -d '{"fields": {"summary": "Сервис X недоступен"}}'

P.S. Для сложных JSON лучше использовать файл: curl -d @request_body.json. А для отладки незаменим ключ -v.

# Настройка
git config --global core.excludesfile ~/.gitignore_global

P.S. Есть сервисы вроде git-secrets или truffleHog, которые сканируют историю на наличие ключей и паролей. Но лучше не допускать их попадания туда.

[Service]
ExecStart=/usr/bin/my_daemon
Restart=on-failure
RestartSec=5
StandardOutput=journal

P.S. Споры о systemd — бесконечны, но его распространенность в современном Linux-мире делает его знание обязательным. Это не всегда выбор, но это реальность.

# nginx.conf.j2
server {
    listen 80;
    server_name {{ server_name }};
    root {{ web_root }};
}

# В Dockerfile или скрипте запуска
envsubst < /etc/nginx/config.template > /etc/nginx/nginx.conf

P.S. Золотое правило: в репозитории должен храниться шаблон и значения переменных, но никогда — готовый конфиг с «зашитыми» значениями для конкретного окружения.

#!/bin/bash
find /var/log/app -name "*.log" -mtime +7 | tar -czf /backup/logs-$(date +%Y%m%d).tar.gz -T -
find /var/log/app -name "*.log" -mtime +7 -delete

# /etc/logrotate.d/myapp
/var/log/myapp/*.log {
    daily
    rotate 30
    compress
    delaycompress
    postrotate
        /usr/bin/rsync /var/log/myapp/*.gz backup-server:/logs/
    endscript
}

P.S. Всегда проверяйте, что архивируете, а не удаляете единственную копию лога, который еще нужен для отладки. Скрипт должен быть идиотодостойким.

P.S. Иногда автоматизация одной мелкой, но раздражающей задачи приносит больше морального удовлетворения, чем большой проект.

strace -f -o app_trace.log ./my_mysterious_app

P.S. Аналоги strace есть и для других систем: dtrace (Solaris, macOS), perf trace (Linux). Принцип везде один: слежка за разговором программы с ОС.

nc -zv example.com 443
# Результат: Connection to example.com 443 port [tcp/https] succeeded!

printf "GET / HTTP/1.1\r\nHost: example.com\r\n\r\n" | nc example.com 80

# На принимающей стороне:
nc -l -p 1234 > received_file.tar
# На отправляющей:
cat file_to_send.tar | nc receiver_ip 1234

P.S. В современных системах netcat может быть заменен на ncat (из набора Nmap) или socat (который еще мощнее), но принцип остается тем же.

# После создания backup.sql.gz
if gzip -t backup.sql.gz; then
    echo "Архив цел. Копируем."
    rsync -avz backup.sql.gz backup-server:/storage/
else
    echo "ОШИБКА: архив поврежден!" | mail -s "Backup FAILED" admin@company.com
fi

P.S. Правило 3-2-1: три копии данных, на двух разных типах носителей, одна из которых в другом географическом местоположении. Автоматизация помогает соблюсти это правило.

watch -n 2 -d 'df -h /'
# Обновляет вывод каждые 2 секунды, выделяя различия

watch -n 1 'kubectl get pods -l app=my-microservice'

watch -n 5 'tail -20 /var/log/syslog | grep -i error'

P.S. Для более сложного интерактивного дашборда в терминале можно посмотреть в сторону htop, ctop (для контейнеров) или glances.