Как запустить небольшой код Python в Bash

1. Как выполнить код Python в Bash
В командной строке Bash для выполнения кода используйте конструкцию вида:

python -c "КОД"

Ещё один вариант, который может пригодиться в более экзотических обстоятельствах:

bash -c 'python -c "print (\"КОД\")"'

2. Как в скрипте Bash запустить программу на Python
Для выполнения программы Python в скрипте Bash используйте команду вида:

python СКРИПТ.py АРГУМЕНТ1 АРГУМЕНТ2 АРГУМЕНТ3

Пример запуска скрипта extractor.py с передачей ему двух аргументов: значение переменной $line и 8080:

python extractor.py $line 8080

3. Как в скрипте Bash запустить программу на Python и присвоить её вывод переменной
Если вам нужно запустить скрипт Python, а затем вывод программы присвоить переменной Bash, то используйте конструкцию вида:

ПЕРЕМЕННАЯ=`python СКРИПТ.py АРГУМЕНТ1 АРГУМЕНТ2 АРГУМЕНТ3`

Пример:

response=`python extractor.py $line 8080 2>/dev/null | sed -E "s/\/\/.+:/\/\/$line:/"`

4. Как в скрипт Bash встроить код Python
Если код Python невозможно использовать в одной строке и вы не хотите использовать для вызова внешний скрипт, тогда вам подойдёт следующая конструкция:

#!/bin/bash
 
script=`cat <<_EOF_
КОД
_EOF_`
 
echo "$script" | python

Там где КОД вставьте код Python.

Ещё один вариант этой конструкции:

python << END
... КОД ...
END

И ещё один вариант, в котором вывод присваивается в качестве значения переменной ABC:

ABC=$(python << END ... END)

🔨 bash_help

Атоматизируем ssh подключение к группе хостов используя bash скрипт и expect

Expect - программная оболочка дающая возможность запрограммировать диалог с утилитами, которые в процессе использования запрашивают ввод информации у пользователя. В нашем случае такой утилитой будет выступать ssh клиент.

Краткая постановка задачи:
Есть три маршрутизатора cisco c ip-адресами 192.168.10.10, .11 и .12. Нужно подключить к ним по ssh и выполнить команду "show ver | include IOS".

Первым делом на надо установить expect.
Для ОС RedHat, CentOS, Fedora и т.п.

sudo yum install expect

Для ОС Debian, Ubuntu, Mint и т.п.

sudo apt-get install expect

Ну а теперь текст самого скрипта:

#!/bin/bash
#Включение отладки bash:
set -x

#Учетные данные:
USER="admin"
PASSWD="123456"

#Файл логов:
LOG="ssh_conn.log"

#Список хостов:
HOSTS="
192.168.10.10
192.168.10.11
192.168.10.12
"

#Цикл переборки хостов:
for H in $HOSTS
do

#Вывод даты старта скрипта:
echo START SCRIPT: >> $LOG
date +%x-%R >> $LOG

#Команды для expect:
COMM="

#Включение и вывод отладки expect:
#log_file debug.log
#exp_internal 1

#Время ожидание expect
set timeout 1

#Соедиение ssh:
spawn ssh $USER@$H
expect \"*(yes/no)?*\" {send \"yes\r\"}
expect \"Password:\"
send \"$PASSWD\r\"

#Выполняемые команды:
expect \"*>\"
send \"show ver | include IOS\r\"
expect \"*>\"
send \"exit\r\"

#Завершение выполнения expect:
expect eof
"

#Запуск expect с набором команд:
expect -c "$COMM" >> $LOG

#Вывод разделителя:
echo ========================================================================= >> $LOG

done

📖 Ссылка на статью

🔨 bash_help

Редактирование последней команды в истории

Вы можете использовать оператор !!, чтобы отредактировать ошибочно написанную команду в истории bash и повторно выполнить ее правильно.

Это позволяет исправить ошибку, допущенную в предыдущей команде, как показано ниже.

ehco hello
-bash: ehco: command not found

Как мы видим, это легко исправить.

!!:gs/ehco/echo/
echo hello
hello

Это повторное выполнение команды, и она будет написана правильно

🔨 bash_help

Отображение палитры цветов ANSI в оболочке bash

Очень полезно, чтобы увидеть все доступные цвета bash.

e="\033["
for f in 0 7 `seq 6`; do
  no="" bo=""
  for b in n 7 0 `seq 6`; do
    co="3$f"; p="  "
    [ $b = n ] || { co="$co;4$b";p=""; }
    no="${no}${e}${co}m   ${p}${co} ${e}0m"
    bo="${bo}${e}1;${co}m ${p}1;${co} ${e}0m"
  done
  echo -e "$no\n$bo"
done

Здесь выводятся все коды цветов для создания красивой цветовой подсказки.
Это полезный способ получить определенный цвет, который вам нужен.

🔨 bash_help

Bash скриптинг – парсинг аргументов в скриптах Bash с помощью getopts

Передача аргументов в программу – одна из распространенных операций в любом языке, который вы используете.

В этой статье мы рассмотрим, как разбирать аргументы в скриптах bash с помощью встроенной функции getopts.

Каждая команда, которую мы выполняем в терминале, имеет аргумент, связанный с ней.

Например, можно взять самую простую команду в Linux под названием df, которая отображает использование дискового пространства файловой системы.
Она принимает такие аргументы/флаги, как -h, -i, –version и т.д.

Аналогично этому, когда вы создаете скрипт оболочки, в зависимости от случая использования вам может потребоваться обработать скрипт на основе переданного аргумента.

В bash есть два способа анализа аргументов, переданных скрипту.
Один из них – написать логику для разбора аргументов вручную, используя специальные переменные $@, $1, $2 … $N.

Другой способ заключается в использовании getopts.
Getopts – это POSIX-совместимая встроенная функция bash, которая принимает короткие аргументы, такие как -h, -v, -b и т.д.

Вы не можете передавать длинные аргументы, такие как –help, –version.
Если вы хотите разобрать длинные опции, есть другая утилита getopt, которая является внешней программой, а не встроенной в bash.

📖 Ссылка на статью

🔨 bash_help

Как запустить bash скрипт из windows

Запустить bash скрипт из windows также просто как если бы вы использовали linux, необходимо всего лишь установить cygwin.

Cygwin — бесплатный эмулятор командной строки Unix для Windows, используется для переноса программного обеспечения из UNIX в Windows, запуска скрипов bash, sh и т.п.

Чтобы установить cygwin заходим на сайт программы - cygwin.com и закачиваем утилиту для установки.

Во время установки переходим к выбору устанавливаемых пакетов. Этот этап является наиболее важным, от него зависит работа запускаемых вами скриптов.
Тщательно изучите список предлагаемых пакетов и выберите необходимые вам. Установите из категории Net пакеты inetutils, openssh, openssl, ping, iperf, tftp, proftpd, а из раздела Utils пакеты utils-linux, mc, bzip2, ipcalc.

Для того, чтобы запустить bash скрипт, необходимо дать скрипту нужные права, используя команду:

chmod 777 namescript

затем запустить:

./namescript

namescript - название вашего скрипта вместе с расширением.
Вот и все. Теперь можно запускать bash скрипты из windows.

🔨 bash_help

Bash скрипт для автоматического telnet соединения и ввода команд

Надоело выполнять рутинные операции с большим парком железа? Давайте разберем, как автоматизировать процесс подключения по протоколу telnet и ввода команд для удаленной настройки железа, используя скриптовый язык программирования bash.

Первым делом, давайте сформулируем задачу. Допустим, у нас есть три маршрутизатора cisco c ip адресами 192.168.10.10, 192.168.10.11 и 192.168.10.12 и компьютер с Linux. Нам требуется подключиться к каждому маршрутизатору через протокол telnet и узнать версию IOS, используя команду "show ver | include IOS". Можно, конечно, пройтись по этим маршрутизаторам, набирая команды вручную, но когда количество железок вырастет, например, до 100, согласитесь, проделать данную процедуру уже будет довольно утомительно. Поэтому сделаем скрипт, который соберет вывод команд со всех маршрутизаторов в файл.

#!/bin/bash
set -x
#Входные данные:
USER="admin"
PASSWD="123456"
LOG="telnnet_conn.log"
HOSTS="
192.168.10.10
192.168.10.12
192.168.10.11
"
for H in $HOSTS
do
echo START SCRIPT: >> $LOG
date +%x-%R >> $LOG
(
sleep 1;
echo -en "$USER\r";
sleep 1;
echo -en "$PASSWD\r";
sleep 1;
echo -en "show ver | include IOS\r";
sleep 1;
echo -en "exit\r";
sleep 1;
) | telnet $H >> $LOG
echo =================================== >> $LOG
done

📖 Описание telnet скрипта

🔨 bash_help

Простой авто-кликер в Linux c помощью небольшого BASH скрипта

Авто-кликер может понадобиться в разных случаях: если нужно автоматизировать нажатие какой-нибудь кнопки, или фармить печеньки в Cookie Clicker. Что-бы без лишней траты времени это сделать, нам понадобится программа xdotool.

sudo apt-get install xdotool

Создаём текстовый файл с любым названием, в домашней директории(так будет удобнее в будущем запускать сам авто-кликер).

Затем открываем его и вставляем туда такой текст:

#!/bin/bash

sleep 5

for i in {1..2048}
do
sleep 1.5
xdotool click 1
echo "Cовершено $i нажатий."
done

Где "2048" в третьей строке - это количество желаемых нажатий, а "1.5" в 5 строке - это интервал в секундах между нажатиями. sleep 5 (2 строка) - это отсчёт в секундах до начала цикла. Ну и ещё прикручено echo для статистики.

Кликать будет левая кнопка мыши. Чтобы эмулировать нажатия правой кнопки мыши, нужно в строке "xdotool click 1" заменить единицу на 3.
- Сохраняем файл.
- Затем нужно сделать наш файл исполняемым. Для этого нужно вписать в терминал команду:
chmod u+x название-файла

Авто-кликер готов! Чтобы его запустить, нужно ввести в терминале команду:

./название-файла

Чтобы остановить авто-кликер раньше, чем вписано в файле, нужно просто открыть окно терминала, через которое работает авто-кликер, и нажать сочетание клавиш Сtrl+C.

🔨 bash_help

Настройка приглашения командной строки в Bash

Приглашение ко вводу команд в bash — это строка, которая отображается слева от каждой команды, которую вы вводите в терминале. Обычно приглашение имеет вид

пользователь@hostname:директория$

Приглашение можно настраивать. Можно добавлять информацию или, например, изменить цвет приглашения.

Формат строки приглашения задается в переменной окружения PS1. Чтобы настроить приглашение, необходимо изменить значение переменной PS1.

Например, переменная PS1 может иметь значение:

PS1="\u@\h:\w$"

Можно установить переменную PS1 только для текущей сессии в терминале. Это удобно, пока вы подбираете, как будет выглядеть строка приглашения. Чтобы это сделать нужно выполнить команду export для переменной PS1, например:

export PS1="\u@\w:"

После выполнения команды строка приглашения в терминале сразу изменится.

Для задания различных значений переменной PS1 существуют специальные символы. Комбинируя различные специальные символы можно составить свою строку приглашения.

🖼️ Дочитать статью

🔨 bash_help

Как проверить контрольную сумму SHA с помощью bash скрипта

Во многих случаях контрольная сумма SHA предоставляется как есть, файл контрольной суммы содержит только контрольную сумму. Это создает проблему для стандартных служб, поскольку они ожидают имя файла, связанное с заданной контрольной суммой, используя формат GNU или BSD.

Решение заключается в создании простого скрипта оболочки, который будет выполнять дополнительные шаги для проверки контрольной суммы SHA.

#!/bin/bash
# verify file checksum from a file

# checksum algorithms
algorithms=( 1 224 256 384 512 512224 512256 )

# file to check
file="$1"

# execute when there is one parameter
if [ "$#" -eq "1" ]; then
  # check if file exist
  if [ -f "${file}" ]; then
    # find checksum file
    for algorithm in "${algorithms[@]}"; do
      if [ -f "${file}.sha${algorithm}" ]; then
        echo "Found SHA${algorithm} checksum"
        words="$(wc -w < ${file}.sha${algorithm})"
        # verify checksum and pass the exit code
        if [ "$words" == "1" ]; then
          shasum --algorithm $algorithm --check <(echo $(cat ${file}.sha${algorithm})\ \ $file)
          exit $?
        elif [ "$words" == "2" ] || [ "$words" == "4" ]; then
          shasum --algorithm $algorithm --check ${file}.sha${algorithm}
          exit $?
        fi
      fi
    done
  fi
fi

Он автоматически проверит контрольную сумму SHA (в стиле GNU или BSD). Вы будете проинформированы в случае возникновения проблем.

🔨 bash_help

Сканирование подсети

В этом примере bash скрипт просканирует сеть на предмет хостов, подключенных по IP-адресам 10.1.1.1 – 255.
Скрипт выведет сообщение Хост с с IP: IP-адрес поднят, если команда ping была успешной.

Не стесняйтесь изменять скрипт для сканирования диапазона ваших хостов.

#!/bin/bash

is_alive_ping()
{
  ping -c 1 $1 > /dev/null
  [ $? -eq 0 ] && echo Хост с IP: $i поднят.
}

for i in 10.1.1.{1..255} 
do
is_alive_ping $i & disown
done

Выполнение:

./bash_ping_scan.sh

Вывод:

Хост with IP: 10.1.1.1 поднят.
Хост with IP: 10.1.1.4 поднят.
Хост with IP: 10.1.1.9 поднят.

🔨 bash_help

Уведомление по почте, когда сервер не работает

Скрипт отправит электронное письмо на указанный адрес электронной почты, когда ping не может достичь места назначения.
Системный администратор может регулярно выполнять этот скрипт с использованием планировщика cron.

Сначала скрипт использует команду ping для проверки связи с хостом или IP-адресом, указанным в качестве аргумента.
В случае, если это место назначения недоступно, будет использована команда mail для уведомления системного администратора об этом событии.

#!/bin/bash

for i in $@
do
ping -c 1 $i &> /dev/null

if [ $? -ne 0 ]; then
  echo "`date`: ping не прошел, $i хост лежит !" | mail -s "$i хост лежит!" admin@itsecforu.ru
fi
done

Выполнение:

./check_hosts.sh google.com yahoo.com 192.168.1.2 mylinuxbox N2100

🔨 bash_help

Создаём логи мониторинга

Это модифицированная версия предыдущего примера. Если в системе не настроена почта, скрипт создаст файл логов.
Ядро скрипта заключено в бесконечный цикл while, который настроен на выполнение проверки ping каждый час (3600 секунд).

Измените скрипт в соответствии с вашими потребностями.
Удалите бесконечный цикл while, если вы собираетесь использовать этот скрипт с планировщиком cron.

#!/bin/bash

LOG=/tmp/mylog.log
SECONDS=3600

EMAIL=admin@itsecforu.ru

for i in $@; do
echo "$i-UP!" > $LOG.$i

done

while true; do
for i in $@; do

ping -c 1 $i > /dev/null
if [ $? -ne 0 ]; then
STATUS=$(cat $LOG.$i)
if [ $STATUS != "$i-DOWN!" ]; then
echo "`date`: ping неудачен, $i хост лежит!" |
mail -s "$i хост лежит!" $EMAIL

fi
echo "$i-DOWN!" > $LOG.$i

else
STATUS=$(cat $LOG.$i)
if [ $STATUS != "$i-UP!" ]; then
echo "`date`: пинг прошел, $i Хост подня!" |
mail -s "$i Хост поднят !" $EMAIL

fi
echo "$i-UP!" > $LOG.$i
fi
done

sleep $SECONDS
done

Выполнение:

./check-server-status.sh google.com yahoo.com 192.168.1.2 mylinuxbox N2100

🔨 bash_help

Автоматизация начальной настройки веб-сервера

Наверняка, у многих есть собственные веб серверы. Настройка нового сервера с нуля — достаточно нудное и времяубивающее трудоемкое занятие не только для новичка, но и для бывалых.

А если к тому же по долгу службы вам приходится настраивать по несколько серверов в неделю/месяц, то невольно начинаешь задумываться об автоматизации этого процесса. Хочу поделиться bash скриптом, который я использую для начальной настройки RedHat / CentOS серверов.

Скрипт рассчитан на настройку RedHat Enterprise Linux (CentOS) версий 5 и 6, но может быть легко адаптирован для других систем.

Итак, ввиду большого количества комментариев в коде, приведу только краткое описание.

**Подключение репозиториев epel, ius, nginx. Обновление пакетов
**Устанавка минимального набора утилит, необходимых для нормальной работы системы, а также зависимостей для новых программ
**Настройка SSHD
**Установка NTPD, выбор временной зоны, синхронизация даты
**Монтирование /tmp и /dev/shm c атрибутами noexec и nosuid
**Установка и настройка Virtualmin, CSF Firewall, MySQL 5.5, PHP 5.4, Nginx, Postfix, SaslAuth, phpMyAdmin
**Установка и обновление CPANminus как замены CPAN
**Отключение ненужных сервисов из автозагрузки

Большинство операций скрипт выполнит самостоятельно, но некоторые действия со стороны пользователя все же необходимы. Например, ввод данных для создания SSL сертификата и подтверждение установки Virtualmin.

🖼️ Ссылка на скрипт

🔨 bash_help

Использование двойных кавычек для ссылки на переменные

Кавычки, ограничивающие строки, нужны для предотвращения интерпретации специальных символов, которые могут находиться в строке или в названиях переменных (за исключением некоторых специальных знаков). Использование двойных кавычек при обращении к переменным предотвращает разбиение строк при наличии в них пробелов на слова, а также — другие возможные сбои.

Проделайте пример ниже:

#!/bin/bash
#let script exit if a command fails
set -o errexit

#let script exit if an unsed variable is used
set -o nounset

words="I love bash"

echo "Words without double quotes"
for word in $words; do
echo "$word"
done
echo

echo "Words with double quotes"
for word in "$words"; do
echo "$word"
done

exit 0

Сохраните и закройте файл, затем — запустите его при помощи следующей команды:

$ ./<your-file-name>.sh

🔨 bash_help

Что такое Bashfuscator?

Bashfuscator – это модульный и расширяемый фреймворк для обфускации Bash, написанный на языке Python 3.

Он предоставляет множество различных способов сделать однострочные фразы или скрипты Bash гораздо более сложными для понимания.

Это достигается за счет генерации запутанного, рандомизированного кода Bash, который во время выполнения оценивается по исходному вводу и выполняется.

Bashfuscator позволяет легко генерировать сильно обфусцированные команды и скрипты Bash как из командной строки, так и в виде библиотеки Python.

Для работы Bashfuscator требуется Python 3.6+.

🖼️ Как установить

🔨 bash_help

Горячие клавиши Bash

Работа с Bash была бы не такой удобной без горячих клавиш, которые позволяют упростить множество действий. Рассмотрим основные сочетания, некоторые из них вы и так используете каждый день:

Tab - автодополнение, наберите начало команды или пути и нажмите Tab, если такая команда только одна оболочка ее дополнит. Если доступно несколько вариантов, нажмите два раза Tab чтобы их увидеть;
Стрелка вверх - предыдущая команда в истории;
Стрелка вниз - следующая команда в истории;
Ctrl+R - поиск по истории. Просто нажмите эту кнопку и начните вводить нужную команду;
Ctrl+G - выйти из режима поиска;
Alt+. - предыдущее слово последней команды;
Ctrl+L - очистить вывод терминала;
Ctrl+A - перейти в начало строки;
Ctrl+E - в конец строки;
Ctrl+K - удалить символы начиная от курсора и к концу команды;
Ctrl+U - удалить символы от курсора до начала команды;
Ctrl+W - удалить все символы этого слова слева;
Ctrl+Y - удалить все символы этого слова справа;
Ctrl+S - остановить вывод на экран;
Ctrl+Q - возобновить вывод на экран.

Это все основные сочетания клавиш, которые вам понадобятся чтобы пользоваться bash. Конечно, существуют и другие, но эти основные.

🔨 bash_help

Подготовка эффективной среды для написания bash сценариев

Если вам приходится писать bash скрипты или вы только планируете этим заняться, данная статья написана для вас.

Bash, он же возрождённый shell, является по-прежнему одним из самых популярных командных процессоров и интерпретаторов сценариев. Как бы его ненавидели и не пытались заменить, всё равно он присутствует вокруг нас и никуда не собирается исчезать.

Начнем с выбора среды разработки, именно она позволяет объединять различные аспекты написания программы, повышая продуктивность за счет объединения общих действий по написанию программного обеспечения в одном приложении.

Консольные текстовые редакторы. Vim, Emacs и Nano - классическая троица, сейчас уже редко кто использует на рабочих станциях как основной инструмент, но vi и nano незаменимы для быстрого редактирования файлов в удаленных ssh сессиях. Если вы еще не работали с ним, рекомендую освоить такие вещи как поиск, замена и форматирование, хотя бы в nano.

Графические текстовые редакторы. Mousepad, Gedit, Notepad++ и т.п. Легковесные редакторы, с подсветкой синтаксиса, автозаменой и прочим, что уже есть в консольных редакторах, но они всё еще не являются полноценной интегрированной средой разработки.

IDE. Geany, Atom, IntelliJ IDEA, Sublime Text и Visual Studio Code - это уже полноценные и расширяемые среды разработки. Долгие годы я пользовался Geany и пробовал все перечисленные варианты, но только с появлением VSCode мне удалось сменить основную IDE для большинства задач.

Далее в статье про утилиты и расширения, настройку окружения и многое другое.

🖼️ Дочитать статью

🔨 bash_help

Устанавливаем обновления безопасности

Скрипт, который проверяет и устанавливает доступные обновления безопасности:

#!/bin/bash

# Update the package repository
apt update

# Install available security updates
apt upgrade -y --security

🔨 bash_help

Скрипт по поиску строк одного файла в другом файле

./str_existance.sh to_find.txt where_find.txt

- Файл из которого берем строки для поиска указываем в первой переменной.
- Файл в котором делаем поиск указываем во второй переменной.
(Можно убрать якоря, чтобы успешный результат считался не только по полному match строки.)

#!/bin/bash
cat $1 | while read sw
do
RESULT=$(grep ^"$sw"$ $2)
if [[ "$RESULT" == "" ]]; then
echo $sw";"not_exist
else
echo $sw";"exist
fi
done

🔨 bash_help

Включаем и настраиваем файерволл

Скрипт, который настраивает и включает файерволл:

#!/bin/bash

# Install the necessary packages
apt update
apt install -y ufw

# Allow SSH connections
ufw allow ssh

# Enable the firewall
ufw enable

🔨 bash_help