BashMaster

Скачиваем Youtube плейлист в формате mp3 одним bash-скриптом Bash-скрипт на входе получает ID плейлиста, на выходе – mp3 файлы, которые можно слушать в любимом плеере. Скачать mp3 с Youtube нельзя, поэтому процесс делим на 3 шага: 1. скачиваем flv 2. извлекаем звуковую дорожку 3. удаляем временный flv На всякий случай напомню, что ID плейлиста это get-параметр «list». Зависимости: sudo apt-get install youtube-dl ffmpeg libavcodec-extra-53 - youtube-dl для скачивания видеофайла - ffmpeg libavcodec-extra-53 для конвертации в mp3 🖼️ Ссылка на скрипт 🔨 bash_help

Как присвоить переменной вывод команды в Bash Если вам нужно, чтобы полученное от команды значение присваивалось переменной, то это можно сделать несколькими способами. 1. Используя обратные кавычки (апострофы). Пример кода:

#!/bin/bash
 
VAR1="$1"
VAR2="$2"
 
MOREF=`sudo run command against $VAR1 | grep name | cut -c7-`
 
echo $MOREF

Для этого варианта нужно помнить следующее: не перепутайте обратные кавычки с одиночными кавычками. А ещё использование этого синтаксиса считается теперь устаревшим (но везде работающим). 2. В дополнение к обратным кавычкам можно использовать $(). Преимуществом данного способа является возможность вложенности. Пример:

OUTPUT="$(ls -1)"
echo "${OUTPUT}"

Использование кавычек (") имеет смысл при возможности появления значений в несколько строк. Ещё одним важным отличием $() от двойных кавычек является то, что при обращении к переменной, если ей присвоено значение $(), она пересчитывается каждый раз. А если значение переменной определено командой внутри обратных кавычек, то это значение считается только один раз (при присвоении), а затем только используется. 3. Можно создать пользовательскую функцию, содержащую необходимые команды, и использовать название функции вместо имени переменной. Пример:

func (){
   ls -l
}

Вызывать нужно по имени функции (в данном случае func). 4. И ещё более экзотический вариант – использование eval:

var="ls -l"
eval $var

🔨 bash_help

Как управлять WireGuard VPN через bash скрипт в Linux Перед созданием скрипта убедитесь, что У вас установлен в системе сам клиент WireGuard. Чтобы это проверить, введите команду в терминале:

sudo apt install wireguard resolvconf

Если он уже установлен, то система об этом сообщит. Но если нет, то установите и все его зависимости. После чего просто скопируйте свой конфиг wg0.conf в папку:

sudo nano /etc/wireguard/wg0.conf

Bash скрипт управления WireGuard

#!/bin/bash 
function wgstart() {
    echo ""
echo "Запустить VPN: "
echo ВАШ_ПАРОЛЬ_ОТ_ROOT | sudo -S su
sudo wg-quick up wg0
echo ""
}

function wgstop() {
    echo ""
echo "Остановить VPN: "
    echo ""
    echo ВАШ_ПАРОЛЬ_ОТ_ROOT | sudo -S su
sudo wg-quick down wg0
    echo ""
}

function wgedit() {
    echo ""
echo "Редактировать VPN конфиг: "
    echo ""
    echo ВАШ_ПАРОЛЬ_ОТ_ROOT | sudo -S su
sudo nano /etc/wireguard/wg0.conf
    echo ""
}


##
# Color  Variables
##
green='\e[32m'
blue='\e[34m'
clear='\e[0m'

##
# Color Functions
##

ColorGreen(){
echo -ne $green$1$clear
}
ColorBlue(){
echo -ne $blue$1$clear
}

menu(){
echo -ne "
Управление VPN WireGuard
$(ColorGreen '1)') Запуск VPN WG
$(ColorGreen '2)') Остановка VPN WG
$(ColorGreen '3)') Редактировать VPN WG
$(ColorBlue 'Выберите, что нужно сделать:') "
        read a
        case $a in
        1) wgstart ; menu ;;
        2) wgstop ; menu ;;
            3) wgedit ; menu ;;
            *) echo -e $red"Неправильный вариант."$clear; WrongCommand;;
        esac
}

# Call the menu function
menu

Замените фразу «ВАШ_ПАРОЛЬ_ОТ_ROOT» на пароль от Вашей учетной записи которая имеет права администратора root. Эта команда внутри скрипта сама вводит Ваш пароль перед выполнением запуска или остановки службы WG. Создайте файл WireGuard.sh и дайте ему права на выполнение.

chmod +x ./WireGuard.sh

Наконец пришло время выполнить скрипт:

bash wireguard-manager.sh

🔨 bash_help

2 канала для изучения IT-технологий в области Администрирования и ИБ: 💻 @admguides — авторские гайды по настройке серверов и программ на ОС Windows/Linux. 📖 @admbooks — электронные книги по компьютерным технологиям и информационной безопасности.

Как вывести список директорий используя ls в Bash Для обработки в скриптах может понадобиться в определённой директории получить только список только папок без файлов. Далее показано, как это сделать разными способами. 1. С помощью ls увидеть все папки кроме скрытых */ - это шаблон, который соответствует всем подкаталогам в текущем каталоге (* будет соответствовать всем файлам и подкаталогам; / ограничивает его каталогами). Точно так же, чтобы вывести список всех подкаталогов в /home/mial/bin/aur, используйте:

ls -d /home/mial/bin/aur/*/

Чтобы вывести только каталоги в текущей папке:

ls -d */

Чтобы вывести данные в столбик:

ls -1 -d */

2. С помощью ls увидеть все папки вместе со скрытыми Обратите внимание, что */ не найдёт любые скрытые папки. Чтобы включить и их, укажите их явно:

ls -d .*/ */

3. С помощью ls и cut Следующий способ показывает каталоги только в текущей папке, но делает это в виде столбика:

ls -d */ | cut -f1 -d'/'

Чтобы показать вместе со скрытыми каталогами:

ls -d .*/ */ | cut -f1 -d'/'

Чтобы показать только директории в папке /home/mial/bin/aur:

ls -d /home/mial/bin/aur/*/ | cut -f1 -d'/'

4. Используя ls и grep В этом варианте применяется фильтрация вывода с помощью grep. Этот способ имеет ограничение — папки должны выводиться в виде подробного списка:

ls -l | grep "^d"

Чтобы показать вместе со скрытыми папками:

ls -al | grep "^d"

Для вывода только имён директорий (возможны проблемы с директориями, имеющими пробелы в названиях):

ls -l | grep "^d" | cut -f 10 -d ' '

🔨 bash_help

Bash скрипт для сканирования диапазона портов Наш скрипт будет принимать два аргумента – IP-адрес для сканирования и диапазон портов для сканирования.

#!/bin/bash

ip=$1
startport=$2
endport=$3

function portscan {
    for ((counter=$startport; counter<=$endport; counter++))
    do
        (echo > /dev/tcp/$ip/$counter) > /dev/null 2>&1 && echo "$counter open"
    done
}

portscan

Для использования необходимо предоставить ему права на выполнение и запустить его с IP-адресом и диапазоном портов для сканирования. - Сохраните скрипт в файл, например portscan.sh - Сделайте скрипт исполняемым: chmod +x portscan.sh - Запустите скрипт с IP-адресом и диапазоном портов: ./portscan.sh 192.168.1.1 20 80 - Будет произведено сканирование портов с 20 по 80 на IP-адресе 192.168.1.1. 🔨 bash_help

Информационная безопасность и OSINT. 2 полезных и крупных ресурса в TG: 📚 @it_secur — Редкая литература для специалистов в области информационной безопасности любого уровня и направления. Читайте, развивайтесь, практикуйте. 👨🏻‍💻 @infosecurity — Самый крупный ресурс в Telegram, посвященный этичному хакингу, OSINT и Cоциальной Инженерии.

Уроки по Bash скриптам Видеоуроки: 1 — Привет Мир 2 — Переменные 3 — Команда read и Параметры 4 — Условный оператор if 5 — Условный оператор case 6 — Вложенные условия 7 — Массивы 8 — Циклы 9 — Функции 10 — Рекурсия 11 — Перенаправление ввода/вывода 📹 Плейлист на YouTube 🔨 bash_help

Хочешь быть на шаг впереди киберпреступников? Присоединяйся к каналу Hack Proof и узнавай о реальных кейсах в сфере Информационной безопасности. Мы погружаемся в мир OSINT, социальной инженерии и обозреваем инструменты с github, чтобы помочь тебе защититься и сохранить анонимность в сети!

Как в Bash реализовать «Нажмите любую кнопку для продолжения» Иногда нужно приостановить вывод в скрипте, чтобы обратить внимание пользователя на информацию и убедиться, что пользователь увидел её (или имел возможность её увидеть). В Bash это можно сделать с помощью утилиты read. Эта утилита читает строку из стандартного ввода. Пример использования: read -p "Нажмите ENTER для продолжения" Эта команда позволит пользователю продвинуться далее (а скрипт продолжит выполнение) после того, как пользователь нажмёт кнопку ENTER. Если вам нужно, чтобы для продолжения можно было нажать любую кнопку, то используйте следующую конструкцию: read -n 1 -s -r -p "Нажмите любую кнопку для продолжения" В этой команде следующее значение опций: -n определяет количество символов, после которого будет остановлено чтение. По умолчанию чтение останавливается при вводе разделителя строк (например, кнопкой ENTER). В нашем случае команда read перестаёт считывать вводимые данные после первого символа -s скрывает пользовательский ввод -r приводит к тому, что строка будет интерпретирована как «сырая» (без учёта экранирования обратными слэшами). То есть обратным слэшам не будет позволено экранировать символы -p как и в первом примере, содержит сообщение, показываемое пользователю. 🔨 bash_help

У Skillfactory бесплатный курс с профориентацией в IT.  Забегайте: free.skillfactory.ru/itrentgen Реклама. ООО "СКИЛФЭКТОРИ". ИНН 9702009530. erid: 2RanynDRnaL

Как преобразовать строку в нижний регистр В этой заметке будет показано, как преобразовать строку в нижний регистр (строчные буквы). Чтобы конвертировать строку в маленькие буквы независимо от её текущего регистра, используйте одну следующую команду:

a="Hi all"
echo "${a,,}"
hi all

Начиная с Bash 5.1 имеется параметр преобразования L, который предназначен для перевода строки в нижний регистр:

${var@L}

Пример:

v="heLLo"
echo "${v@L}"
hello

🔨 bash_help

Как отключить историю оболочки bash в Linux Оболочка bash сохраняет введенные из терминала команды в файл истории. Вы можете вызвать список команд, введенных ранее. Команда history отображает команды bash, которые вы выполнили ранее. Эти команды составляют историю команд. По умолчанию в истории отображается нумерованный список из 500 последних команд, начиная с самых ранних и заканчивая самыми последними. Значение переменной HISTSIZE используется в качестве числа команд для сохранения в списке истории. Как отобразить текущую историю? Нужно просто ввести команду history: history history | less history | more history | grep 'find' Как узнать количество сохраненных в истории команд? Используйте команду echo или printf : echo "$HISTSIZE" или printf "%d\n" $HISTSIZE Где хранится история bash команд? Инициализируется история из файла с именем переменной HISTFILE. По умолчанию используется файл ~/.bash_history. Для просмотра текущих настроек можно использовать: echo "$HISTFILE" или printf "%s\n" "$HISTFILE" Как отключить историю оболочки BASH на Linux или Unix? Переменную HISTFILE можно удалить, набрав следующую команду сброса:

unset HISTFILE

Добавьте указанную выше строку в конец нового файла /etc/profile.d/disable.history.sh или ~/.bash_profile: echo 'unset HISTFILE' >> /etc/profile.d/disable.history.sh или

echo 'unset HISTFILE' >> ~/.bash_profile

Как навсегда отключить историю bash с помощью команды set? Другой вариант — передать параметр +o history встроенной команде set:

set +o history

Аналогично добавьте set +o history в конец нового файла /etc/profile.d/disable.history.sh или ~/.bash_profile. Как очистить историю bash? Введите следующую команду в текущем сеансе:

history -c

Чтобы удалить одну команду под номером 42 из истории в Linux / Unix: history -d 42 🔨 bash_help

Пара полезных каналов для тех, кто увлекается кибербезом: 🧑‍💻 Этичный Хакер - Авторский канал c инструкциями по пентесту, деанону, СИ, защите устройств и бесплатными курсами по информационной безопасности. 🏳️ Mr. Robot - Реальные кейсы, OSINT, обзоры инструментов с github, гайды по анонимности.

Импорт фотографий из командной строки Linux Представьте что у нас хранятся сотни тонн всевозможных снимков в совершенно разных местах, на разных носителях. Где-то они были разобраны по годам и месяцам, а где-то просто “свалены” в кучу и оставлены до лучших времен. Мы запускаем программу указываем ей начальную точку, откуда начинать, и идем заниматься своими делами. Скрипт сканирует все директории какие встретит на своем пути, включая и вложенные, в поисках фотографий. После завершения работы программы получаем фотоальбом с отсортированными снимками по годам и месяцам в каждом году, т.е. в виде: год / месяц / снимки. Да еще и без дубликатов фотографий. А сами снимки будут переименованы из непонятных типа IMG_654372984.jpg или AB54645456.jpg во вполне читабельные и понятные имена вида YYYYMMDD_hhmmss.jpg. При этом не пострадает ни один оригинал фотографии. 🌐 Ссылка на скрипт 🔨 bash_help

Как отлаживать bash-script-ы по шагам Волшебная строчка, которую нужно добавить после #!/bin/bash, чтоб скрипт можно было отлаживать по шагам #!/bin/bash trap 'echo "# $BASH_COMMAND";read' DEBUG echo line1 echo line2 echo line3 Процесс отладки Запускаем скрипт, перед выполнением каждой команды выводится то, что будет исполняться, затем интерпретатор начинает ожидать нажатия клавиши <ENTER>. Если понимаем, что что-то пошло не так, нажимаем Ctrl+C и выходим из отладки. Ингредиенты - команда trap, которая умеет перехватывать разные сигналы и в нашем случае она перехватывает сигнал DEBUG, посылаемый перед выполнением команды - команда read, которая умеет ожидать ввода чего-нибудь с клавиатуры (в данном случае нам нужно только либо ENTER либо Ctrl+C - переменная окружения $BASH_COMMAND, валидная внутри обработчика команды trap. 🔨 bash_help

Как повысить эффективность Bash-скриптов Bash-скрипты — эффективное решение для автоматизации рутинных задач, но не всегда самое простое. Объемные сценарии характеризуются низкой производительностью и сложны для чтения. В этой статье мы рассмотрим, как оптимизировать работу, упростить с помощью утилит sed и awk и не совершать очевидных ошибок в написании скриптов. Инструменты обработки текста значительно расширяют возможности оболочки bash. Но с командами sed и awk можно не только редактировать вывод и файлы, включая сами скрипты. Утилиты служат наиболее эффективным решением некоторых задач автоматизации процессов. Sed — потоковый редактор файлов, позволяющий сэкономить время на выполнении простых функций: удаление, замена, вставка текста. Awk — язык программирования, синтаксис которого напоминает языки C и Perl. Хотя awk работает по тому же «построчному» принципу, но значительно превосходит sed по функциональным возможностям. При написании bash-скриптов инструмент удобно использовать для работы со структурированными данными, так как awk воспринимает поля (область текста, отделенную пробелами или табуляцией), переменные, арифметические функции и др. 🌐 Ссылка на статью 🔨 bash_help

Где найти лучшие курсы для сисадминов? Tutortop — образовательный маркетплейс №1, где представлено свыше 5000 курсов от более чем 300 школ и все их можно сравнить по рейтингу, цене и отзывам, а еще купить дешевле, чем напрямую 🔥 Ребята из tutortop собрали для вас подборку из лучших курсов по системному администрированию по мнению их пользователей: — Системный администратор на Linux с углубленным изучением ИБ от Академии АйТи. Рейтинг 4.7 из 5. — Специалист DevSecOps от Академия АйТи. Рейтинг 4.7 из 5. — SQL с нуля для анализа данных от Eduson. Рейтинг 4.8 из 5. Скидка 5% по промокоду TUTORTOP до 01.08 — Курс «Веб-разработчик с индивидуальным сопровождением и гарантией трудоустройства» от SkyPro. Рейтинг 4.9 из 5. Скидка 15% по промокоду TUTORTOP до 01.08 ⚡️Получите скидку до 10 000 ₽ на все эти и десятки других курсов по IT на маркетплейсе tutortop!

Совсем немного про перенаправления <, << и <<< Первое перенаправление "<" из именованного потока или из файла. Давно известное и годами перетёртое мозолями суровых админов. Поэтому сразу перейдем к двум другим, которые встречаются реже. <<, так называемая конструкция here document. Позволяет разместить многострочный текст прямо в скрипте и перенаправить его, словно из внешнего потока. $ cat <<EOF \ hello, \ World \ EOF hello, World Cat читает данные из файла. Мы перенаправляем ему в STDIN файл — конструкция here document генерит его прямо на месте, поэтому не нужно создавать отдельный файл. Это действительно удобный способ, чтобы вызвать какую-то внешнюю утилиту и скормить ей много данных. Но можно пользоваться и <<<. Во-первых, <<< лучше читается, а во-вторых через <<< тоже можно передавать многострочные данные. Сравните два примера на читабельность:

#!/bin/bash
. load_credentials

sqlplus -s $connstring << EOF
set line 1000
select name, lastlogin from users;
exit;
EOF

#!/bin/bash
. load_credentials

SLQ_REQUEST="
set line 1000
select name, lastlogin from users;
exit;"

sqlplus -s ${connstring} <<<"${SQL_REQUEST}"

Второй вариант выглядит потенциально удобнее. Мы можем задать многострочную переменную в удобном для нас месте, и использовать ее в <<<. А при коротком запросе все выглядит вообще прекрасно: #!/bin/bash . load_credentials sqlplus -s ${connstring} <<<"select name, lastlogin from users;exit;" Если оперировать скриптами побольше, и запросами подлиннее, то использование <<< с перенаправлениеим из переменных (а сами переменные мы можем объявить заранее, в специально отведенном и оборудованом комментариями месте), то код получается гораздо читабельнее. 🔨 bash_help

Можно ли создать hardlink на папку? Конечно можно! Но не всем. POSIX файловые системы активно пользуются хардлинками и мы их все время видим! Пример: # создаем директорию test $ mkdir test # выводим информацию о количестве ссылок и номер iNode для test $ stat -c "LinkCount:%h iNode:%i" test LinkCount:2 iNode:522366 Как? Только создали и уже два линка? # заходим в созданную директорию test $ cd test # внутри выводим статистику для текущей директории "." $ stat -c "LinkCount:%h iNode:%i" . LinkCount:2 iNode:522366 В обоих случаях мы видим тот же номер iNode. То есть test и "." внутри него — это та же самая директория. И "." это не какой-то специальный алиас баша, и даже не операционной системы. Это просто жесткая ссылка на уровне файловой системы. Проверим еще один момент: # создаем поддиректорию test2 внутри нашего test $ mkdir test2 # заходим в поддиректорию test2 $ cd test2 # смотрим статистику о родительской директории ".." $ stat -c "LinkCount:%h iNode:%i" .. LinkCount:3 iNode:522366 ".." имеет тот же iNode 522366, соответствующий директории test. И счетчик ссылок увеличился.