BashMaster

2 канала для изучения IT-технологий в области Администрирования и ИБ: 💻 @admguides — авторские гайды по настройке серверов и программ на ОС Windows/Linux. 📖 @admbooks — электронные книги по компьютерным технологиям и информационной безопасности.

Как вывести список директорий используя ls в Bash Для обработки в скриптах может понадобиться в определённой директории получить только список только папок без файлов. Далее показано, как это сделать разными способами. 1. С помощью ls увидеть все папки кроме скрытых */ - это шаблон, который соответствует всем подкаталогам в текущем каталоге (* будет соответствовать всем файлам и подкаталогам; / ограничивает его каталогами). Точно так же, чтобы вывести список всех подкаталогов в /home/mial/bin/aur, используйте:

ls -d /home/mial/bin/aur/*/

Чтобы вывести только каталоги в текущей папке:

ls -d */

Чтобы вывести данные в столбик:

ls -1 -d */

2. С помощью ls увидеть все папки вместе со скрытыми Обратите внимание, что */ не найдёт любые скрытые папки. Чтобы включить и их, укажите их явно:

ls -d .*/ */

3. С помощью ls и cut Следующий способ показывает каталоги только в текущей папке, но делает это в виде столбика:

ls -d */ | cut -f1 -d'/'

Чтобы показать вместе со скрытыми каталогами:

ls -d .*/ */ | cut -f1 -d'/'

Чтобы показать только директории в папке /home/mial/bin/aur:

ls -d /home/mial/bin/aur/*/ | cut -f1 -d'/'

4. Используя ls и grep В этом варианте применяется фильтрация вывода с помощью grep. Этот способ имеет ограничение — папки должны выводиться в виде подробного списка:

ls -l | grep "^d"

Чтобы показать вместе со скрытыми папками:

ls -al | grep "^d"

Для вывода только имён директорий (возможны проблемы с директориями, имеющими пробелы в названиях):

ls -l | grep "^d" | cut -f 10 -d ' '

🔨 bash_help

Bash скрипт для сканирования диапазона портов Наш скрипт будет принимать два аргумента – IP-адрес для сканирования и диапазон портов для сканирования.

#!/bin/bash

ip=$1
startport=$2
endport=$3

function portscan {
    for ((counter=$startport; counter<=$endport; counter++))
    do
        (echo > /dev/tcp/$ip/$counter) > /dev/null 2>&1 && echo "$counter open"
    done
}

portscan

Для использования необходимо предоставить ему права на выполнение и запустить его с IP-адресом и диапазоном портов для сканирования. - Сохраните скрипт в файл, например portscan.sh - Сделайте скрипт исполняемым: chmod +x portscan.sh - Запустите скрипт с IP-адресом и диапазоном портов: ./portscan.sh 192.168.1.1 20 80 - Будет произведено сканирование портов с 20 по 80 на IP-адресе 192.168.1.1. 🔨 bash_help

Информационная безопасность и OSINT. 2 полезных и крупных ресурса в TG: 📚 @it_secur — Редкая литература для специалистов в области информационной безопасности любого уровня и направления. Читайте, развивайтесь, практикуйте. 👨🏻‍💻 @infosecurity — Самый крупный ресурс в Telegram, посвященный этичному хакингу, OSINT и Cоциальной Инженерии.

Уроки по Bash скриптам Видеоуроки: 1 — Привет Мир 2 — Переменные 3 — Команда read и Параметры 4 — Условный оператор if 5 — Условный оператор case 6 — Вложенные условия 7 — Массивы 8 — Циклы 9 — Функции 10 — Рекурсия 11 — Перенаправление ввода/вывода 📹 Плейлист на YouTube 🔨 bash_help

Хочешь быть на шаг впереди киберпреступников? Присоединяйся к каналу Hack Proof и узнавай о реальных кейсах в сфере Информационной безопасности. Мы погружаемся в мир OSINT, социальной инженерии и обозреваем инструменты с github, чтобы помочь тебе защититься и сохранить анонимность в сети!

Как в Bash реализовать «Нажмите любую кнопку для продолжения» Иногда нужно приостановить вывод в скрипте, чтобы обратить внимание пользователя на информацию и убедиться, что пользователь увидел её (или имел возможность её увидеть). В Bash это можно сделать с помощью утилиты read. Эта утилита читает строку из стандартного ввода. Пример использования: read -p "Нажмите ENTER для продолжения" Эта команда позволит пользователю продвинуться далее (а скрипт продолжит выполнение) после того, как пользователь нажмёт кнопку ENTER. Если вам нужно, чтобы для продолжения можно было нажать любую кнопку, то используйте следующую конструкцию: read -n 1 -s -r -p "Нажмите любую кнопку для продолжения" В этой команде следующее значение опций: -n определяет количество символов, после которого будет остановлено чтение. По умолчанию чтение останавливается при вводе разделителя строк (например, кнопкой ENTER). В нашем случае команда read перестаёт считывать вводимые данные после первого символа -s скрывает пользовательский ввод -r приводит к тому, что строка будет интерпретирована как «сырая» (без учёта экранирования обратными слэшами). То есть обратным слэшам не будет позволено экранировать символы -p как и в первом примере, содержит сообщение, показываемое пользователю. 🔨 bash_help

У Skillfactory бесплатный курс с профориентацией в IT.  Забегайте: free.skillfactory.ru/itrentgen Реклама. ООО "СКИЛФЭКТОРИ". ИНН 9702009530. erid: 2RanynDRnaL

Как преобразовать строку в нижний регистр В этой заметке будет показано, как преобразовать строку в нижний регистр (строчные буквы). Чтобы конвертировать строку в маленькие буквы независимо от её текущего регистра, используйте одну следующую команду:

a="Hi all"
echo "${a,,}"
hi all

Начиная с Bash 5.1 имеется параметр преобразования L, который предназначен для перевода строки в нижний регистр:

${var@L}

Пример:

v="heLLo"
echo "${v@L}"
hello

🔨 bash_help

Как отключить историю оболочки bash в Linux Оболочка bash сохраняет введенные из терминала команды в файл истории. Вы можете вызвать список команд, введенных ранее. Команда history отображает команды bash, которые вы выполнили ранее. Эти команды составляют историю команд. По умолчанию в истории отображается нумерованный список из 500 последних команд, начиная с самых ранних и заканчивая самыми последними. Значение переменной HISTSIZE используется в качестве числа команд для сохранения в списке истории. Как отобразить текущую историю? Нужно просто ввести команду history: history history | less history | more history | grep 'find' Как узнать количество сохраненных в истории команд? Используйте команду echo или printf : echo "$HISTSIZE" или printf "%d\n" $HISTSIZE Где хранится история bash команд? Инициализируется история из файла с именем переменной HISTFILE. По умолчанию используется файл ~/.bash_history. Для просмотра текущих настроек можно использовать: echo "$HISTFILE" или printf "%s\n" "$HISTFILE" Как отключить историю оболочки BASH на Linux или Unix? Переменную HISTFILE можно удалить, набрав следующую команду сброса:

unset HISTFILE

Добавьте указанную выше строку в конец нового файла /etc/profile.d/disable.history.sh или ~/.bash_profile: echo 'unset HISTFILE' >> /etc/profile.d/disable.history.sh или

echo 'unset HISTFILE' >> ~/.bash_profile

Как навсегда отключить историю bash с помощью команды set? Другой вариант — передать параметр +o history встроенной команде set:

set +o history

Аналогично добавьте set +o history в конец нового файла /etc/profile.d/disable.history.sh или ~/.bash_profile. Как очистить историю bash? Введите следующую команду в текущем сеансе:

history -c

Чтобы удалить одну команду под номером 42 из истории в Linux / Unix: history -d 42 🔨 bash_help

Пара полезных каналов для тех, кто увлекается кибербезом: 🧑‍💻 Этичный Хакер - Авторский канал c инструкциями по пентесту, деанону, СИ, защите устройств и бесплатными курсами по информационной безопасности. 🏳️ Mr. Robot - Реальные кейсы, OSINT, обзоры инструментов с github, гайды по анонимности.

Импорт фотографий из командной строки Linux Представьте что у нас хранятся сотни тонн всевозможных снимков в совершенно разных местах, на разных носителях. Где-то они были разобраны по годам и месяцам, а где-то просто “свалены” в кучу и оставлены до лучших времен. Мы запускаем программу указываем ей начальную точку, откуда начинать, и идем заниматься своими делами. Скрипт сканирует все директории какие встретит на своем пути, включая и вложенные, в поисках фотографий. После завершения работы программы получаем фотоальбом с отсортированными снимками по годам и месяцам в каждом году, т.е. в виде: год / месяц / снимки. Да еще и без дубликатов фотографий. А сами снимки будут переименованы из непонятных типа IMG_654372984.jpg или AB54645456.jpg во вполне читабельные и понятные имена вида YYYYMMDD_hhmmss.jpg. При этом не пострадает ни один оригинал фотографии. 🌐 Ссылка на скрипт 🔨 bash_help

Как отлаживать bash-script-ы по шагам Волшебная строчка, которую нужно добавить после #!/bin/bash, чтоб скрипт можно было отлаживать по шагам #!/bin/bash trap 'echo "# $BASH_COMMAND";read' DEBUG echo line1 echo line2 echo line3 Процесс отладки Запускаем скрипт, перед выполнением каждой команды выводится то, что будет исполняться, затем интерпретатор начинает ожидать нажатия клавиши <ENTER>. Если понимаем, что что-то пошло не так, нажимаем Ctrl+C и выходим из отладки. Ингредиенты - команда trap, которая умеет перехватывать разные сигналы и в нашем случае она перехватывает сигнал DEBUG, посылаемый перед выполнением команды - команда read, которая умеет ожидать ввода чего-нибудь с клавиатуры (в данном случае нам нужно только либо ENTER либо Ctrl+C - переменная окружения $BASH_COMMAND, валидная внутри обработчика команды trap. 🔨 bash_help

Как повысить эффективность Bash-скриптов Bash-скрипты — эффективное решение для автоматизации рутинных задач, но не всегда самое простое. Объемные сценарии характеризуются низкой производительностью и сложны для чтения. В этой статье мы рассмотрим, как оптимизировать работу, упростить с помощью утилит sed и awk и не совершать очевидных ошибок в написании скриптов. Инструменты обработки текста значительно расширяют возможности оболочки bash. Но с командами sed и awk можно не только редактировать вывод и файлы, включая сами скрипты. Утилиты служат наиболее эффективным решением некоторых задач автоматизации процессов. Sed — потоковый редактор файлов, позволяющий сэкономить время на выполнении простых функций: удаление, замена, вставка текста. Awk — язык программирования, синтаксис которого напоминает языки C и Perl. Хотя awk работает по тому же «построчному» принципу, но значительно превосходит sed по функциональным возможностям. При написании bash-скриптов инструмент удобно использовать для работы со структурированными данными, так как awk воспринимает поля (область текста, отделенную пробелами или табуляцией), переменные, арифметические функции и др. 🌐 Ссылка на статью 🔨 bash_help

Где найти лучшие курсы для сисадминов? Tutortop — образовательный маркетплейс №1, где представлено свыше 5000 курсов от более чем 300 школ и все их можно сравнить по рейтингу, цене и отзывам, а еще купить дешевле, чем напрямую 🔥 Ребята из tutortop собрали для вас подборку из лучших курсов по системному администрированию по мнению их пользователей: — Системный администратор на Linux с углубленным изучением ИБ от Академии АйТи. Рейтинг 4.7 из 5. — Специалист DevSecOps от Академия АйТи. Рейтинг 4.7 из 5. — SQL с нуля для анализа данных от Eduson. Рейтинг 4.8 из 5. Скидка 5% по промокоду TUTORTOP до 01.08 — Курс «Веб-разработчик с индивидуальным сопровождением и гарантией трудоустройства» от SkyPro. Рейтинг 4.9 из 5. Скидка 15% по промокоду TUTORTOP до 01.08 ⚡️Получите скидку до 10 000 ₽ на все эти и десятки других курсов по IT на маркетплейсе tutortop!

Совсем немного про перенаправления <, << и <<< Первое перенаправление "<" из именованного потока или из файла. Давно известное и годами перетёртое мозолями суровых админов. Поэтому сразу перейдем к двум другим, которые встречаются реже. <<, так называемая конструкция here document. Позволяет разместить многострочный текст прямо в скрипте и перенаправить его, словно из внешнего потока. $ cat <<EOF \ hello, \ World \ EOF hello, World Cat читает данные из файла. Мы перенаправляем ему в STDIN файл — конструкция here document генерит его прямо на месте, поэтому не нужно создавать отдельный файл. Это действительно удобный способ, чтобы вызвать какую-то внешнюю утилиту и скормить ей много данных. Но можно пользоваться и <<<. Во-первых, <<< лучше читается, а во-вторых через <<< тоже можно передавать многострочные данные. Сравните два примера на читабельность:

#!/bin/bash
. load_credentials

sqlplus -s $connstring << EOF
set line 1000
select name, lastlogin from users;
exit;
EOF

#!/bin/bash
. load_credentials

SLQ_REQUEST="
set line 1000
select name, lastlogin from users;
exit;"

sqlplus -s ${connstring} <<<"${SQL_REQUEST}"

Второй вариант выглядит потенциально удобнее. Мы можем задать многострочную переменную в удобном для нас месте, и использовать ее в <<<. А при коротком запросе все выглядит вообще прекрасно: #!/bin/bash . load_credentials sqlplus -s ${connstring} <<<"select name, lastlogin from users;exit;" Если оперировать скриптами побольше, и запросами подлиннее, то использование <<< с перенаправлениеим из переменных (а сами переменные мы можем объявить заранее, в специально отведенном и оборудованом комментариями месте), то код получается гораздо читабельнее. 🔨 bash_help

Можно ли создать hardlink на папку? Конечно можно! Но не всем. POSIX файловые системы активно пользуются хардлинками и мы их все время видим! Пример: # создаем директорию test $ mkdir test # выводим информацию о количестве ссылок и номер iNode для test $ stat -c "LinkCount:%h iNode:%i" test LinkCount:2 iNode:522366 Как? Только создали и уже два линка? # заходим в созданную директорию test $ cd test # внутри выводим статистику для текущей директории "." $ stat -c "LinkCount:%h iNode:%i" . LinkCount:2 iNode:522366 В обоих случаях мы видим тот же номер iNode. То есть test и "." внутри него — это та же самая директория. И "." это не какой-то специальный алиас баша, и даже не операционной системы. Это просто жесткая ссылка на уровне файловой системы. Проверим еще один момент: # создаем поддиректорию test2 внутри нашего test $ mkdir test2 # заходим в поддиректорию test2 $ cd test2 # смотрим статистику о родительской директории ".." $ stat -c "LinkCount:%h iNode:%i" .. LinkCount:3 iNode:522366 ".." имеет тот же iNode 522366, соответствующий директории test. И счетчик ссылок увеличился.

В Telegram набирает популярность канал основателя IT-компании, где можно ощутить настоящую жизнь айтишки. Подпишитесь на канал CEO, чтобы получать инсайды.

Скрипт для запуска и остановки торрент-клиента во время простоя машины

#!/bin/bash

IDLE=600000
STOPCMD="transmission-remote -S"
STARTCMD="transmission-remote -s"

STOPPED="yes"
while true; do
    if [ `xprintidle` -gt $IDLE ]; then
        if [ $STOPPED = "yes" ]; then
            $STARTCMD
            STOPPED="no"
        fi
    else
        if [ $STOPPED = "no" ]; then
            $STOPCMD
            STOPPED="yes"
        fi
    fi
    sleep 60
done

Скрипт уходит в бесконечный цикл, каждую минуту проверяя, сколько миллисекунд прошло с момента, когда юзер что-либо делал (для этого используется команда xprintidle). Если прошло уже 600 000 мс (десять минут), скрипт выполняет команду, указанную в переменной STARTCMD. В противном случае он выполнит команду STOPCMD, но только тогда, когда до нее была выполнена команда STARTCMD. Если кратко: ничего не делаешь за компом десять минут — запускается STARTCMD, в данном случае это команда запуска всех закачек с помощью Transmission, если нет — приостановка всех закачек. Не любишь Transmission? Нет проблем, вот команды для Deluge: STOPCMD="deluge-console pause \*" STARTCMD="deluge-console resume \*"

Какой простой способ отрезать расширение у файла? Стандартный и популярный способ — использовать утилиту basename, который отрезает весь путь слева, а если указать дополнительный параметр, то дополнительно отрежет справа и суффикс. Например пишем file.txt и суффикс .txt $ basename file.txt .txt file Но можно не запускать целый отдельный процесс для такого простого действия, и обойтись внутренними преобразованиями в bash (bash variable expansions):

$ filename=file.txt; echo ${filename%.*}
file

Или наоборот, отрезать имя файла и оставить только расширение: filename=file.txt; echo ${filename##*.} txt Как это работает? % — отрезает все символы с конца до первого подходящего паттерна (поиск идет справа налево) %% — отрезает все символы с конца до последнего подходящего паттерна (справа налево) # — отрезает с начала до первого подходящего паттерна (поиск идет слева направо) ## — отрезает с начала до последнего подходящего паттерна (слева направо) Таким образом, "${filename%.*}" означает — начиная справа налево проходим все символы (*) и доходим до первой точки. Отрезаем найденное. Если бы мы использовали "${filename%%.*)", то в файлах, где точка встречается больше одного раза, у нас бы оно дошло до последней точки, отрезав лишнее. $ filename="file.hello.txt"; echo "${filename%%.*}" file