💬 Вопрос на собеседовании для сисадмина

Давайте разберем один из частых вопросов, который может быть задан на собеседовании и как на него отвечать.

❓Вопрос: Для чего нужна переменная окружения PATH?

✅Ответ: Переменная окружения PATH содержит абсолютные пути директорий, в которых производится поиск исполняемых файлов при вводе команд

5 крутых вещей, которые можно сделать с помощью Windows PowerShell

Если PowerShell кажется вам сложным для повседневных задач, "круто" может не быть первым словом, которое вы ассоциируете с ним.

Однако PowerShell является мощным инструментом, который можно использовать для автоматизации и упрощения различных задач в Windows, Exchange, Windows Server и SQL Server.

Я покажу вам несколько хитростей, которые пригодятся в решении нудных задач на работе. 

Кроме того, вы будете выглядеть намного круче в глазах коллег, когда сможете решить проблему из командной строки.

1️⃣Отчёты о подключённых USB-устройствах

PowerShell позволяет работать с WMI (Windows Management Instrumentation) для получения информации о подключённых USB-устройствах на локальной или удалённой системе:

Get-WmiObject Win32_USBControllerDevice -ComputerName DBSERVER1 | Format-List Antecedent, Dependent

Это удобный способ ведения отчётов о подключённых USB-устройствах на серверах.

2️⃣ Выполнение задач CMD в PowerShell

Вы можете выполнить все те же задачи, что и в CMD, используя PowerShell. Это поможет быстрее освоиться с интерфейсом PowerShell.

Для быстрого запуска PowerShell можно назначить сочетание клавиш, например, Ctrl + Shift + P.

3️⃣ Принудительное завершение процесса

Если зависла служба Windows, вы можете завершить процесс через PowerShell так же, как в Диспетчере задач:

Get-Process BadTh* | Stop-Process -Id (Get-Process BadTh*).Id

Эта команда принудительно завершит процесс BadThread.

4️⃣ Использование PSDrive

Команда PSDrive позволяет просматривать объекты Windows за пределами традиционных сетей и дисков.

Например, для доступа к реестру используйте:

Set-Location HKLM:

Это позволит вам просматривать и управлять объектами реестра.

5️⃣ Экспорт NTFS-разрешений

PowerShell позволяет экспортировать список NTFS-разрешений для аудита или анализа:

Get-Acl N:\Data

Для рекурсивного экспорта разрешений используйте:

Get-ChildItem N:\Data -Recurse | Get-Acl

Результаты можно сохранить в CSV или текстовый файл.

Причины, почему кажется, что у людей, работающих с ПК, есть свободное время.

😁 У сисадмина — всё перезагружается.

Релиз Apache Kafka 3.8

В конце июля 2024 года состоялся релиз Apache Kafka 3.8. 

Этот мощный инструмент для построения конвейеров данных в реальном времени и event-driven приложений теперь поддерживает JBOD в многоуровневом хранилище.

А также имеет детальную настройку уровня сжатия, улучшения безопасности и возможность удаления неоднозначных конфигураций.

Основные изменения и дополнения в Apache Kafka 3.8:

⏺Поддержка JBOD: Теперь можно вести несколько каталогов журналов для каждого брокера, что позволяет запускать крупные развёртывания с несколькими устройствами хранения на разных узлах кластера Kafka.

⏺Настройка уровня сжатия: Добавлены параметры для кодеков gzip, lz4 и zstd: compression.gzip.level, compression.lz4.level, compression.zstd.level. Кодек snappy исключён.

⏺Повтор загрузки при обновлении метаданных: Если ни один из известных брокеров недоступен.
Улучшения безопасности: Ограничение файлов, доступных поставщикам конфигурации файлов и каталогов, чтобы избежать неограниченного доступа. Добавлена конфигурация remote.fetch.max.wait.ms для настройки тайм-аута удалённой выборки.

⏺Совместное использование хранилища состояний в Kafka Streams: Теперь данные можно использовать в нескольких приложениях без дублирования на уровне топика. Также добавлены новые метрики для поиска утечек памяти и проблем с производительностью.

⏺Изменение поведения свойства tasks.max.enforce в Kafka Connect: При установке в значение false, коннектор мог генерировать больше задач, чем максимальное значение. Теперь это свойство объявлено устаревшим и будет удалено в следующем мажорном релизе.

В разработке Apache Kafka 3.8 приняли участие более 200 контрибуторов и сторонних разработчиков.

Еще 5 крутых вещей, которые можно сделать с помощью Windows PowerShell

Первая часть тут

6️⃣ PowerShell 2.0 и графический интерфейс

PowerShell 2.0 включает графический интерфейс и возможность сохранять скрипты как .ps1 файлы. Перед началом работы настройте политику исполнения:

Set-ExecutionPolicy RemoteSigned

7️⃣ Горячие клавиши в PowerShell GUI

В графическом интерфейсе PowerShell доступны горячие клавиши, такие как F5 для выполнения, Ctrl + S для сохранения, Ctrl + Z для отмены, Ctrl + C для копирования и Ctrl + V для вставки.

8️⃣ Фоновый режим для длительных задач

Запускайте длительные задачи в фоновом режиме, чтобы не ждать их завершения:

Start-Job -ScriptBlock { <команда> }

Для проверки состояния задач используйте:

Get-Job

9️⃣ Временные метки для вывода команд

Добавляйте временные метки к выводу команд для отслеживания их выполнения:

"$(Get-Date -Format g) Start logging"

1️⃣0️⃣ Вывод результатов с задержкой

Используйте функцию EasyView для постепенного вывода результатов на экран:

function EasyView { process { $_; Start-Sleep -Seconds 0.5 } }
Get-ChildItem N:\Data | EasyView

Эта функция позволяет просматривать результаты по одной строке каждые полсекунды.

Мониторинг пропускной способности и скорости сети в Linux

Сегодня я расскажу о различных инструментах с открытым исходным кодом, которые помогут вам проверить скорость интернета и пропускную способность в Linux

Speedtest

Speedtest — это популярный инструмент для проверки скорости загрузки и скачивания, используя сервис speedtest.net. Этот инструмент реализован на Python и доступен через apt и pip.

Вы можете использовать его как командную строку или включить в скрипты Python.

Установка:

sudo apt install speedtest-cli

Или через pip:

sudo pip3 install speedtest-cli

Запуск:

speedtest

Вы увидите результат, например:

Download: 68.62 Mbit/s
Upload: 10.93 Mbit/s

NetHogs

NetHogs — это утилита для мониторинга полосы пропускания, которая группирует трафик по процессам.

Установка для Debian/Ubuntu:

apt install nethogs

Для RHEL/CentOS:

yum install epel-release
yum install nethogs

Запуск:

sudo nethogs

Можно указать конкретный интерфейс:

sudo nethogs eth0

nload

nload позволяет отслеживать сетевой трафик и использование полосы пропускания в режиме реального времени.

Установка для Debian/Ubuntu:

sudo apt install nload

Для RHEL/CentOS:

yum install epel-release
yum install nload

Запуск:

nload

CBM — Color Bandwidth Meter

CBM — простой инструмент, который отображает сетевой трафик на всех подключенных устройствах.

Установка для Debian/Ubuntu:

sudo apt install cbm -y

Для RHEL/CentOS:

yum install epel-release
yum install cbm

Запуск:

cbm

vnStat

vnStat — монитор сетевого трафика, который сохраняет данные в собственной базе и может отображать статистику через веб-интерфейс.

Установка для Debian/Ubuntu:

sudo apt install vnstat

Для RHEL/CentOS:

sudo yum install epel-release
sudo yum install vnstat

Запуск:

vnstat

slurm

slurm — инструмент мониторинга сетевой нагрузки, который отображает результаты в графике ascii.

Установка для Debian/Ubuntu:

sudo apt-get install slurm

Для RHEL/CentOS:

sudo yum install slurm -y

Запуск:

slurm

⚡️Все эти инструменты помогут вам эффективно управлять сетью и своевременно выявлять любые проблемы с пропускной способностью или скоростью.

Как настроить редирект с HTTP на HTTPS в Nginx

Nginx — это мощный веб-сервер и прокси-приложение, используемый на Linux для управления веб-трафиком.

Одной из его полезных функций является возможность перенаправления незашифрованного трафика HTTP на защищённый HTTPS.

Расскажу, как настроить редирект с HTTP на HTTPS с помощью Nginx.

Что потребуется

• Сервер Linux с установленным Nginx
• Учетная запись с привилегиями sudo
• Удаленный доступ к веб-серверу (если вы не работаете непосредственно на сервере)
• Доступ к терминалу (Ctrl-Alt-T или Ctrl-Alt-F2)

⏺Настройка редиректа с HTTP на HTTPS

Для того чтобы принудительно перенаправить весь HTTP-трафик на HTTPS, нужно отредактировать файл конфигурации Nginx.

Найдите файл конфигурации

Файл конфигурации Nginx обычно находится в каталоге /etc/nginx/sites-available. Если его там нет, попробуйте следующие пути:

/etc/nginx/nginx.conf
/usr/local/nginx/conf
/usr/local/etc/nginx

⏺Откройте файл для редактирования

Откройте файл конфигурации в текстовом редакторе с помощью команды:

sudo nano /etc/nginx/sites-available/server.conf

Замените путь на фактическое местоположение вашего файла конфигурации.

⏺Вставьте код для редиректа

Чтобы перенаправить весь HTTP-трафик на HTTPS, вставьте следующий блок кода:

server {
    listen 80 default_server;
    server_name _;
    return 301 https://$host$request_uri;
}

⏺Разбор команд:

listen 80: перехватывает весь HTTP-трафик через порт 80.
server_name _;: применяет правила к любому имени хоста.
return 301: сообщает браузеру и поисковым системам, что это постоянное перенаправление.
https://$host$request_uri;: перенаправляет пользователя на версию страницы с HTTPS.

⏺Перезапустите службу Nginx

После редактирования и сохранения файла конфигурации перезапустите Nginx:

sudo service nginx restart

В следующем посте продолжим разбирать настройку и все нюансы

💬 Вопрос на собеседовании для сисадмина

Давайте разберем один из частых вопросов, который может быть задан на собеседовании и как на него отвечать.

❓Вопрос: Что такое системный вызов, какие они бывают?

✅Ответ: Системный вызов - обращение программы к ядру операционной системы для выполнения какой-либо операции.

В Unix, Unix-like и других POSIX-совместимых операционных системах популярными системными вызовами являются:

• open
• read
• write
• close
• wait
• exec
• fork
• exit
• kill

Micron анонсировала твердотельный накопитель PCIe Gen 6 со скоростью 26 ГБ/с

Micron представила первые в отрасли твердотельные накопители на базе PCIe Gen 6, способные достигать скорости последовательного чтения более 26 ГБ/с.

Это почти вдвое быстрее, чем у существующих моделей на базе PCIe Gen 5, которые в среднем достигают пиковой скорости около 14 ГБ/с.

Например, накопитель Micron Crucial T705 предлагает скорость последовательного чтения до 14 500 МБ/с.

Стоит отметить, что на сегодняшний день ни одна потребительская платформа не поддерживает PCIe Gen 6 — новейшие материнские платы от Intel и AMD совместимы только с твердотельными накопителями PCIe Gen 5.

Новый накопитель Micron ориентирован прежде всего на центры обработки данных и устройства, задействованные в сложных архитектурах систем искусственного интеллекта (ИИ).

Подобно потребительскому накопителю T705, Micron недавно представила модель 9550, которую компания называет «самым быстрым в мире твердотельным накопителем для центров обработки данных», с ёмкостью 30,72 ТБ.

В это же время компания Addlink Technology также анонсировала новые SSD серии D60 и D20 повышенной ёмкости, предназначенные для сетевых хранилищ.

🔥 Эти накопители используют интерфейсы PCIe 4.0 x4 (NVMe 1.4) и более медленный SATA-3, с доступными вариантами ёмкости 480, 960 и 1920 Гбайт.

Использование опций команды apt-get для очистки системы

Большинство из нас, работающих с системами на базе Debian, регулярно используют команду apt-get для установки и обновления пакетов. Но как часто мы задумываемся об очистке системы?

В этом посте мы рассмотрим три полезные команды для очистки ненужных файлов: apt-get clean, apt-get autoclean и apt-get autoremove.

1️⃣ apt-get clean

Команда apt-get clean очищает локальный репозиторий от извлеченных файлов пакетов, находящихся в каталоге /var/cache/apt/archives/. Она удаляет все файлы пакетов, кроме файлов блокировки и пустых подкаталогов.

Эта команда полезна для освобождения дискового пространства, особенно если вы часто устанавливаете и удаляете пакеты.

Например, до выполнения команды apt-get clean в каталоге /var/cache/apt/archives/ могут находиться следующие файлы:

/var/cache/apt/archives/db6.1-util_6.1.27+dfsg1-0.7ubuntu2_amd64.deb
/var/cache/apt/archives/db-util_2%3a6.121~exp1ubuntu1_all.deb
/var/cache/apt/archives/lock
/var/cache/apt/archives/postfix_3.4.6-2ubuntu2_amd64.deb
/var/cache/apt/archives/sasl2-bin_2.2.25+dfsg-1build2_amd64.deb

После выполнения команды:

sudo apt-get clean

Этот каталог будет очищен, и оставлены будут только файлы блокировки и пустые подкаталоги.

2️⃣ apt-get autoclean

Команда apt-get autoclean похожа на clean, но она удаляет только те пакеты, которые больше не могут быть загружены из репозиториев и, следовательно, больше не нужны. Это предотвращает переполнение кэша устаревшими файлами.

Выполнение команды:

sudo apt-get autoclean

очистит кэш от бесполезных пакетов, оставляя только актуальные и доступные для загрузки файлы.

3️⃣ apt-get autoremove

Команда apt-get autoremove удаляет пакеты, которые были установлены автоматически как зависимости для других пакетов, но теперь больше не требуются.

Использование этой команды после удаления пакетов помогает поддерживать чистоту системы и предотвращает накопление ненужных файлов.

Пример использования:

sudo apt-get autoremove

После выполнения команды вы увидите список пакетов, которые больше не нужны, например:

The following packages were automatically installed and are no longer required:
g++-8 gir1.2-mutter-4 libapache2-mod-php7.2 libcrystalhd3
libdouble-conversion1 libgnome-desktop-3-17 libigdgmm5 libllvm8
liblouisutdml8 libmutter-4-0 libmysqlclient20 libpoppler85 linsydc++-8-dev
libtagc0 libvpx5 libx265-165 php7.2 php7.2-cli php7.2-common php7.2-json
php7.2-opcache php7.2-readline
Use 'sudo apt-get autoremove' to remove them.

🔥 Эти простые команды помогут вам поддерживать вашу систему на базе Debian в чистоте и порядке, освобождая дисковое пространство и оптимизируя работу системы.

7 полезных команд в Linux

Рассмотрим еще 7 команд для эффективной работы в системе Linux.

⏺s2p — конвертер sed-скриптов в Perl.

⏺noscriptreplay — воспроизведение активности терминала, сохраненной с помощью команды noscript.

⏺sdiff — находит различия между двумя файлами и объединяет их в интерактивном режиме.

⏺seq — генерирует последовательность чисел с заданным шагом.

⏺setfacl — настройка списков контроля доступа к файлам.

⏺shred — полное удаление файла с жесткого диска.

⏺smbclient — ftp-подобный клиент для доступа к ресурсам SMB/CIFS.