⚙️ Резервное копирование данных сервера в облачные хранилища через домашний интернет

✔️Прежде чем приступить к техническим аспектам, необходимо определить объем данных, которые требуют регулярного резервного копирования. Современные домашние серверы могут содержать терабайты информации: веб-сайты, базы данных, медиафайлы, конфигурационные файлы и пользовательские данные.

➡️ При выборе облачного хранилища для бэкапов стоит учитывать несколько ключевых факторов:
💠Стоимость хранения данных — большинство провайдеров предлагают первые гигабайты бесплатно, но за объемы свыше 100 ГБ придется платить ежемесячно.
💠Скорость загрузки — зависит не только от выбранного сервиса, но и от качества интернет-соединения. Домашний интернет билайн и другие крупные провайдеры обеспечивают стабильную скорость аплоада, что критично для больших объемов данных.
💠Географическое расположение серверов — для российских пользователей предпочтительны сервисы с серверами в России или близлежащих странах.

▶️Один из главных вопросов при организации автоматического резервного копирования — сколько времени потребуется для загрузки данных и какой объем трафика будет потребляться ежемесячно.

▶️Для расчета времени используется простая формула — Время = Объем данных / Скорость загрузки
Например, при объеме бэкапа 50 ГБ и скорости аплоада 10 Мбит/с

50 ГБ = 50 * 1024 * 8 = 409600 Мбит
409600 / 10 = 40960 минут = 682 часа ≈ 28 дней

▶️Для оптимизации времени и трафика рекомендуется использовать инкрементальные бэкапы. Принцип работы прост — полный бэкап создается один раз, а затем загружаются только изменившиеся файлы.

➡️ Популярные инструменты для инкрементального резервного копирования:
💠rsync — классический инструмент Unix-систем, поддерживает сжатие и шифрование данных при передаче.
💠rclone — современная утилита с поддержкой множества облачных хранилищ: Google Drive, Dropbox, Yandex.Disk, Amazon S3.
💠duplicity — специализированное решение для шифрованных бэкапов с поддержкой инкрементального копирования.

▶️Для автоматизации бэкапов используется системный планировщик cron.

# Редактируем задачи cron
crontab -e
# Добавляем строку для ежедневного бэкапа в 2:00 ночи
0 2 * * * /usr/local/bin/backup_noscript.sh >> /var/log/backup.log 2>&

▶️Пример скрипта для автоматического бэкапа с использованием rclone:

#!/bin/bash
# Переменные
SOURCE_DIR="/var/www"
BACKUP_NAME="server_backup_$(date +%Y%m%d)"
REMOTE_PATH="mycloud:backups/"
# Создание архива
tar -czf "/tmp/${BACKUP_NAME}.tar.gz" ${SOURCE_DIR}
# Загрузка в облако
rclone copy "/tmp/${BACKUP_NAME}.tar.gz" ${REMOTE_PATH}
# Удаление локального архива
rm "/tmp/${BACKUP_NAME}.tar.gz"
# Очистка старых бэкапов (старше 30 дней)
rclone delete ${REMOTE_PATH} --min-age 30d

▶️Критически важно отслеживать успешность выполнения бэкапов. Для этого можно использовать:
💠Email-уведомления
💠Telegram-бот
💠Лог-файлы

▶️Регулярное тестирование восстановления данных — обязательная часть стратегии резервного копирования. Рекомендуется ежемесячно проводить полное восстановление на тестовом сервере для проверки целостности бэкапов.

➡️ Процедура тестирования включает:
💠Загрузку случайного бэкапа из облачного хранилища
💠Восстановление данных на отдельном сервере
💠Проверку работоспособности восстановленных сервисов
💠Документирование результатов тестирования

➡️ Для снижения нагрузки на интернет-канал и ускорения процесса резервного копирования рекомендуется:
💠Сжатие данных — использование алгоритмов сжатия может сократить размер бэкапов на 30-70%.
💠Планирование времени выполнения — запуск бэкапов в ночное время, когда сетевая нагрузка минимальна.
💠Дедупликация — исключение дублирующихся файлов из бэкапов.
💠Bandwidth throttling — ограничение скорости загрузки для предотвращения влияния на основную работу сервера.

🖼️ Дочитать статью в источнике

🔨 bash_help

⚙️ tldr-pages — шпаргалки по консольным командам

✔️Огромная коллекция кратких справок по CLI-командам для всех популярных систем: Linux, macOS, Windows. Без длинных мануалов, только чёткие примеры использования. Полезно для разработчиков, DevOps, админов и всех, кто работает в терминале.

➡️ Что важно:
💠9 000+ команд с минимальными и понятными примерами
💠Поддержка Linux, macOS, Windows, Docker, Git, npm и многого другого
💠Быстрый поиск — находишь нужную команду за секунду

🐙 Перейти на Github

🔨 bash_help

⚙️ fzfm (Fuzzy Finder File Manager)

✔️Быстрый файловый менеджер для терминала, основанный на fzf и написанный на Bash.

➡️ Некоторые функции утилиты fzfm:
💠Мгновенный поиск и навигация по сложным структурам каталогов.
💠Просмотр файлов — просмотр кода с подсветкой синтаксиса, текстовых файлов и изображений непосредственно в терминале.
💠Операции с файлами — копирование, вырезание, вставка и безопасное удаление файлов с помощью ключевых комбинаций без выхода из менеджера.
💠Быстрое создание — создание новых файлов и каталогов на лету.
💠Автоматическая обработка файлов — файлы открываются в соответствующем приложении (например, nvim для текста, sxiv для изображений, mpv для видео).
💠Многократный выбор — операции с несколькими файлами сразу.

🐙 Перейти на Github

🔨 bash_help

⚙️ Мониторинг использования swap в Linux

✔️Использование swap может указывать на нехватку оперативной памяти. Этот скрипт позволяет отслеживать текущий объём занятого swap, логировать превышения порога и помогает вовремя выявить проблемы с производительностью.

#!/bin/bash

LOG_FILE="/var/log/swap_monitor.log"
THRESHOLD_MB=100  # Порог использования swap в мегабайтах

echo "📊 Проверка использования swap... $(date)" | tee -a "$LOG_FILE"

# Получаем текущий объём используемого swap в МБ
USED_SWAP=$(free -m | awk '/Swap:/ {print $3}')

if [ "$USED_SWAP" -ge "$THRESHOLD_MB" ]; then
    echo "⚠️ Использование swap: ${USED_SWAP}MB (выше порога ${THRESHOLD_MB}MB)" | tee -a "$LOG_FILE"
else
    echo "✅ Swap в норме: ${USED_SWAP}MB" | tee -a "$LOG_FILE"
fi

echo "🔚 Проверка завершена." | tee -a "$LOG_FILE"

💠free -m быстро даёт информацию о RAM и swap
💠Скрипт логирует превышения порога — можно подключить к email/телеграм-уведомлениям
💠Удобен для серверов с ограниченной ОЗУ или подозрением на утечки памяти

▶️Добавьте в crontab для ежедневной проверки:

*/30 * * * * /path/to/swap_monitor.sh

➡️ Подходит для администраторов, DevOps-инженеров и всех, кто следит за стабильностью и производительностью системы.

🖼️ Ссылка на источник

🔨 bash_help

⚙️ CK-X Simulator

✔️Веб-симулятор экзаменов по Kubernetes, который можно без труда развернуть локально. Он позволяет отработать прохождение экзаменов CKAD, CKA и CKS, а также предоставляет подсказки, тайм-трекер и автоматическую проверку результатов

🐙 Перейти на Github

🔨 bash_help

⚙️ 101-linux-commands

✔️Электронная книга-шапаргалка с 101 базовой и продвинутой командой Linux. Проект ориентирован на пользователей, желающих улучшить навыки работы с Linux, и включает примеры использования, объяснения и полезные советы для каждой команды.

➡️ В книге рассмотрены, например:
💠Операции с файлами и каталогами: навигация (cd, pwd, ls), создание и удаление файлов и каталогов, копирование и перемещение файлов, поиск файлов, просмотр содержимого файла.
💠Управление процессами: просмотр запущенных процессов, убийство процессов, фоновые и фоновые задания.
Обработка текста: поиск с grep, манипуляция текстом с sed и awk, сортировка и фильтрация, подсчёт строк и слов.
💠Управление пакетами: установка пакетов, обновление системы, удаление пакетов, поиск пакетов.
💠Сетевые команды: тестирование подключения, загрузка файлов, SSH-соединения, проверка портов.
💠Управление пользователями: добавление пользователей, изменение паролей, управление группами, переключение пользователей.
💠Архивация и сжатие: создание архивов, извлечение файлов, форматы сжатия, операции по резервному копированию.

➡️ Для каждой команды в книге приведены:
💠описание команды;
💠пример использования;
💠общие опции;
💠практические заметки (при необходимости).

🐙 Перейти на Github

🔨 bash_help

⚙️ Csvlens

✔️Инструмент для просмотра CSV-файлов через командную строку. Работает аналогично команде less, но специально предназначен для данных CSV.

➡️ Некоторые возможности csvlens:
💠Просмотр данных с правильным выравниванием столбцов.
💠Фильтрация строк, содержащих конкретный текст.
💠Отображение только определённых столбцов.
💠Навигация по файлу: можно перемещаться влево и вправо, Ctrl + левая/правая стрелка — к началу или концу записи.
💠Выбор строки, столбца или отдельного элемента данных с помощью TAB. По умолчанию выбираются строки, затем столбцы, затем элементы внутри столбцов, затем снова строки.
💠Поиск — ввод "/" переводит в «режим поиска», можно искать по литералам или регулярным выражениям.
💠Возвращение содержимого выбранного элемента данных — после поиска и выбора элемента нужно нажать Enter, csvlens выйдет и вернёт полное содержимое.

🐙 Перейти на Github

🔨 bash_help

⚙️ Databasus

✔️Открытый инструмент для резервного копирования баз данных, в том числе PostgreSQL, MySQL, MariaDB и MongoDB.

▶️Основная задача проекта — делать копии баз данных по расписанию и сохранять их как локально, так и во внешних хранилищах. При этом уведомлять пользователя о статусе: когда копирование закончилось или провалилось.

➡️ Некоторые функции Databasus:
💠сохранение резервных копий локально, в S3, CloudFlare R2, Google Drive, Azure Blob Storage, NAS, через SFTP и rclone;
💠отправка уведомлений о статусе в Slack, Discord, Telegram, MS Teams, по почте и в настраиваемый вебхук;
💠разделение баз по проектам, выдача доступов другим пользователям и хранение аудит логов;
💠шифрование резервных копий и чувствительной информации (пароли, секреты и т. д.);
💠поддержка как self hosted баз, так и облачных.

🐙 Перейти на Github

🔨 bash_help

⚙️ reTermAI

✔️Интеллектуальный помощник для терминала, который использует ИИ для предоставления рекомендаций по командам на основе вашей истории.

▶️Он совместим с zsh и bash, предлагает поддержку частичного ввода, управление историей команд и выбор LLM. Пользователи могут легко адаптировать его под свои нужды.

🐙 Перейти на Github

🔨 bash_help

Сеньор за полгода? 📈

Эта девушка получила оффер в IT-компанию, хотя весь её опыт — пара курсов с ютуба 😱

Она воспользовалась ИИ-помощником и легко скрыла все свои пробелы в знаниях.

Теперь впереди: ⤵️
удалёнка, стартовое обучение и ставка 55$ в час.

Проходи собеседования вместе с Interview Ninja 🥷

Проверь успех на себе — есть 100 бесплатных запросов на день.

👉 @interview_ninja

⚙️ cheatsheets.zip

✔️Коллекция шпаргалок для разработчиков в одном месте.

▶️Сайт с быстрыми справочниками по языкам, фреймворкам, инструментам. Без воды — только синтаксис, команды, горячие клавиши. Когда нужно вспомнить regex, git-команду или синтаксис Python, а лезть в документацию лень.
​
➡️ Что есть:
💠Языки: Python, JavaScript, Go, Rust, C/C++, Java, PHP, Kotlin, Swift, Dart
💠Инструменты: Docker, Kubernetes, Git, Vim, Bash, RegEx, LaTeX
💠Фреймворки: Laravel, Express, jQuery, GraphQL
💠Форматы: JSON, YAML, TOML, Markdown
💠Горячие клавиши: VS Code, IntelliJ, Figma, Photoshop, Obsidian, Slack, Chrome DevTools
​
▶️Пригодится, когда переключаешься между языками и забываешь синтаксис. Когда нужен быстрый reminder, а не 50 страниц документации.

🐙 Перейти на Github
🖼️ Перейти на сайт

🔨 bash_help

ChatGPT всегда говорит, что ты прав 😂

А потом на деле оказываешься по локоть в логах и дебажишь то, что по словам gpt должно было работать идеально 😄

💋 Нейросети обучены льстить

И им сложно НЕ соглашаться со всем подряд.

⚡️В NeuroNinja рабочие техники от инженера СберТехнологий.

Честные заметки о том, как эффективно использовать LLM и реальные кейсы для твоих проектов.

👉 Подписаться: https://news.1rj.ru/str/+jIPPkTXk8g8wN2Ey

⚙️ Автоматическое восстановление файлов с помощью снэпшотов и rsync

✔️Многим часто требуется автоматизировать восстановление конфигурационных файлов или важной информации после ошибок или сбоев. Воспользовавшись инструментом rsync и автоматическими снэпшотами, можно эффективно создавать резервные копии и восстанавливать важные данные с минимальными усилиями.

➡️ Пример скрипта:

#!/bin/bash

# Директории
SOURCE_DIR="/home/user/data"
BACKUP_DIR="/home/user/backups"

# Создаем снэпшот с помощью rsync
rsync -av --delete "$SOURCE_DIR/" "$BACKUP_DIR/"

# Восстанавливаем файлы
restore_files() {
  echo "Восстановление данных из последнего бэкапа..."
  rsync -av --delete "$BACKUP_DIR/" "$SOURCE_DIR/"
}

# Проверяем, нужно ли восстановление
if [ -f "$SOURCE_DIR/critical_file" ]; then
  echo "Файл найден, восстановление не требуется."
else
  restore_files
fi

➡️ Как это работает:
💠Скрипт использует rsync для создания резервной копии файлов из каталога SOURCE_DIR в BACKUP_DIR, включая все изменения и удаляя ненужные файлы.
💠При обнаружении отсутствующего критичного файла или изменения состояния, скрипт автоматически восстанавливает данные из последнего снэпшота.
💠Использование rsync с флагами -av --delete позволяет эффективно синхронизировать содержимое и минимизировать вероятность ошибок.

▶️Подходит для сценариев, где важные данные нужно быстро восстанавливать без вмешательства человека. Особенно полезно для разработчиков, работающих с конфигурациями или для администраторов, заботящихся о надежности своих серверов.

🖼️ Ссылка на источник

🔨 bash_help

⚙️ Pipelight

✔️Небольшой инструмент командной строки, который выполняет список задач, указанных в файле конфигурации. Его главная цель — автоматизировать самые скучные задачи, улучшая ваши любимые инструменты.

▶️Превратите ваши bash-скрипты в универсальные, отлаживаемые и автоматически запускаемые конвейеры.

➡️ Возможности:
💠наглядные и подробные журналы
💠обёртывание Bash в TypeScript с его простым синтаксисом
💠используйте известные языки конфигурирования
💠автоматический запуск конвейера при изменении файла
💠автоматический запуск конвейера при git hooks
💠конвейеры выполняются в фоновом режиме при некоторых событиях

🐙 Перейти на Github

🔨 bash_help