5 фактов про Spark 🤨

Spark -- известный open source-фреймворк из экосистемы Hadoop-проектов, позволяющий выполнять распределенную обработку как неструктурированных, так и слабоструктурированных данных.

1. Apache Spark является фреймворком для обработки данных в области Big Data. А так как он работает в оперативной памяти и обращается к диску редко, то и обработка данных осуществляется очень быстро, что не может не радовать.

2. Ранее стандартом для обработки данных был Hadoop MapReduce. Однако он известен двумя существенными недостатками: повышенная сложность разработки и низкая производительность. В Spark в этом плане все интереснее.

3. Сегодня стандартом, по сути, стал Apache Spark. Этот фреймворк создавался для решения двух задач: устранение минусов MapReduce при сохранении его преимуществ.

4. Apache Spark и прочие Big Data-технологии сегодня активно используются в облаках. В результате это дает возможность еще и получать все преимущества современных облачных сервисов.

5. Spark эффективно используется в Kubernetes, что позволяет активно использовать технологии контейнеризации.

кажется, пора в отпуск

MemOps 😃

«Если это календарь вам о чём-нибудь говорит, просканируйте QR-код»

MemOps 😃

Пошаговое руководство по резервному копированию и восстановлению базы данных Kubernetes ETCD 🤨

Шаг 1: Проверьте версию ETCD

Шаг 2: Создайте резервную копию

Шаг 3: Проверьте приложение

Шаг 4: Восстановите резервную копию

Шаг 5: Измените etcd.yaml

Шаг 6: Проверьте контейнер ETCD

Шаг 7: Проверьте список участников

Шаг 8: Проверьте модули, службы и развертывания

Подробнее: https://www.cyberithub.com/how-to-backup-and-restore-kubernetes-etcd-database-step-by-step/

MemOps 😃

MemOps 😃

Как и зачем отключать TLS 1.0 и TLS 1.1 в Windows Server 🤨

Ввиду недостаточного уровня безопасности, обеспечиваемого устаревшими протоколами TLS 1.0 и TLS 1.1, их рекомендуется отключать и использовать более новые версии TLS 1.2 и TLS 1.3. В статье кратко описаны отличия старых и новых реализаций этого протокола, а также разобраны три способа отключения TLS 1.0 и TLS 1.1: через реестр, команды PowerShell или командную строку.

https://habr.com/ru/company/ruvds/blog/725768/

MemOps 😃

лучшая этикетка для LAN кабеля

MemOps 😃

Сетевые политики Kubernetes для изоляции подов и пространств имён 🤨

Как можно изолировать поды и пространства имён? В этом нам помогут сетевые модели Kubernetes.

Сетевая модель Kubernetes определяет, что:

Каждый под получает собственный IP-адрес.

Поды могут взаимодействовать с любыми другими подами в кластере при помощи IP-адресов подов (без NAT).

Изоляция (ограничение того, с чем может взаимодействовать каждый под) определяется сетевыми политиками.

Давайте создадим два пространства имён и развернём в них несколько подов, а после этого потестируем, как именно поды взаимодействуют друг с другом в кластере Kubernetes.

https://habr.com/ru/company/southbridge/blog/725324/

MemOps 😃

PHP - Франкенштейн

MemOps 😃

шпаргалка по Docker 🤨

MemOps 😃

совсем скоро

MemOps 😃

Обзор Komodor — графического интерфейса для мониторинга и поиска неполадок в Kubernetes 🤨

В статье рассматривается Komodor — сервис, предоставляющий удобный веб-интерфейс для мониторинга за состоянием кластера Kubernetes. В нем реализованы удобные инструменты для отслеживания и управления состоянием развернутых ресурсов и уведомления пользователей в случае непредвиденных ситуаций.

https://habr.com/ru/company/flant/blog/722848/

MemOps 😃

MemOps 😃

MemOps 😃

Подключаем VictoriaMetrics в Deckhouse и настраиваем уведомления в Telegram 🤨

В статье рассмотрено, как в Kubernetes-кластере под управлением Deckhouse удобно и быстро настраивать мониторинг с уведомлениями в Telegram. Воспользуемся VictoriaMetrics для хранения метрик, добавим дашборд в Grafana, создадим алерт и настроим оповещение.

Для этого потребуются:
- Кластер Kubernetes с установленным Deckhouse и включенным модулем мониторинга.
- kubectl. Команды можно выполнять как на master-узле, так и с любого другого устройства, настроив доступ к API кластера.
- Установленный Helm.
- Учетная запись Telegram.

Подробнее: https://habr.com/ru/companies/flant/articles/726528/

MemOps 😃