Несколько слов об асинхронном поиске в Elasticsearch. Запись на русском языке с митапа 3 марта.

https://youtu.be/A_IAhrwQG3U

​Разные полезности от Elastic. Сюда они загружают интересные дополнения. Например, есть Pacman для Kibana, созданный в Vega.

Beats Playground

Удобный инструмент для тестирования конфигураций процессора Beats (включая dissect) в браузере. Код Beats скомпилирован в WebAssembly.

И еще один инструмент для тестирования dissect-фильтра. https://dissect-tester.jorgelbg.me/

У нас освободилось несколько мест на семинар-инструктаж по Elastic Stack на 8-9 июля. Если вы хотите быстро понять принципы работы и получить практический опыт использования инструментов — сейчас самое время. Программа обучения и условия на специальной странице на нашем сайте. Также возможно проведение семинара по запросу.

Интересно узнать почему Яндекс запустил услугу сервиса Elastic из облака? По этой ссылке можно посмотреть вебинар с продакт оунером Евгением Архиповым.

Воркшопы ннада? Ближайшие в июле:

7 июля Elastic Workplace Search Workshop

8 июля Elastic Observability: Capture the BUG

13 июля Elastic Security: Capture the Flag Workshop

20 июля An Introduction to Elastic Security

29 июля Elastic Series: Getting started with Elastic Solutions

Вышел Elastic Stack 7.14. Основное обновление — Elastic Agent теперь в GA (до этого был в бете). Подробнее на специальной странице.

30 сентября и 1 октября мы будем проводить двухдневное обучение по Elastic Stack. В программе теоретическая часть с основами решения и обширная лабораторная работа.

На лабораторной работе мы установим отказоустойчивый кластер Elasticsearch, научимся разбирать лог-файлы, настроим безопасность кластера, поработаем с Index Lifecycle Management, отключим ноду кластера и посмотрим что произойдет. Мы также загрузим интересные массивы данных по авиваперелетам, каталогами музыки и фильмов, научимся работать с этими данными и красиво визуализируем. В лабораторной работе также будет настройка оповещений через Elast Alert, работа со снапшотами в хранилище S3 и много чего еще.

Если хотите прокачать ваши навыки работы с Elastic или только начинаете с ним работать — приходите к нам на обучение в следующие потоки. Подробнее об обучении.

Как устроено голосование за мастер ноду и как устроен кворум — читайте в новом посте в блоге у нас на сайте.

Новый функционал в Elastic 7.15 — анализ утилизации диска каждым полем индекса. Интересная штука, чтобы обнаружить неоптимальные настройки вашего кластера. Этот API пока что экспериментальный.

Field usage stats API — возвращает информацию об использовании различных типов полей для каждого шарда и поля индекса. Поможет посмотреть на индекс с новой стороны. Этот API пока что экспериментальный.

День Эластика в России и СНГ

Приглашаем вас на онлайн-мероприятие 14 декабря в 14 часов по московскому времени. Будут выступать как представители Elastic так и конечные пользователи. Подробная программа и регистрация по ссылке.

​Hazelcast + Kibana: лучшие друзья для исследования и визуализации данных

Интересный кейс визуализации данных по изменениям в Википедии в Kibana. Читать на Хабре.

​Онлайн-калькулятор для расчета сайзинга кластера Elasticsearch. Основан на формулах из нашей статьи о сайзинге Elasticsearch на Хабре.

Elasticsearch Indexing Strategy in Asset Management Platform (AMP)

В блоге Neflix рассказывают как они работают с 7Тб хранилищем.

​Lamoda интересно рассказывает об устройстве своего поиска.

Вы «продоете теплых кросовок»: ищем идеальную пару обуви с помощью Elasticsearch

В этой статье мы расскажем:

⚡️ что находится «под капотом» поиска в Lamoda;

⚡️ как мы понимаем пользователей и разбираем поисковые запросы;

⚡️ как обогащаются атрибуты товаров и по какой логике формируется запрос к Elasticsearch;

⚡️ над чем работаем сейчас и какие есть планы на будущее.

Читать дальше на Хабре.

​Только Elastic Stack и ничего лишнего

Приглашаем на ближайшее 3-дневное обучение Elastic Stack. Обучение будет проходить 20-22 декабря в онлайн-формате через Zoom.

Каждый день обучения состоит из блоков теории и практики. Мы пройдем путь от установки отказоустойчивого кластера Elasticsearch до настроек продвинутых визуализаций в Kibana, разберемся с сайзингом кластера, настроим оповещения, создадим снэпшоты на хранилище S3 и отключим одну из нод, чтобы увидеть что произойдет с кластером. На курсе также подробно разбирается тема Index Lifecycle Management (ILM).

Для лабораторных работ мы подготовили интересные датасеты с хитами чарта Rolling Stones, героями игры Heroes of Might and Magic 3 и другими. За 3 дня вы научитесь проектировать и разворачивать отказоустойчивый кластер Elasticsearch, создавать информативные визуализации в Kibana и формировать комплексные ingest-pipelines.

Подробная программа курса на нашем сайте. Места ещё есть.

Как мы логшипим в Elasticsearch и что думаем о Filebeat

Привет, я - Эдгар, backend-разработчик личного кабинета МегаФон, поделюсь решением проблемы log shipping-процесса в централизованное хранилище Elasticsearch, которое мы нашли вместе с командой. На Хабр!

ElasticSearch — как мы делали свою речевую аналитику

Мы в TQM используем Elastic потому, что он гибкий, широко известный, имеет удобный и простой синтаксис, множество библиотек для работы как на Python, так и на C# (NEST). Хорошо скейлится под наши объемы (1—30 Тб).Kibana также очень удобна, мы используем ее для мониторинга, консоль Kibana применяем для запросов. А еще по сравнению с тем же Sphinx, Elastic удобно масштабировать (просто добавляем шарды, ноды, и он сам распределяет данные по ним). В случае с тем же Sphinx нам пришлось бы писать этот распределенный поиск самим, и не факт, что у нас получилось бы хорошо с первого раза. На Хабр!

Короткая статья о нечетком поиске в Elasticsearch

https://medium.com/@vipulkumar_36528/fuzzy-query-in-elastic-search-393c8db7c496