gram news
Elastic Stack recipes channel avatar

Elastic Stack recipes

@elasticstack_ru

Платные консультации, администрирование, поддержка, обучение ElasticSearch/OpenSearch в России, Казахстане и других странах — @galssoftware Consulting and implementation for ElasticSearch/OpenSearch. Ask @galssoftware Web: gals.software

ProjectsRUProgramming

1,550subscribers

Open the Channel

Latest posts

  • Elastic Stack recipes

    21 Aug, 08:43

    Online index migration and shard scaling in OpenSearch with the AOSC pluginAOSC — это open-source плагин от Atlassian для OpenSearch, который автоматизирует онлайн-миграцию индекса внутри одного кластера. Он позволяет перенести live-индекс в новый индекс с другими маппингом, настройками, количеством шардов или изменённой структурой документов. При этом исходный индекс большую часть времени продолжает принимать записи.AOSC решает ключевую проблему с _reindex, который копирует только текущее состояние данных и сам по себе не умеет докопировать новые записи и учитывать удаленные документы, появившиеся во время миграции. _split и _shrink тоже имеют ограничения, которые не позволяют перенести данные онлайн.Миграция в AOSC проходит по нескольким фазам: проверка источника/цели/алиасов, подготовка целевого индекса, заливка существующих документов, повтор новых операций и удалений,
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    48362Open in Telegram
  • Elastic Stack recipes

    14 Aug, 08:34

    Wazuh без ограничений дашборда: работаем напрямую с индексамиWazuh хорош ровно до тех пор, пока вам хватает того, что умеют его штатные дашборды. А потом внезапно выясняется, что все нужные данные уже давно лежат в обычном OpenSearch.В статье — как работать с Wazuh Indexer напрямую: читать алерты и состояния, строить агрегации, выгружать большие объёмы данных, делать свои отчёты, алертинг и обогащение.Отдельно полезен разбор того, чем отличается Server API от Indexer, как не положить кластер тяжёлыми запросами и к чему готовиться в Wazuh 5.0, где схему индексов заметно поменяли.Ссылка на статью@elasticsearch_ru
  • Elastic Stack recipes

    13 Aug, 12:27

    Поиск в глубину: какие инструменты помогают работать поиску в Uzum MarketИнтересная статья про подход к поиску в Uzum Market (маркетплейс из Узбекистана). Под капотом там ElasticSearch, но не только он. Они как раз и рассказывают как устроен поиск до момента непосредственного запроса в ElasticSearch.@elasticsearch_ru
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    56844Open in Telegram
  • Elastic Stack recipes

    11 Aug, 09:51

    Проведем аудит систем логирования Elasticsearch / OpenSearchСистемы централизованного логирования редко ломаются в один день. Обычно проблемы накапливаются постепенно: растут индексы, увеличивается нагрузка на CPU и диски, ingestion начинает отставать, очереди переполняются, а часть логов незаметно теряется. В итоге компания платит больше за инфраструктуру, а в момент инцидента может оказаться, что нужных данных либо нет, либо система логирования сама недоступна.Мы предлагаем услугу комплексного аудита систем логирования на базе Elasticsearch и OpenSearch.В рамках аудита мы анализируем не только сам кластер, но и весь путь данных — от источника до индекса: — архитектуру и конфигурацию Elasticsearch / OpenSearch;— распределение ролей, shards и replicas; — sizing CPU, RAM, heap и дисковой подсистемы; — политики ILM / ISM, rollover и retention; — mappings, templates и структуру
    7075421Open in Telegram
  • Elastic Stack recipes

    5 Aug, 13:17edited

    Вышел Elastic 9.5Уж не знаем договаривались они или нет, но анонс по новым релизам у Elastic и OpenSearch случился в один и тот же день — вчера.Обновления Elastic более масштабные:🚀 Elasticsearch теперь умеет хранить данные аки колоночная база данных🚀 Появился режим индексирования VectorDB и автоматическая калибровка векторного поиска🚀 Появилась встроенная поддержка Prometheus и PromQL🚀 Реализован принцип «нулевого почтового ящика» — очередь важных событий со встроенным анализом событий🚀 Улучшенный Elastic Agent Builder , включая мониторинг и отслеживание действий агентов, а также расширенные возможности утверждения с участием человека🚀 и несколько других улучшений.Подробности в блоге Elastic
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    784631Open in Telegram
  • Elastic Stack recipes

    5 Aug, 13:02

    Вышел OpenSearch 3.8Что нового:🚀 Расширение MCP-интеграций на большее количество типов агентов🚀 Потоковая передача результатов машинного обучения с меньшей задержкой с использованием транспортного протокола gRPC🚀 Ускоренная обработка векторов в 4,16 раз быстрее и повышение производительности радиального поиска до 2,1 раз🚀 Масштабирование оценки релевантности поиска за счет доступа к большему количеству крупных поставщиков LLM🚀 Оптимизация анализа логов с помощью визуального конструктора языка конвейерной обработки (PPL), SQL-запросов и шаблона🚀 Формирование, преобразование и сравнение данных временных рядов с помощью новых команд PPLПодробности в блоге OpenSearch@elasticsearch_ru
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    86373Open in Telegram
  • Elastic Stack recipes

    23 Jul, 06:40

    OpenSearch DemystifiedЗнакомьтесь — удобный путеводитель по возможностям OpenSearch. Здесь вы можете ознакомиться с разными возможностями системы в интерактивном формате. Подойдет тем, кто только начинает знакомство с OpenSearch.opensearch.9cld.comА если вы хотите изучить OpenSearch в простом и удобном формате — приходите 📅 23-25 сентября на наш 3-дневный интенсив 🎓 OpenSearch База, где вы познакомитесь с этой системой. Программа интенсива.@elasticstack_ru
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    80675Open in Telegram
  • Elastic Stack recipes

    3 Jul, 11:26

    Два полезных плагина VSCode для OpenSearch и OpenSearchOpenSearch DevTools & SupportElasticsearch DevTools & SupportОба плагина поддерживают выполнение запросов и команд, автодополнение, оборачивание фрагменты запроса логическими условиями (filter, should, must_not), проверка типа поля анализ влияния на производительность. и содержат генератор фиктивных данных.@elasticstack_ru
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    1,04084Open in Telegram
  • Elastic Stack recipes

    2 Jul, 09:16

    Проведем тренинг ElasticSearch 8-10 июляОсвойте Elasticsearch на практике за 3 дня, научитесь уверенно использовать его в промышленной эксплуатации и быстро погрузитесь в тему.За 3 дня вы:✅ Разберётесь с архитектурой Elasticsearch и принципами работы кластера.✅ Научитесь правильно проектировать mappings и выбирать типы данных.✅ Освоите Query DSL — от простых запросов до сложных агрегаций и полнотекстового поиска.✅ Поймёте, как работают анализаторы, токенизаторы и скоринг.✅ Настроите отказоустойчивый кластер, репликацию, резервное копирование и восстановление.✅ Разберёте ILM, Data Streams, Ingest Pipelines и другие механизмы жизненного цикла данных.✅ Выполните десятки лабораторных работ на готовой инфраструктуре и получите опыт, максимально приближенный к реальным задачам.
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    1,08051Open in Telegram
  • Elastic Stack recipes

    17 Jun, 05:34

    ES|QL WorkshopРегистрируйтесь на воркшоп от Elastic, который состоится 23 июня в 11 часов по московскому времени.ES|QL вскоре будет основным языком запросов для Elasticsearch. Он разработан таким образом, чтобы его было легко освоить и использовать конечным пользователям, командам SRE, аналитикам безопасности, разработчикам приложений и администраторам. Используя ES|QL, вы сможете находить конкретные события, проводить статистический анализ и создавать визуализации.@elasticstack_ru
    1,15042Open in Telegram
  • Elastic Stack recipes

    11 Jun, 06:01

    Вышел OpenSearch 3.7Пролетели 2 месяца и вот уже следующая версия подоспела.Что нового:➡️ Метрики Prometheus теперь можно запрашивать при помощи PromQL непосредственно из OSD➡️ Новое представление Explore Metrics позволяет выполнять запросы в Prometheus и визуализировать эти данные➡️ Новый унифицированный интерфейс оповещений: мониторы OpenSearch + правила оповещений Prometheus➡️ Новый каталог SLO с бюджетом ошибок с указанием скорости расходования бюджета➡️ Появились переменные дашбордов, что позволяет параметризовать панели мониторинга с помощью многократно используемых переменных вместо поддержания практически идентичных копий для каждого набора данных.➡️ Появился конвейер
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    1,06062Open in Telegram
  • Elastic Stack recipes

    1 Jun, 09:20

    Спасибо за ваши голоса🙏На этой неделе анонсируем вебинар по оптимизации хранения. Следите за анонсами 🔥
  • Elastic Stack recipes

    26 May, 12:31

  • Elastic Stack recipes

    25 May, 13:20

    8-10 июня тренинг OpenSearch AdvancedПриходите на 3-дневный интенсив по продвинутой работе с OpenSearch для тех, кто уже с ним знаком. На интенсиве вас ждет погружение в расширенный функционал системы, у вас будет возможность поработать в лабораторном окружении с функциями, которые вы, возможно, раньше не использовали.🚀 Безопасность в OpenSearch (ролевая модель и уровни доступа).🚀 Распределенная архитектура (кросс-кластерный поиск и репликация).🚀 Продвинутая репликация (распределение нагрузки, удаленное хранилище и поиск по снапшотам).🚀 Оптимизация хранения данных (продвинутый маппинг и другие настройки индексов).🚀 Работа с Vector, DataPrepper, Ingest Pipeline и Kafka (загрузка и обработка данных).🚀 Работа с PPL, DQL и SQL (эффективный поиск по данным).🚀 Мониторинг кластера (методы и инструменты).🚀 OpenSearch Dashboards (ролевая модель, Workspaces, Tenants,
    1,23061Open in Telegram
  • Elastic Stack recipes

    21 May, 12:51

    Мы пропустили этот момент, но 7 апреля вышел OpenSearch 3.6Что нового:🚀 Автоматизация разработки поисковых приложений при помощи OpenSearch Launchpad🚀 OpenSearch Relevance Agent для автоматической настройки релевантности поиска🚀 APM-мониторинг с визуализацией в OpenSearch Dashboards, где можно группировать сервисы по атрибутам ресурсов, таким как язык SDK, фильтровать по пороговым значениям частоты ошибок или сбоев🚀 Улучшен опыт использования PPL🚀 Улучшен опыт использования Query InsightsПодробности в блоге OpenSearch@elasticstack_ru
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    1,09051Open in Telegram
  • Elastic Stack recipes

    7 May, 09:51

    Вышел Elastic 9.4: Workflows в GA, обновления Agent Builder и поддержка Prometheus/PromQLПодробности в блоге Elastic@elasticstack_ru
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    1,18062Open in Telegram
  • Elastic Stack recipes

    4 May, 09:57

    OpenSearchCon Europe 2026Посмотрите записи с мероприятия. Много интересных докладов.@elasticstack_ru
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    1,26032Open in Telegram
  • Elastic Stack recipes

    7 Apr, 07:01edited

    Вышел Data Prepper 2.15Что нового:🚀 появилась поддержка Apache Iceberg в качестве источника. Apache Iceberg — это формат хранения, используемый в архитектурах типа datalake. Пайплайн в data Prepper регулярно считывает состояние (изменения) таблиц Iceberg и записывает их в OpenSearch.🚀 Data Prepper теперь может извлекать данные из Prometheus (RW) и записывать в него. Поддерживаются все стандартные типы метрик Prometheus, включая counter, gauge, histogram и sum. Можно использовать его вместе с приемником Prometheus для создания сквозных конвейеров метрик Prometheus в Data Prepper.Подробнее в блоге OpenSearch@elasticstack_ru
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    1,500531Open in Telegram
  • Elastic Stack recipes

    21 Mar, 08:52

    The 2026 OpenSearch Roadmap: Four pillars for AI-native innovationРоудмэп развития проекта на 2026 год состоит из 4 основных компонентов:🔴 Модернизация поиска 🔴 Наблюдаемость и аналитика 🔴 Масштабируемость и отказоустойчивость 🔴 Сообщество и платформаВ этой статье в блоге OpenSearch рассматривается каждый из компонентов, начиная с общего обзора и заканчивая техническими деталями. В статье вы найдете ссылки на соответствующие RFC и задачи GitHub, где можно изучить конкретные нововведения, оставить отзыв и внести свой вклад в разработку.@elasticstack_ru
    1,400521Open in Telegram
  • Elastic Stack recipes

    17 Mar, 07:06

    Snapshot Operations in OpenSearchСтатья хоть и не совсем свежая, но с момента ее публикации механизм создания снапшотов не изменился. Здесь описана структура хранения данных, как происходит обновление хранящихся данных и как выполняется восстановление из снапшотов.@elasticstack_ru
    Image from a post by Elastic Stack recipesImage from a post by Elastic Stack recipes
    1,37071Open in Telegram