Какие есть альтернативы Prometheus, если для метрик его стало недостаточно

Prometheus прекрасно подходит для краткосрочного мониторинга, но у этого решения есть свои ограничения по масштабу, и если вы столкнулись с высоким потреблением памяти/CPU, снижением скорости запросов или вам требуются уникальные лейблы вида user ID, то стоит подумать над внедрением альтернатив. На наш взгляд следующими после Prometheus в линейке стоят Thanos , Cortex , Mimir или VictoriaMetrics . Объективное, насколько это возможно, сравнение характеристик этих решений мы и проведем ниже. СОДЕРЖАНИЕ 0. В каких случаях нужно задуматься о замене Prometheus 1. Обзор решений для долгосрочного хранения метрик 2. Сравнение решений: Thanos, Cortex, Mimir и VictoriaMetrics 3. Как выбрать подходящее решение 3.1. Что важнее: простота или масштаб? 3.2. Стоимость 3.3. Надёжность и высокая доступность 3.4. Насколько подходит по задачам? 4. Миграция с Prometheus на долгосрочное хранилище 5. Сохранение алертов и дашбордов 6. Как избежать потери данных при миграции 6.1. Параллельный запуск и проверка 6.2. Мониторинг очередей remote_write 6.3. Аккуратное отключение Prometheus 6.4. Резервное копирование 6.5. Тестирование 7. Лучшие практики эксплуатации долгосрочного хранилища метрик 8. Высокая доступность и избыточность 9. Мониторинг состояния хранилища метрик 10. Обработка долгосрочных запросов и типовые ошибки 10.1 Используйте recording rules для тяжёлых агрегаций 10.2 Не злоупотребляйте лейблами с высокой кардинальностью 10.3 Downsample старые точки данных 10.4 Осторожно с федерацией Prometheus 11. Обслуживание и обновления (Maintenance & Upgrades) 12. Итого. Как жить с продакшн-наблюдением

https://habr.com/ru/companies/itsumma/articles/912804/

#Prometheus #альтернативы_Prometheus #Cortex #Mimir #Thanos #Victoria_Metrics #мониторинг #инфраструктура #переезд #апдейт #руководство #чеклист

Just noticed after preparing my #mimir #prometheus multi cluster setup over the last days that there is no #kubernetes native or gitops friendly way to upload alerting rules to the mimir ruler (besides Alloy but well) fml

#selfhosting #monitoring

If you've tried both Thanos and Mimir, which do you prefer? Feel free to comment why below :heart_cyber:

#thanos #prometheus #alloy #grafanaAlloy #grafana #observability #monitoring #kubernetes #k8s #foss #sre #mimir #grafanaMimir

Exciting #news 📆
#VictoriaMetrics will be at the @linuxfoundation Member Summit in beautiful Napa, California, on March 18th! 🍷☀️
One of our co-founders, Dima Lazerka, will be sharing insights on "Cost-Effective #Monitoring in #Kubernetes

This #talk is about:
📊 Best ways for storing and processing metrics
ℹ️ #OpenSource tools only
🟣 For people familiar with #prometheus #thanos #Mimir and VictoriaMetrics
Don’t miss it! 🚀

https://events.linuxfoundation.org/lf-member-summit/

@versae talking about the #Mimír project in #Norway, the motivation for which is the troubled history of data gathering and #copyright infringement of mainstream #LLMs.
#FF24 #AI4LAM

@grafana #mimir 2.14.0 is now packaged in @alpinelinux

#strasbourg #molodoï #maisonmimir #mimir #slam #autogestion #prixlibre

Smarter monitoring 😎

Monitoring can get expensive due to the huge quantities of data that need to be processed.

In this blog post, you’ll learn the best ways to store & process #monitoring metrics to reduce your costs, & how VictoriaMetrics can help.

https://victoriametrics.com/blog/reducing-costs-p2/

You’ll get the most out of this blog post if you are familiar with #Prometheus, #Thanos, #Mimir or #VictoriaMetrics.

Mimir 3 (enhanced 2015) from #Mimir

https://legendarypinkdots1.bandcamp.com/album/mimir-3-enhanced-2015

Mimir Revisited from #Mimir

https://legendarypinkdots1.bandcamp.com/album/mimir-revisited

Great talk about how #cern is using #grafana and #mimir 😄 https://www.youtube.com/watch?v=UDMoWQxW3iA

#NowPlaying #TheSundayStarter Originally released in 1993, “Mimyriad”, the second album by #Mimir, was a 49 minute cosmic jam with #ChristophHeemann, #AndreasMartin, #TheSilverman, #EdwardKaSpel, #ElkePuecker, and #JimORourke. https://legendarypinkdots1.bandcamp.com/album/mimyriad-first-version-cd-enhanced-2015

Purtroppo, è esattamente questo il #danno di avere #orari inderogabili tutti spezzati, anziché il proverbiale 9-5 (…o anche 8-13, come l’anno scorso in cui avevo scuola). Però ho fatto caso ad una cosa, da qualche giorno: sto andando a dormire allo stesso orario nominale medio di prima che scattasse l’ora legale… il che significa che, quando in un attimo ho scalato indietro di 1 ora solare l’orario di andare a letto, non ho fatto nulla a riguardo e non ho avuto strane #difficoltà (a parte il fatto che domenica sono stata di merda senza energie tutta la giornata, ma già da lunedì ero normale). Ho una #teoria. 🤓

Evidentemente, il mio andare a #mimir è completamente basato sul “ok, adesso è DAVVERO #tardissimo, se sto ancora sveglia domani sono morta, quindi chiudiamo tutto”; o, in altre parole, si basa su cosa leggo in giro sugli orologetti. Se le cose stanno così, vedere quell’orario estremo prima che questo arrivi veramente dovrebbe essere sufficiente a farmi avere un “effetto troppo-tardi” in un momento in cui è ancora presto e in cui, se continuo ad agire normalmente, finirei però a dormire come dovrei. Monkey brain, monkey fix. #Idee per possibili #metodi ancora da provare… ma ho speranza solo per uno:

• Dopo una certa ora, nascondere tutti gli #orologi dai computer che uso, e guardare solo un orologio dedicato che tengo sempre 1 o 2 ore avanti. Sarebbe facile. 🌚
  • Problemi: come nascondo l’orario davvero ovunque? Facile mettere un pezzo di carta sulla status bar del sistema, ma sulla schermata di blocco? E soprattutto, i timestamp nelle app di messaggistica? Gli #orari di modifica nel gestore di file? …

• Spostare avanti il fuso orario dei #computer dopo una certa #ora o un certo momento (esempio, appena finita la cena). Non causerei problemi a nessun programma, perché il #tempo contato dal sistema rimarrebbe lo stesso, cambierebbe solo la visualizzazione. Si può volendo anche scriptare attivazione e disattivazione dello shift. 🧮
  • #Rogne: ho paura che uno scostamento di multipli di 60 minuti non sia buono, probabilmente conoscendo di quant’è mi abituerei inconsciamente a sottrarre le #ore ogni volta all’orario che guardo, finendo quindi comunque per funzionare sotto l’orario reale.

• Usare qualche #script che già da un momento a caso della serata inizia a velocizzare subdolamente il tempo, aggiungendo un numero casuale di secondi (in un certo range) ad ogni minuto. Già dopo qualche quarto d’ora ora sarà quindi impossibile fare calcoli per capire che ore sono davvero, e l’unico modo che avrei per saperlo sarebbe guardare un #orologio non-trollante, cosa che mi basta semplicemente non fare. 🚷
  • Dovrò studiarmela un po’ e fare un buon algoritmo, ma l’idea dovrebbe funzionare sia su Linux, sia su Windows, e anche Android. Non dovrebbe causare problemi ai programmi nonostante cambia l’UNIX time, perché va sempre solo in avanti, fin quando non arriva una data ora (quando sarò già a letto da un pezzo), in cui viene annullato lo shift e il clock torna indietro, tutto a posto per la giornata seguente.

https://octospacc.altervista.org/2024/04/05/workaround-sonno-z/

#computer #danno #idee #metodi #mimir #ora #orari #ore #orologi #orologio #script #tardissimo #tempo #teoria

ClickHouse как бэкенд для Prometheus

Привет! Меня зовут Михаил Кажемский, я Lead DevOps в IT-интеграторе Hilbert Team. В последнее время к нам часто обращаются заказчики, которым нужна помощь с организацией хранения долгосрочных метрик в российских облаках. Так как для многих эта задача сейчас актуальная, в данной статье мы с моим коллегой Денисом Бабичевым решили рассказать, как мы используем мощные возможности ClickHouse для эффективного долгосрочного хранения метрик Prometheus. В статье вы найдете рекомендации по использованию инструмента и описание альтернативных решений, таких как Thanos, Grafana Mimir и Victoria Metrics.

https://habr.com/ru/articles/799791/

#prometheus #clickhouse #victoriametrics #thanos #mimir #lts #мониторинг #hilbertteam

just had the opportunity to spend a lot of time with Grafana Mimir this week.

The guys @ Grafana Labs did an awesome job releasing this great monitoring tool together with handy dashboards. One of them even tells you how much you need to scale out components to account for the metric load!

#mimir #grafana #sre #devops

Heading to #KubeCon Europe next week, if anyone wants to come say hi to me then I'll be on the booth Wed morning + evening, and Thu around lunch.

I'll also generally be around, and if you have any questions about #Prometheus #Mimir #Loki #Tempo #Pyroscope or #Grafana then I'm very happy to take them.

The booth will also have some really great people from almost every team at Grafana and beyond the list above also have representation from #K6 and our own #Platform team (we operate in every Cloud Service Provider and most regions globally)

Come say hi, we're a friendly and diverse bunch of people :grafana:​

Ieri sera #tardissimo, mentre mi stavo preparando per #mimir, ho dovuto fare un inaspettato detour al bagno di diverse decine di minuti di durata (cosa che altrimenti avrei dovuto fare stamattina, ma quando devo uscire a quest’ora ho i minuti contati, non posso fare grossi depositi). E quindi praticamente ho perso quasi mezz’ora di un #sonno che già è pochissimo, e se già normalmente quindi mi sveglio R, stamattina è stato proprio pesante… (niente a che vedere con quando andavo a scuola comunque, lì certe volte mi sentivo di morire, non sto scherzando, almeno ora no) 😱

https://octospacc.altervista.org/2024/03/13/the-slep-is-when-no-slep/

#mimir #sonno #tardissimo

This week in #observability #o11y, understand why #OpenTelemetry Looks Good To Me with @grafana #Loki, #Grafana, #Tempo and #Mimir with a massive docker compose demo : https://o11y-weekly.github.io/2024-01-31_OpenTelemetry_Looks_Good_To_Me/

New server, who dis.

Hi, I'm a CS prof, focusing on #Databases, #DataStructures, #Compilers (https://git.odin.cse.buffalo.edu/Astral), and #Reproducibility in #DataScience (#Mimir : https://mimirdb.info and #Vizier : https://vizierdb.info). I occasionally find time to dabble in wildlife and landscape #photography and #homeautomation. One of these days, I'll get back to doing #HEMA or #Fencing. I also #Pun frequently.

#introduction

Oh, se ho detto che avrei #pubblicato prima di andar a #mimir, cascassero i miei occhi #scrivo e #pubblico prima di andar a mimir, #vigilia di #Capodanno trattata più a lungo del Capodanno stesso #style. 🌚

➡️ 🎇 Il resocontoctt di questo #2023, almeno in termini di posting! https://listed.to/@u8/48519/il-resocontoctt-di-questo-2023-almeno-in-termini-di-posting. ⬅️

Per finire il #2023 in (molto #soggettiva) #bellezza, eccovi quindi un #post lungo lungo, che forse può ammontare a “ecco le mie #scuse per non aver pubblicato abbastanza #ops #sorry!”, ma forse contiene qualche spunto di #riflessione che anche le #menti meno instabili possono apprezzare. O magari, se #stanotte non riuscivate a #dormire, ecco che con questa roba cascate subito nel #sonno. 🫠

https://octospacc.altervista.org/2023/12/31/847/

#2023 #bellezza #Capodanno #dormire #menti #mimir #ops #post #pubblicato #pubblico #riflessione #scrivo #scuse #soggettiva #sonno #sorry #stanotte #style #vigilia