Спробував користуватись #Athena в #AWS - це сервіс пошуку даних на #S3. Знав про нього раніше, але думав він тільки для аналізу або каталогізації файлів, які потрапляють на бакет.
Справа у тому, що #ALB може писати логі тільки на бакет, тому шукати там потрібні запити вручне не зручно. А ось за допомогою #Athena можна просто створити табличку, та сказати, що дані находяться в різних каталогах на бакеті, розділені по назвам оточень. Після цього можна робити звичайні #SQL запити, які будуть шукати дані на бакеті в #CSV файлах, які стиснуті gz (!!!). Це дуже зручно та швидко.
Приклад запиту
```
SELECT
date_parse(time, '%Y-%m-%dT%H:%i:%s.%fZ') AS request_time,
request_verb AS method,
request_url AS url,
elb_status_code AS http_code,
sent_bytes AS response_size_bytes,
user_agent
FROM alb_access_logs
WHERE app_name = 'k8s-production'
AND year = '2026'
AND month = '03'
AND day = '01'
AND domain_name = 'www.domain.tld'
AND type IS NOT NULL
ORDER BY request_time DESC
LIMIT 500;
```
#Csv
Munquet is now officially on Flathub 🎉
A native Linux app to convert datasets into Apache Parquet using PyArrow backend. Perfect for data science workflows, analytics, and anyone needing fast local conversions.
Get it here: https://flathub.org/en/apps/io.gitlab.zulfian1732.munquet
@gnome @xfce @kde @GTK @linux @flathub
#apache #pyarrow #datascience #parquet #csv #OpenSource #Python #GNOME #GTK4 #Adwaita
Делаем динамический кол-трекинг: Flask + SQLite + офлайн-конверсии Яндекс.Метрики
Привет, Хабр. В перформанс-маркетинге обычно обучают кампании по начальным событиям в воронке вроде заявки. Для алгоритма это считается конверсией, но для бизнеса важнее сделка. В итоге до сделки и оплаты доходит только часть лидов, но для алгоритма они одинаковые, и автостратегия продолжает искать и тех, кто не конвертируется в оплату, и тех, кто оплачивает. Чтобы алгоритм работал лучше и искал только тех, кто вероятнее готов к сделке, между собой связываются рекламное объявление, звонок и итоговая сделка. Для этого в Яндекс через офлайн-события возвращается звонок или уже факт сделки. В этом гайде разберём MVP на Python: он добавляет номер на лендинге под yclid, хранит выдачу в SQLite, принимает вебхук звонка от МТС Exolve, создаёт конверсию и формирует CSV под импорт в Яндекс.Метрику. Получается повторяемый поток данных от рекламного клика до офлайн-цели без ручной склейки. В конце статьи у вас будет рабочий сценарий запуска, тестовые запросы и список технических доработок для боевого контура.
https://habr.com/ru/companies/exolve/articles/1004102/
#метрика #коллцентр #sqlite #flask #мтс_exolve #воронка_продаж #конверсия #мтс_exolve_api #phyton #csv
One hundred million rows challenge (ongoing)
Брент Роуз, партийный функционер говорящая голова сообщества РНР и автор очередного конкурирующего стандарта фреймворка Tempest, объявил конкурс , весьма вторичный, после эпичного One billion row challenge (который и сам по себе уже был вторичен, по отношению к оригинальному 1brc ), но кто ж считает, когда на кону такие призы, как плюшевый слон от JetBrains!
When DuckDB is too much: treat your #CSV as a database with "csvq": https://mithrandie.github.io/csvq/
𝗚𝗲𝗼 𝗗𝗮𝘁𝗮 𝗠𝗲𝗿𝗴𝗲𝗿:
#DataMerger #CSV #JSON #GeoDataMerger
https://thewhale.cc/posts/geo-data-merger
The Geo Data Merger is a desktop open source tool for merging data from csv, json, geo- and topojson files.
"Let's consider this excerpt from Hamlet. […]
I am unfortunately happy to report that those verses are perfectly valid #csv."
CSV Toolkit for Unity3D #Unity3D #Csv #Parsing #Reading #Writing #Datamanagement #AssetStore
#CSV Dateien kommen einem ja immer wieder unter. Hab gerade SmoothCSV entdeckt, eine schnelle, einfache App um CSVs anzuschauen, zu bearbeiten und zu transformieren. Gibt's für Mac, Windows und Linux. Viel schneller und einfacher als irgendeine Officesuite, ausserdem Open Source.
How to Avoid CSV Newline Bugs on Windows
Missing newline='' adds blank rows in CSV output.
Messy CSV files from a CRM export or client handoff? RowSweep cleans them in your browser — dedupe rows, trim whitespace, fix casing, find-and-replace. No uploads, no servers, your data stays local. #CSV #Productivity https://rowsweep.cashewcrate.com
1/2 This needs to be seen by our elected officials who aren't part of this. Yes there's corruption in the halls of Parliament and in our Institutions as well, and we must call it out, bcos it's EVIL and #Herzog plays a part in it.
#Auspol #Epstein #Palantir #Starlink #CSAM #CSV
RE: https://bsky.app/profile/did:plc:dlsswsojmwbwsidpbcblzoiv/post/3med7op2fak2v
#Fediverse を調べています。
（2026年1月）
/api/v1/インスタンス/ピア
で、各domainの繋がりを調べ、
生きているdomainに対し、
/.well-known/nodeinfo
でnodeinfoに取得方法を調べ、nodeinfoの中の
domain名、アプリ名、バージョン、アカウント数（ユーザー数）、MAU(1ヶ月アクティブユーザー数）、HYAC(半年間アクティブユーザー数）、投稿数
を取得。
peers では 139,637 件(前月 136,295件)
通信可能では 75,591件(前月73,332 件)
nodeinfo可能では 36,148件(前月 35,656件)
(前回スキャンで存在し、今回スキャンで落ちている domain について追加nodeinfo)
データは
https://github.com/ottoto2017/fediverse
の
target20260125.csvで upload
Geschlechtsneutrale Klos: Verkackt
Die Debatte um genderneutrale Toiletten zeigte: Nicht nur die Kommunikation der Regierung ging daneben, auch einige Medien haben versagt.
D'Strategie vun de Rietsen zu #Lëtzebuerg:
1. Iwwerdriwwe polariséieren.
2. D'#CSV viru sech hier dreiwen.
3. Eng #Petitioun dergéint bei der Chamber areechen.
An ech ginn elo mol op meng Unisex-#Toilette, wou ech keng aner Kierpergeräischer héiere muss a mäin eegene Lavabo hunn. 👋
📰 Python Data Processing 2026: Deep Dive into Pandas, Polars, and DuckDB
Stop waiting for your CSVs to load. Learn how Pandas 2.x, Polars, and DuckDB are revolutionizing tabular data processing with Apache Arrow in 2026.
#csv #excel #dataformats #news
🌍 Also in: 🇪🇸 🇫🇷 🇩🇪 🇧🇷 🇮🇹
