Переосмысляя Serverless. Парадигма хранения и обработки данных

Много было сказано про Serverless в нагрузках без сохранения состояния. Действительно, когда у вас есть контейнеры или функции их легко почти мгновенно масштабировать и нет большой разницы, на какой именно машине это делать. Но данные имеют очень конкретную привязку к диску, на котором размещены. Что создает немало сложностей к самой концепции бессерверных вычислений. В этой статье я хочу показать, где бессерверная архитектура может быть применима, и рассмотрю несколько новых, и весьма перспективных решений в этой области, таких как Neon, Warpstream и TiDB.

https://habr.com/ru/companies/amvera/articles/912114/

#serverless #warpstream #tidb #Neon_PostgreSQL #kafka #бессерверные_СУБД #Бессерверные_данные

TiDB CloudのServerlessのScalable Clusterについて調べてまとめてみた
https://dev.classmethod.jp/articles/tidb-cloud-serverless-scalable-cluster/

#dev_classmethod #TiDB_Cloud #TiDB #MySQL

TiDB Cloud DedicatedとEC2をPrivateLinkで接続してみた
https://dev.classmethod.jp/articles/tidb-dedicated-ec2-privatelink/

#dev_classmethod #TiDB_Cloud #TiDB #AWS

TiDB CloudでTiDB Node Groupsの一般提供とTiKVのストレージタイプが変更になりました！
https://dev.classmethod.jp/articles/tidb-cloud-node-groups-tikv-storage-type/

#dev_classmethod #TiDB_Cloud #TiDB

TiDB seems to have an office in Thailand. Its compatibility and scalability are interesting.

#fossasia #tidb

If anybody wondered, MySQL encodes BigDecimal in packets as strings. So if u64 is too small for you, then you will use significantly more bandwidth per insert.
Guess whose 120k inserts/s became a 30k headache per hour.
#tidb #mysql

【セッションレポート】 「mixi2の舞台裏」 TiDBで実現するSNSのスケーラビリティとパフォーマンス #devsumiE
https://dev.classmethod.jp/articles/mixi2-tidb-sns-devsumie-14-E-2/

#dev_classmethod #セッションレポート #TiDB

トラフィックが予測できないオンラインゲームのローンチでも、NewSQLの動的サイジングは十分に機能したのか？［PR］
https://www.publickey1.jp/blog/25/pandoland-newsqlpr.html

#publickey1 #MySQL #RDB #データベース #TiDB

総合格闘技大会BreakingDownの高負荷に耐えるライブ配信システムを、サーバレスの「Cloud Run+TiDB Cloud Serverless」で再構築に成功した話［PR］
https://www.publickey1.jp/blog/25/breakingdowncloud_runtidb_cloud_serverlesspr.html

#publickey1 #MySQL #RDB #クラウド #データベース #PR #TiDB

IT初心者のテレビマンが半年でクラウド上に野球中継リプレイ用システムを開発、データベース費用も激減できた理由とは［PR］
https://www.publickey1.jp/blog/25/mbstidbitpr.html

#publickey1 #AWS #MySQL #クラウド #データベース #DBaaS #PR #TiDB

TiDB Cloud Dedicatedのスケールアップ、スケールアウトをやってみた
https://dev.classmethod.jp/articles/tidb-dedicated-scaleup-out/

#dev_classmethod #TiDB #TiDB_Cloud

Lambda+Bedrock+TiDB Cloudで、LangChainを使って会話履歴を含めたやり取りしてみた
https://dev.classmethod.jp/articles/lambda-bedrock-tidb-cloud-langchain/

#dev_classmethod #Amazon_Bedrock #TiDB #TiDB_Cloud #AWS_Lambda #Python #LangChain

Modern Database Architecture: #Cloud Storage Evolution 🚀

🔹 #ZeroDisk architecture leverages #AWS #S3 as primary storage, eliminating need for traditional disk management

🔸 #Database systems gain instant scalability and elasticity through separation of compute and storage

🔹 New approach enables three deployment options:
- Direct #S3 writes
- #S3Express as cache layer
- #Raft cluster with S3 backend

🔸 Major platforms adopting this architecture:
#Snowflake, #Clickhouse, #Neon, #TiDB

🔹 Trade-offs balance between latency, cost, and durability metrics

🔸 Benefits include serverless operation, instant failover, and unlimited storage capacity

https://avi.im/blag/2024/zero-disk-architecture/

#DevOps

ThoughtSpotとTiDB Serverlessの接続方法
https://qiita.com/JunyaKonishi/items/c1c290ad9215eccdbf2a?utm_campaign=popular_items&utm_medium=feed&utm_source=popular_items

#qiita #Howto #TiDB #ThoughtSpot

Orbがデジタル通貨決済システムの基盤にNewSQLのTiDBを採用。ETLをなくし、トランザクション処理とデータ分析を統合可能に［PR］
https://www.publickey1.jp/blog/24/orbnewsqltidbetlpr.html

#publickey1 #MySQL #RDB #データベース #PR #TiDB

Going to #KubeCon then join us and #dremio and #tidb #pingcap for our happy hour Modern Data Infrastructure Happy Hour, https://lu.ma/xevt2ll2

増えすぎたデータベースと計画停止の苦労を、TiDBへの移行で解決できるか？ レバテックの挑戦［PR］
https://www.publickey1.jp/blog/24/tidb_pr.html

#publickey1 #MySQL #RDB #データベース #PR #TiDB

TiDB CloudでDedicatedクラスタからServerlessクラスタにレプリケーションしてみた（Changefeed機能）
https://dev.classmethod.jp/articles/tidb-cloud-dedicated-changefeed-serverless/

#dev_classmethod #TiDB_Cloud #TiDB #MySQL #AWS #Amazon_S3 #Amazon_EC2

TiDB Cloudで変更データをストリーミングするChangefeedを使って、S3に出力してみた
https://dev.classmethod.jp/articles/tidb-cloud-changefeed-s3/

#dev_classmethod #TiDB_Cloud #TiDB #MySQL #AWS #Amazon_S3

Pinterestが世界有数規模のHBaseクラスタをNewSQLのTiDBへ置き換え、その理由と成果は［PR］
https://www.publickey1.jp/blog/24/pinteresthbasenewsqltidbpr_1.html

#publickey1 #MySQL #RDB #データベース #PR #TiDB