Fluentdは JSONストリームとしてログを扱うログ収集デーモンです。
これまでのところ、最大のユーザーではピーク時で
100台以上のサーバ、650GB daily 、70,000msgs/sec のログを収集しています。
本文章は,Impala のメモ の TODO のうち,BackEnd の特にクエリの実行部を読み,文章化したものである.
BackEnd(BE) は単体のデーモンとして動作し,FE 側でパースした結果(Job ID/Plan)に基づいて処理を実行する.FE と BE のやりとりには Thrift が用いられている.
|FE| - パース結果(Job ID/実行Planなど) thrift -> |BE|
原文: The Twitter Engineering Blog: Introducing Gizzard, a framework for creating distributed datastores
This article is translated by @ono_matope. Please contact me if any problem.
- 更新
2013-02-06
- バージョン
1.0.1
- 作者
@voluntas
- URL
変更履歴
- 日時
2024-04-11
- 作
時雨堂
- バージョン
2024.4
- URL
時雨堂クラウドサービスを支える技術
- メインスピーカー:マシューさん(@matthewmccull)
- サブスピーカー:ジョンさん(@johndbritton)
従来の CVCS (集中バージョン管理システム)のリビジョン番号は連番。 SVN はサーバーにデプロイした時点でリビジョン番号1と設定される。
- 更新
2014-11-20
- バージョン
0.0.5
- 作者
@voluntas
- URL
概要