秒間数万のログをいい感じにするアーキテクチャAWS Summit Tokyo 2016 Developer Conference (2016/06/03)
15分で作る、Logstash＋Elasticsearchによるログ収集・解析環境 | さくらのナレッジ
たとえば、inputに「stdin」、outputに「file」というプラグインを使用すれば、標準入力からイベントを受け取り、それをファイルに出力することが可能となる。そしてLogstashが注目されている理由の1つのが、出力先として「Elasticsearch」が利用できる点だ。 検索機能に優れた分散型データベース「Elasticsearch」 Elasticsearchはオープンソースで開発されている分散型データベースシステムだ（図2）。「Elastic」という名前のため勘違いされやすいが、米Amazonが提供しているクラウドサービス「Amazon Elastic Compute Cloud（EC2）」とは無関係だ。 図2 ElasticsearchのWebサイト ElasticsearchはJavaで実装されており、またデータ検索エンジンとして「Lucene」が組み込まれているのが特
米Facebook、ログデータ収集サーバー「Scribe」をオープンソースに | OSDN Magazine
米Facebookは10月24日（米国時間）、自社開発のログデータ収集サーバー技術「Scribe」のソースコードを公開した。大量データに対応するよう設計されているという。ライセンスは「Apache Licence 2.0」を採用、SourceForge.netのWebサイトでダウンロードできる。 Scribeは、Facebookが実際に自社インフラで利用しているログ収集システムで、多数のサーバーから寄せられるログデータをリアルタイムに収集する。ユーザー数の拡大に対応するため、自社開発したという。開発にあたり、Facebookがオープンソースとして公開している開発ツール「Thrift」を用いた。PHP、Python、C++、Javaなどのコードからログメッセージを収集できる。 特徴は拡張性と信頼性。クライアント側を変更せずに拡張が可能で、データセンター間でメッセージをやり取りする際のバッチ処
MySQL対応のアクセスログ取得ソフト「Chakra」 － ＠IT
2007/09/05 ニューシステムテクノロジーは9月5日、複数のデータベース製品へのアクセスを監視、記録できる「Chakra V3.1.1」を11月1日に出荷開始すると発表した。商用データベースだけでなく、オープンソースのMySQLにも対応するのが特徴。 商用データベースとオープンソースデータベースを1つの監視ソフトウェアで監視できるため、より広範囲なデータベースのアクセスログを取得できる。MySQLなどのオープンソースデータベースは、ECサイトや情報系のWebサイト、SNS、ブログのシステムとして広く使われている。 対応するデータベースはOracle、IBM DB2、Microsoft SQL Server、Sybase、MySQL。ネットワーク上を流れるパケットをキャプチャし、プロトコルを解析することで、データベースへの処理要求とその結果を取得する。いつ、誰が、どこからどのようなSQ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Monitor CoreOS at Scale with Datadog
Matomo - The Google Analytics alternative that protects your data
