skillup

技術ブログ

サーバー・ネットワーク

ログ抽出コマンド特集 その1 cat+grep+sort

投稿日:2016年4月4日 更新日:

先日、メモリ使用率の調査に関して記事をかいたのですが、今度はそのログの収集や抽出をおこなってみようかと思います。

やりたいこと

yyyy/MM/dd-HH:mm:ss  メモリ使用率(少数2桁まで) スワップ使用率(メモリ2桁まで)の形式で15分毎に吐かれているログがあるとします。

このログから、

  1. 前日の最高のメモリ使用率
  2. 前日の最低のメモリ使用率
  3. 分布 60%台が何割、70%台が何割・・

といったデータを取り出したいとします。

とりあえず今回は1,2に関して。

まずログの調査をする場合、大体

  1. ログ自体の取り込み、入力
  2. 抽出(特定の文字列を含む)
  3. 算出(最大、最小、平均など)
  4. 算出したものを出力

という流れになるかと思います。

まずログ自体の取り込み、入力はcatで行い、次に特定の日(前日)を含むはgrepで取り出します。最大値(最小値)ということはメモリ使用率でソート(or逆ソート)した1番目になりますのでsort+headで行けます。これらをパイプでつなげばよいので、

最小値

最大値

で取り出せます。

参考リンク

sort コマンド

-サーバー・ネットワーク
-

執筆者:


comment

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です

関連記事

no image

キャッシュについて(主にmemcachedを中心に)

Webサービスのパフォーマンス向上で目に見えて効果があることの一つがDBへのアクセス回数を減らすことです。 それはSQLを発行する回数を少なくするなど、普段からのプログラムの書き方ももちろん大事なので …

no image

vimの小ネタ(主にテキスト置換系に関して)

前回に引き続き、またまたvimの小ネタなど Contents1 マクロ2 単純な置換3 改行系の置換4 一括置換 マクロ エディタ上である動作を記録させておきたい場合、q+任意の文字(例えばa)+任意 …

no image

Addtypeについて

htmlにはPHPを埋め込むことができますが、拡張子がhtmlの場合、そのままでは実行できません。 この場合、通常では拡張子を変えなければいけないところですが、apacheを使っている場合、設定ファイ …

no image

DNSの仕組み

本日はDNSについて。 とりあえず要点のみ DNSのざっくりとした仕組み ネットワーク上での住所を決める仕組み。 本来はIPがその役割を果たしている. [crayon-6285a06a2796d668 …

no image

監視検知処理に関して

実務で監視のスクリプトを書くことがあったんでメモしときます。 監視検知とは例えばあるディレクリに変化(ファイルの作成・更新・削除など)があった時に、それをトリガーにして何らかの処理を行うと言う仕組みに …

アーカイブ