[B! AWK] beth321のブックマーク

beth321 id:beth321

AWKに関するbeth321のブックマーク (10)

Linux/UNIXで容量の大きいファイル&ディレクトリを調べる | 俺的備忘録〜なんかいろいろ〜
LinuxやUNIXを使っていると、あるパーティションの容量(たとえば、/var/logなど)がいっぱいになってしまうことがある。そういった時は、dfコマンドなどで各パーティションの容量を確認し、そのパーティション内で容量が大きくていらないファイルやディレクトリを削除したり、別のパーティションに移動させる対処が必要になる。今回は、そんな容量の大きいファイルやディレクトリを確認する方法について記述する。 1.容量の大きいファイルを調べる Linuxの場合、﹁-S﹂オプションを付与することでファイル容量の大きい順に出力する。 Linuxの場合 ls -lhS 調べたいディレクトリなお、HP-UXなどの古いOSでは﹁-S﹂オプションが存在しない。そのため、sortコマンドと組み合わせる事で同様の出力を求める。 HP-UXなどの場合 $ ls -l 調べたいディレクトリ | sort -n
beth321 2015/03/04
コマンド

Linux

Saved For Later

あとで読む

UNIX

du

find

command

awk

*あとで読む
リンク
シェルスクリプトワークショップ資料 - 上級者向け「シェル芸」
LINQ in Unity LINQ to GameObject - https://github.com/neuecc/LINQ-to-GameObject-for-Unity/ UniRx - https://github.com/neuecc/UniRx
beth321 2014/12/30
あとで読む

tutorial

shellscript

シェル

シェル芸

Linux

bash

awk

shell

資料
リンク
これは強力！ AWKとパイプの新しい関係～時刻を取得する関数、Socket通信、双方向パイプ
CodeZine編集部では、現場で活躍するデベロッパーをスターにするためのカンファレンス「Developers Summit」や、エンジニアの生きざまをブーストするためのイベント「Developers Boost」など、さまざまなカンファレンスを企画・運営しています。
beth321 2014/12/11
()

programming

awk

command

開発

プログラミング

*あとで読む

シェル芸

Misc

_later
リンク
AWKのススメ - クックパッド開発者ブログ
はじめまして。インフラチームの菅原といいます。今年の7月に入社してから、コンソールとにらめっこする毎日を過ごしています。クックパッドのようにアクセスの多いサイトのサーバを扱うことが今まで無かったので、いろいろと勉強になることが多いです。さて、インフラチームではサーバの状況をモニタリングして、サーバに問題がないかを常に把握するようにしています。そのため日常的にtailでログを追いかけているのですが、そんなときはAWKが非常に便利なことに気付き、最近はかなりAWKにハマっています。今回は絶賛マイブーム中のAWKの活用例をご紹介したいと思います。なぜAWKなのか？残念ながらAWKの知名度はあまり高くないようで、社内でも﹁なぜRubyでやらないのか？﹂と聞かれることがありました。僕も入社するまではcutの代わりぐらいにしか使っていなかったのですが、あるときログ出力の整形に使って以来、AW
beth321 2014/11/20
プログラミング

クックパッド

AWK

linux

log

command

tips

cookpad

Programming

rails
リンク
統計屋のためのAWK入門 - あんちべ！
はじめに本稿はAWKという言語を用いて、ごく簡単にデータ分析用の前処理*1をするための解説記事です。 AWKは短いコマンドを記述するだけで多様なデータ処理を可能にします。特にデータの抽出に関して恐るべき簡易さを提供します。具体的には、input.txtというファイルの中から "fail"という文字列を含む行を抽出したければ次のように書くだけです。 awk /fail/ input.txt つまり、スラッシュ記号で文字列を指定するだけでその文字列を含む行を抽出できるのです。大変簡単ですね！また、awkはLinuxやMacには標準で入っており、 Windowsでもawk.exeを一つ用意するだけなので、面倒なインストール作業や環境構築は不要で誰でも即座に使えるため、自分で書いた処理を他人に渡したり*2各サーバに仕込むなども簡単に出来ます。複雑な処理をする場合はPythonや
beth321 2014/09/16
windows

mac

Google

awk

統計

プログラミング

linux

tips

データ

コマンド
リンク
USP 友の会勉強会 AWK 一行野郎百裂拳
USP 友の会勉強会 2013/12/22 AWK 一行野郎百裂拳Normal Action-less 1 awk '{print $0}' awk '4' ファイルの中身を書き出す。 ≒ cat 2 awk '{}' awk '' 何も表示しない。 ≒ cat > /dev/null 3 awk '{print NR, $0}' awk '$0 = NR " " $0' 行番号を付ける。 ≒ cat -n 4 awk 'NR <= N {print $0}' awk 'NR <= N ' 最初のN行を抜き出す。 ≒ head -n N 5 awk 'NR == N , NR == M {print $0}' awk 'NR == N , NR == M 'N行目からM行目を抜き出す。 6 awk 'NR >= N && NR <= M {print $0}' awk 'N
beth321 2013/12/24
awk

シェル芸

usptomo

USP

勉強会

お役立ち

-

cat
リンク
なるべく書かないawkの使い方 - ザリガニが見ていた...。
awkという、古くからのスクリプト言語がある。︵1977年生まれ。読み方は﹁オーク﹂である。エイ・ダブリュ・ケイではない︶man awkをPDFに変換してみると、たったの3ページ強しかない。 $ man -t awk|pstopdf -i -o ~/Downloads/awk.pdf とてもシンプルな言語仕様ではあるが、awkには必要十分な表現力がある。特にテキストを処理する場面においては、最小限のシンプルな記述で、気の利いた処理を素早くこなす。無駄のないawkワンライナーを見ると、ある種の感動を覚える。awk以降に生まれたスクリプト言語は、少なからずawkの影響を受けていると思われる。 awkを知ることで、間違いなく幸福度は上がると思う。いつかきっと﹁知ってて良かった﹂と思える時が来るはず。もっともっと、awkを知りたくなってきた。基本動作 awkの基本動作は、とってもシンプルである。
beth321 2013/12/10
c

awk

Unix

LINUX

コマンド

テキスト処理

お役立ち

tips

仕事

プログラミング
リンク
データ集計コマンドを極めてシステム処理と業務速度を爆速化するお話 - Y's note
Index データ集計コマンド爆速で検索したいぜ！ lookを使う LC_ALL=Cを設定するデータのランダムサンプリングがしたいぜ！ sedを使う awkを使う sortの--random-sortを使う Script言語を使う shufを使うランダムサンプリング速度比較合計と平均値を集計したいぜ！列データ取得重複行のカウント合計値出力平均値出力複数ファイルのデータ結合がしたいぜ！共通項目での結合同じ行数での結合まとめデータ集計コマンド joinコマンドが便利過ぎて生きるのが辛い - Yuta.Kikuchiの日記 lookコマンドによる二分探索が速すぎて見えない - Yuta.Kikuchiの日記今日はデータ集計を行う上で絶対に覚えておいた方が良いコマンドと知識を紹介したいと思います。これを身につければシステム処理と業務効率化に大きく繋がると思います。この記
beth321 2013/08/01
まとめ

sed

コマンド

awk

shell

grep

データ

sort

look

join
リンク
IDEA * IDEA
ドットインストール代表のライフハックブログ
beth321 2013/03/07
*あとで読む

*thresh25

awk

programming

あとで読む

プログラミング

*資料

入門

便利

ドットインストール
リンク
GNU awk (gawk) を用いた Apache ログ解析方法
LogbackからLog4j 2への移行によるアプリケーションのスループット改善 ( JJUG CCC 2021 Fall ) Hironobu Isoda
beth321 2012/04/02
apache

awk

ログ

tips

server

httpd

まとめ

log

development
リンク
1

お知らせ

もっと読む

公式Twitter

@HatenaBookmark
リリース、障害情報などのサービスのお知らせ
@hatebu
最新の人気エントリーの配信

キーボードショートカット一覧

j次のブックマーク

k前のブックマーク

lあとで読む

eコメント一覧を開く

oページを開く

設定を変更しましたx