[B! awk][プログラミング] richard

richard_raw id:richard_raw

awkとプログラミングに関するrichard_rawのブックマーク (9)

構造化テキストデータを操作するためのコマンドラインツールリスト | POSTD
テキストベースのファイル形式と、それぞれを︵主にLinux上で︶操作するためのコマンドラインツールのリストを掲載しています。目次 DSV XML,HTML JSON YAML,TOML INI 設定ファイルおまけ‥単一ファイルデータベース用コマンドラインインタフェース︵CLI︶ライセンス情報開示 DSV CSV や TSV などを含む DSV︵Delimiter-separated values、区切り文字で区切られた値︶です。 Awk AwkはPOSIXで標準化されているコマンドラインツールで、DSVデータ処理用プログラミング言語です。Awkに関するリンクは以下のとおりです。 Awk.info — Awkに関する情報が豊富です。 AWK Vs NAWK Vs GAWK —プラットフォーム別実装の比較です。すでにプログラミング言語を使用してプログラミングをしている場合は、naw
richard_raw 2016/06/03
GNU datamashが気になります。

linux

shell

awk

clip

プログラミング
リンク
シェルスクリプトの中で1行ずつ変数を分割する際には、cutとかawkとか余計なプロセスを起動せずsetを使って分割した方が効率的 - 双六工場日誌
シェルスクリプトの中で、スペース区切りもしくはタブ区切りのレコードを扱うことがよくあると思います。たとえば、前回のエントリ「AWS CLIとjqを使って、AWSのELBボリュームがアタッチされているEC2インスタンス名を出力するワンライナーを書いた - 双六工場日誌」のスクリプトの出力は以下のようになります。 i-ec56a9f5 vol-07d00601 servername i-ec56a9f5 vol-8f550991 servername このようなレコードの特定の列を取り出して、処理する際にどうするのが効率的か、というのがこのエントリのお題です。非常に古い話題なので、昔からシェルスクリプトを書いている人には自明な話ではありますが、最近、シェルの標準機能の話を聞く機会がなく、失われつつある技術になってきている気がしているので、改めて確認ということで。例として挙げたレコードから
richard_raw 2015/01/26
なるほどsetを使うのか！近頃はbashしか触れてないから配列に入れてましたわ。

linux

shell

awk

プログラミング

スクリプト

clip
リンク
これは強力！ AWKとパイプの新しい関係～時刻を取得する関数、Socket通信、双方向パイプ
CodeZine編集部では、現場で活躍するデベロッパーをスターにするためのカンファレンス「Developers Summit」や、エンジニアの生きざまをブーストするためのイベント「Developers Boost」など、さまざまなカンファレンスを企画・運営しています。
richard_raw 2014/12/16
gensub()とかxargsの使われ方とか（ぇ

awk

プログラミング

clip
リンク
統計屋のためのAWK入門 - あんちべ！
はじめに本稿はAWKという言語を用いて、ごく簡単にデータ分析用の前処理*1をするための解説記事です。 AWKは短いコマンドを記述するだけで多様なデータ処理を可能にします。特にデータの抽出に関して恐るべき簡易さを提供します。具体的には、input.txtというファイルの中から "fail"という文字列を含む行を抽出したければ次のように書くだけです。 awk /fail/ input.txt つまり、スラッシュ記号で文字列を指定するだけでその文字列を含む行を抽出できるのです。大変簡単ですね！また、awkはLinuxやMacには標準で入っており、 Windowsでもawk.exeを一つ用意するだけなので、面倒なインストール作業や環境構築は不要で誰でも即座に使えるため、自分で書いた処理を他人に渡したり*2各サーバに仕込むなども簡単に出来ます。複雑な処理をする場合はPythonや
richard_raw 2014/09/16
ΔE94の色差計算をAWKのワンライナーで書いたことがあるので親近感ががが。/そういえばあんまりgsub使ったことないや。

awk

プログラミング

統計

clip
リンク
なるべく書かないawkの使い方 - ザリガニが見ていた...。
awkという、古くからのスクリプト言語がある。︵1977年生まれ。読み方は﹁オーク﹂である。エイ・ダブリュ・ケイではない︶man awkをPDFに変換してみると、たったの3ページ強しかない。 $ man -t awk|pstopdf -i -o ~/Downloads/awk.pdf とてもシンプルな言語仕様ではあるが、awkには必要十分な表現力がある。特にテキストを処理する場面においては、最小限のシンプルな記述で、気の利いた処理を素早くこなす。無駄のないawkワンライナーを見ると、ある種の感動を覚える。awk以降に生まれたスクリプト言語は、少なからずawkの影響を受けていると思われる。 awkを知ることで、間違いなく幸福度は上がると思う。いつかきっと﹁知ってて良かった﹂と思える時が来るはず。もっともっと、awkを知りたくなってきた。基本動作 awkの基本動作は、とってもシンプルである。
richard_raw 2013/12/10
何度か読み返したい。/そういえば256倍本持ってるわ。

awk

プログラミング

clip
リンク
ruby ワンライナーの使い方まとめ - それマグで！
Ruby のワンライナーについて、書いていきます。ワンライナーを使うとワンライナーを使うと、置換や出力処理がとっても便利になります。 ruby -ne '$_.gsub!(/takuya/,"takuya_1st")' -i my_blog.txt 今回使うサンプルファイルはじめに次のようなファイルを用意しました。こんかいはこのサンプルを使いますコーヒ・フラペチーノ 420 ダークモカチップフラペチーノ 490 抹茶クリームフラペチーノ 470 バニラクリームフラペチーノ 470 基本の -e オプション基本の-eオプションです。ruby スクリプトを直接指定する方法です。 takuya@air:~/Desktop$ ruby -e 'puts ARGF.read' test.txt コーヒ・フラペチーノ 420 ダークモカチップフラペチーノ 490 抹茶クリームフラペチーノ4
richard_raw 2013/09/02
AWKみたいにBEGIN, ENDも使えるんだ……。

ruby

プログラミング

awk

clip
リンク
IDEA * IDEA
ドットインストール代表のライフハックブログ
richard_raw 2013/03/07
まさかのawk。そういえば256倍本持ってたような……。

awk

プログラミング

動画

webサービス

教育

clip
リンク
シェルプログラミングTips - UEC - usp engineers' community
UEC - UNIXを深く理解し、シェルプログラミングを極めるコミュニティサイト Info インフォメーションイベント情報 / ニュース・プレスリリースユニケージについてユニケージ開発手法とは / ユニケージエンジニアとはユニケージ開発手法技能検定 / 試験日程ユニケージ開発手法教育講座 / 開講日程ユニケージ開発手法教育講座レポート出版物シェルスクリプトマガジン / 注文 / 取扱書店 / 問合せ USP出版書籍 / 注文 / 取扱書店 / 問合せ Software Design / FreeBSD Expert FreeBSD Weekly Topics / 日経Linux 推薦図書オススメの定番書 / より上級者を目指す UNIXビギナー向け教本 / UNIXの文化を知る AWK/SEDを習得する / 手元に置きたい実用書古典を楽しむ UECサイトについて
richard_raw 2012/03/23
zsh使おうぜ（ぇ

シェル

プログラミング

bash

awk

shell

clip
リンク
UPS出版、書籍「プログラミング言語AWK」を復刊 | パソコン | マイコミジャーナル
ユニバーサル・シェル・プログラミング研究所出版部(UPS出版)は、書籍﹁プログラミング言語AWK﹂を復刊し、発売を開始した。価格は3,990円。復刊ドットコム上にて販売されている。書籍﹁プログラミング言語AWK﹂販売ページプログラミング言語AWKは、AWK開発者(Alfred Aho、Peter Weinberger、Brian Kernighan)による解説書を翻訳したもの。何度かの絶版および復刊を経て、今回UPS出版より改めて販売されることとなった。判型はA5判、ページ数は320ページ。目次などの詳細は復刊ドットコム上を参照してほしい。
richard_raw 2010/01/04
おや。

awk

プログラミング

言語
リンク
1