[B! unix][tips] stealthinuのブックマーク

改めてlessコマンドの使い方 - 日々之迷歩

テキストファイルを閲覧するためによく使うのがlessコマンド。特に巨大なファイルを開く時などは必須でしょう。Gバイト単位の巨大なファイルをVimやEmacs、その他のテキストエディタで開くと、メモリを大量に消費して最悪OSが反応無しとかになります、、、また、コマンドの出力結果をパイプでlessに渡し、出力結果をジックリ観察するのに重宝します。普段何気なく使っていらっしゃる方々が多いと思うが、改めて使い方の確認をしてみると、何かしらの発見があるかもしれません。起動時オプション各オプションには、短いショートオプションと長いロングオプションがあります。設定ファイルに記載する場合は分かりやすいロングオプション、コマンド実行時にはタイプ数が少ないショートオプションを使うと便利でしょう。特に-X/--no-initオプションは案外知られていないかもしれません。終了時に画面が消えてショボーンとなる

stealthinu 2017/06/14

lessの-Xオプション！知らんかった！！抜ける時にそのままその表示を残しといて欲しいとき。これ-Xオプションについては起動後の切り替えは出来ないのか。そこはちょっと残念。 ●unix ●tips

リンク

bashのそれって実はこういう書き方できるよ一覧 - Qiita

bashで普段こう書いているけど、実はこういう書き方もあるんですよというのをまとめてみました。 ->の右側がmanに載ってるテク名です。例えばどういったものが書けるかはガチャガチャした前回の記事で…。 `command` -> Command Substitution 書く量は増えるけど、視認性が良い(ネストした時が特に)。尚、これは書き方が違うだけでどっちもCommand Substitutionです。

stealthinu 2017/03/16

コマンドを「`～`」で囲って取得するんじゃなくて「$(～)」で書く記法があるのか。

リンク

改行を置換したい | skmks

stealthinu 2016/03/18

改行コードを色々な方法で置き換える。emacs/viやtr/sed/perlなど。sedが思いの外めんどい。なんやかんやでperlが一番らくちん。速度そこそこでよければperlだな。 ●emacs ●unix ●tips

リンク

再帰globパターン **/ の元祖は zsh なのか、調べてみた - hkoba blog

今日 @satoh_fumiyasu さんのこんなツイートを見かけました。 zsh や rsync にある拡張 glob pattern のひとつ、** の元祖ってどこ?— ふみやす＠シェルまおう(自称ではない) (@satoh_fumiyasu) 2016, 2月10私もずっと気になっていたので、この機会に調べてみました。最初は ..../ だった！当時のソース公開は usenet 経由だったよな、というわけで groups.google.com で zsh を検索すると、Zsh-1.0 の公開時のアナウンスと、ソースが出てきました。アナウンスの中では zsh の機能の由来を From ksh, From tcsh, From bash と細かく挙げているのですが、再帰globパターンは﹃その他﹄として別扱いされています。 Other stuff: - recursiv

stealthinu 2016/02/12

zshでよく使う「**/」はzshが元祖で良いみたい。で「**/」に対応してない場合は「(*/)#」でいいというか昔々のZsh-1.0だとそう置き換える実装だったとのこと！

unix
tips

リンク

[Bash]標準出力・標準エラー出力の全て（1>&2とか）まとめ | Coffee Breakにプログラミング備忘録

標準出力と標準エラー出力についてメモ毎回調べ直すことになっているので、メモメモ。さらに調べるのにまとまったサイトがなくて１つ１つ調べるはめになるので。まとめシェルによって違いがあるため今回はbashに限る前提知識【知識0】 unixコマンドは左から右に処理される。これは絶対【知識1】 (標準入力 : 0) 標準出力 : 1 ※画面に出力される標準エラー出力 : 2　※画面に出力される【知識2】 0,1,2はファイルディスクリプタと呼ぶ【知識3】「>」リダイレクトシェルの結果を出力する場所を指定可能 command ファイル・ディスクリプタ> 出力先 ※commandは何らかのコマンドかshファイルとしている【知識4】出力先などを特定のファイルディスクリプタに送りたい場合は「&ファイル・ディスクリプタ」とする echo "standard output" >&2 【知

stealthinu 2016/02/10

﹁1>&2﹂の意味をはじめてちゃんと理解できたわ。標準出力(ファイルデスクリプタ1)を標準エラー出力(2)と同じところへ向ける、という意味なのね。数字の前の﹁&﹂はファイルディスクリプタであることを意味してるのね。 ●unix ●まとめ ●tips

リンク

最強のSSH踏み台設定 - Qiita

追記：openssh-7.3 以降なら ProxyJump や -J が使えますホスト名を + で繋げることで多段Proxy接続も簡単に、がコンセプトだった本エントリの設定ですが、OpenSSH 7.3 から ProxyJump という設定が使えるようになったので、使えるなら ProxyJump を使う方が健全だし柔軟で使い勝手も良いのでそちらを覚えて帰ることをオススメします。使い方は簡単で以下のような感じです。多段も行けるし、踏み台ホスト毎にユーザ名やポート番号を変えることも出来ます。 # 1. bastion.example.jp -> internal.example.jp ssh -J bastion.example.jp internal.example.jp # 2. bastion.example.jp -> internal.example.jp -> super-de

stealthinu 2015/10/15

sshで簡単に多段proxy接続を書ける設定

リンク

日付を取得する | UNIX & Linux コマンド・シェルスクリプトリファレンス

→ -d 'N days ago' オプションでN日前の日付を取得できる。 Linux では拡張された GNU date コマンドが使用できるので、簡単に過去の日付を取得できる。 $ date 2007年6月2日土曜日 23:05:20 JST #↑そのまま実行すると当日の日時が表示される。 $ date -d '1 days ago' 2007年6月1日金曜日 23:05:31 JST #↑1日前を指定すると、現在日時から24時間前の日時が表示される。﹁GNU date﹂が使用できない場合 → 一時的に環境変数TZを変更した上で date コマンドを実行する。古い UNIX マシンなどでは、﹁GNU date﹂が使用できない場合が多い。そういった環境では、一時的にタイムゾーンを変更して date コマンドを実行することで、過去の日付を取得することができる。 $ e

stealthinu 2015/09/16

GNU dateだと「date -d '3 days ago' +%Y%m%d」で３日前の日付を20150913みたいな形式で取得できる。6 month ago で半年前。

リンク

ファイルパスからファイル名や拡張子を自由に取り出す - ザリガニが見ていた...。

いつも、いざ使う時になって、どうやるんだっけ？と探し回ってしまうので、忘れないようにメモ。︵以前の日記でも、所々分散して書いているかもしれないが、ここで総括的に記録することにした︶シェルスクリプト $ fpath='/a/b/c.d.e' # ファイル名を取り出す︵拡張子あり︶ $ fname_ext="${fpath##*/}" $ echo $fname_ext c.d.e # ファイル名を取り出す︵拡張子なし︶ $ fname="${fname_ext%.*}" $ echo $fname c.d # 拡張子を取り出す $ fext="${fpath##*.}" $ echo $fext e # ディレクトリを取り出す $ fdir="${fpath%/*}" $ echo $fdir /a/b なるほど！そして、仕組みとしては、以下のルールしたがって変換されているようだ。 ${

stealthinu 2015/09/16

ファイルパスから拡張子だけ消す場合など ${変数%パターン}

リンク

Lessの便利な使い方

最近 Stop using tail -f (mostly) や「tail -f」を使うのは情弱、情強は「less +F」を使うなどless押しな記事が幾つか上がっているんだけど、タイトルが煽り気味なのか若干反感を呼んでいるようなのでless派が職場で肩身の狭い思いをしないようにもう少し便利な使い方を紹介したい。 tail -fの様なScroll forward less +Fで起動またはless起動中にF 元記事にもあるtail -fと同様の振る舞い。正直この機能と検索だけでいいのであればtailで十分。lessの便利なところは様々な機能との組み合わせにあって、これから紹介する機能は基本的にこのモードと組み合わせが可能だ。あと、less開いてFのほうがタイプが面倒くさくないのでおすすめ。 1行で表示する (改行しない) less -Sで起動またはless起動中に-Sr(-Sでモード切

stealthinu 2015/04/06

&でマッチしたやつだけ表示出来るのか！tail -f | grepがlessだけで出来るとは。これは使う。

tips
unix

リンク

「tail -f」を使うのは情弱、情強は「less +F」を使う | ソフトアンテナ

ログファイルの監視に﹁tail -f﹂コマンドを使っている方は多いかもしれません。ファイルの末尾を表示する﹁tail﹂コマンドに、ファイル末尾に追加されたデータを追跡表示する﹁-f﹂オプションを指定することで、手軽にログの監視ができる便利なコマンドです。しかし最近、﹁tail -f﹂より便利なコマンドとして﹁less +F﹂の使用を推奨するブログ記事﹁Stop using tail -f (mostly)﹂が公開され話題となりました。﹁less﹂はテキストファイルの内容を表示する、ページャーと呼ばれるソフトウェアですが、これに﹁+F﹂オプションを指定することで、﹁tail -f﹂より便利なファイル監視コマンドとして使えるらしいのです。具体的に﹁less +F﹂が﹁tail -f﹂より便利な点として以下の2点が挙げられています。監視モードと通常モードをlessを起動したまま行き来できる

stealthinu 2015/04/02

タイトル煽りすぎだけどこれは知らんかったし便利だわ。tail -fしてて、おっ？て思ったのをtail終わらさずにすぐ検索できるもんね。これはいいわ。

tips
unix

リンク

コンソールから切れたプロセスを標準出力につなげなおす - 絶品ゆどうふのタレ

不慣れな環境を不意にいじった時にあるあるネタ。とりあえずーとか言って勢いで書いたsetupスクリプトを実行してみたら意外と時間かかって、ちょっと目を離した隙にsshの接続が切れちゃいました！。。。ありますよね。ほんとよくありますよね。そうなる予感はあったんだなんて後の祭りです。ふとした油断から、screenもnohupすらも使わずにやってしまって、こんなことに。 shellがHUPしなかったからプロセスは生きてるものの、ログが見れないから進行状況がわからない。うまく行ってるのかどうかモヤモヤした気持ちのまま、プロセスが終わるのをじっと待つ。。。まぁ実に切ないです。こんな時、いつも思うこと。このプロセスの出力、もっかいstdoutに繋げられたらいいのに。。。はい。というわけでつなげましょう。長い前座ですみません。切り離したプロセスを用意 #!/bin/bash wh

stealthinu 2014/02/06

gdb使うとコンソールから切れたプロセスの標準出力を取得できる。screen使えない環境で切れちゃったときとか緊急時用のテクに。

リンク

Does curl have a --no-check-certificate option like wget?

I am trying to make a curl request to one of our local development servers running a dev site with a self-signed SSL cert. I am using curl from the command line. I saw some blog posts mentioning that you can add to the list of certificates or specify a specific (self signed) certificate as valid, but is there a catch-all way of saying "don't verify" the ssl cert - like the --no-check-certificate t

stealthinu 2013/08/30

curlでcertificateのチェックをさせない、wgetでいう「--no-check-certificate」のオプションは「-k」

unix
tips

リンク

Diary of 2003/07/10

stealthinu 2013/05/29

cygwinのzshなどで「Ignore insecure directories …」というエラーが出る場合compinit -uで回避できる。

リンク

シェルスクリプトで「ビルドスクリプト」を作る時に便利なテクニック - ククログ(2012-10-11)

プログラムの種類によっては、そのまま実行できるものと、実行できるようにするために﹁ビルド﹂が必要なものとがあります。Cなどのコンパイルが必要な言語で書かれたプログラムは当然ビルドが必要ですし、コンパイルが不要な言語であっても、インストーラパッケージを作るというビルド作業が必要な場合はあります。ビルド作業の自動化のためのツールとしてmakeなどがありますが、そこまで本格的な事をやる必要がない場合は、シェルスクリプトで﹁ビルドスクリプト﹂を作るのが手軽でおすすめです。この記事では、そのような場合に役立つシェルスクリプトのテクニックを4つご紹介します。エラーの気付きやすさとデバッグのしやすさを高めるメッセージに色を付けるシェル関数をライブラリにする一時的に作業ディレクトリの中に入るエラーの気付きやすさとデバッグのしやすさを高めるはじめに紹介するテクニックは問題が発生した時に気づきや

stealthinu 2012/10/12

カッコでくくると自動的に元のディレクトリに戻ってくれるのか。あとrun関数の考え方いいな。小さなのはset -ex だけでいいかもしれんが。

tips
unix

リンク

GNU Parallelがすごすぎて生きるのがつらい

皆さん今日もたくさんのサーバを相手にされていることかと思いますが、いくつかのサーバにアクセスして 1 秒間の統計情報(例えばvmstat 1 2)を集めてパッと表示したい時ってどうやってますかね？shell script を学びはじめたばっかりの僕はこんな感じで書いてました。 $ for i in host1 host2 host3; do ssh $i "vmstat 1 2 | tail -1"; done 0 0 0 329004 210836 14275360 0 0 0 2424 1410 1828 0 0 100 0 0 0 0 0 3716112 587704 25921684 0 0 0 488 1643 2026 0 0 100 0 0 1 0 0 555440 265560 14015548 0 0 0 4204 1534 2392 1 0 99 0 0 vmstatと

stealthinu 2011/04/19

parallelを使うとシェル上で簡単に大量並列処理が書ける。使ったことなかった。そこまで大量の並列処理が必要にならないんだよな…

リンク

IDEA * IDEA

ドットインストール代表のライフハックブログ

stealthinu 2010/12/14

ラベルつき some_very_long_and_complex_command # label 拡張子変更 mv filename.{old,new}

unix
tips

リンク

どさにっき

2010年10月3日(日) ■ Lisp like Evaluation _ あなごるさん。Lisp なS式表記の四則演算をしてみましょう。 _ すでに突っ込まれてるように、問題に不備があって題意を正しく実装すると正解にならないし、出力が小さすぎるのでマジメに解くより解答を即値で埋めこんだ方が小さくできておもしろくない。問題に不備がなく埋め込みできないサイズだったとしても、shなら lisp の処理系を呼ぶだけだからなおさらおもしろくない(すでに bash で30バイトの解を投稿してる人がいるが、たぶんスクリプト側で不備を修正して lisp を呼びだす、という内容だと思う)。 _ ので、あなごるとは無関係に解いてみる。sh (bash) で。 sed 's,(,$(echo ,g;s,),|(read a b;bc<<<${b// /$a })) ,g;s,*,\\*,g'>>$0

stealthinu 2010/10/04

「cd -」で元いたところに戻る。知らんかった！うへぇー。こんな基本的なコマンドに知らん事ってあるもんだわ。はずかしい。

tips
unix

リンク

ログローテーションはrotatelogsで、圧縮はpbzip2で

日本最強の看板を下ろしたミラーサーバftp.jaist.ac.jpの管理者の一人が、このサーバにまつわるよしなしごとを語ります。 English versions of some posts on another blog. Apache HTTP Serverで日ごとに別のファイルにログを出力するのは、標準添付されているrotatelogsでできるのですが、意外と知られていないようです。アクセスログならこんな感じです。 CustomLog "|/インストール先/bin/rotatelogs /出力先/access_log.%Y%m%d 86400 540" combined マニュアル通りなら、この設定ではrotatelogsが起動してから24時間で出力先のログファイルが切り替わりそうに見えます。しかし、実際にはrotatelogsはtime(2)の返す値を86400秒で丸めてから開始

stealthinu 2010/03/26

apacheのログローテーションのtips日毎のログはrotatelogsだけで可能。

リンク

どさにっき

2009年1月22日(木) ■ きょうのあなごる _ Up and Downを bash で。サイズを縮める前にまず動くものを作ってみたけど、やっぱり予想どおり遅すぎて話にならん。文字ごとに分割してtrに食わせるなんてやってたら速くなりようがない。が、それ以外に方法あるか？ read s while IFS= read t;do for i in `seq 0 ${#s}`;do c=${s:$i:1} case "${t:$i:1}" in +)r="$r"`tr \ -} !-~<<<"$c"`;; -)r="$r"`tr \ -} '\37-|'<<<"$c"`;; *)r="$r$c";; esac done s="$r" r= done echo $s ↑bash で linux じゃないと動かん。 ■ A-Z _ そういえば上のスクリプトではtrによる変換文字をを8進

stealthinu 2009/01/23

『en_US ではアルファベットが ABC...XYZabc...xyz ではなく aAbBcC...xXyYzZ と並んでいる』なるほど、そらはまるわ。

unix
tips

リンク

Command Technica：はじめてrsyncを使う方が知っておきたい6つのルール (1/2) - ITmedia エンタープライズ

Linuxなどを利用する上で、﹁これはどうやったら実現できるのだろう﹂と思うことは数知れない。本連載では、ユーザーがひんぱんに遭遇するであろう問題と、その解決方法を解説する。上級者には新たな発見を、初心者には上級者への道の手引きとなるだろう。ファイルやディレクトリをバックアップ／同期するためのツールは幾つも存在していますが、rsyncはとりわけ大きな人気を誇っているといってよいでしょう。変更分を検出して差分のみを転送することで、ネットワーク経由でも効率的にバックアップ／同期が行える点や、sshなどのリモートシェル経由での利用が可能な点など、機能の洗練度はさすがに登場から10年以上たっているだけのことはあります。バックアップやミラーリングなどの用途であれば、基本的にはコピー元とコピー先でわずかな違いしか発生しないはずで、ファイルの相違部分だけを転送するrsyncは効率的に機能します。そん

stealthinu 2008/04/21

rsyncまとめ。あとで確認。

unix
tips

リンク

はてなブックマーク

タグ

関連タグで絞り込む (6)

unixとtipsに関するstealthinuのブックマーク (21)

お知らせ

今週のはてなブックマーク数ランキング（2024年7月第3週）

今週のはてなブックマーク数ランキング（2024年7月第2週）

はてなブックマーク透明性レポート（2024年 2月-2024年4月）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス