lizyのブックマーク - はてなブックマーク

packageごとのメモリ使用量(と増分)を確認できる Plack::Middleware::MemoryUsage - （ひ）メモ

packageごとのメモリ使用量とリクエストを処理する前後の増分を確認できるPlack::Middlewareを作りました。時間が経つとぶくぶく太るプロセスがいるときに、犯人特定の助けになると思います。 https://github.com/hirose31/Plack-Middleware-MemoryUsage要、B::TerseSizeB::Size2::Terse, Devel::Symdumpです。新しめ(5.10以降？)のPerlでB::TerseSize (B::Size)がエラーになってインストールできないときは、 https://github.com/gfx/p5-B-Size-patched のを入れてください。 https://metacpan.org/module/B::Size2 を入れてください。使い方は、 use Plack::Builder; bui

lizy 2013/01/16

リンク

perlbrewを使うにあたっていろいろな小細工をした件 - （ひ）メモ

最近perlbrewを使っています。で、いろいろ小細工をしたので問題点とその解決方法のまとめです。補足すると、深遠な理由とかマリファナ海峡より深い事情とかがなければ、バッチ用、shebang用に(↓で書いてる)appperl的なラッパーを用意するだけでいけるんじゃないかと思います。問題点 perlbrewのサイトを見るとビールがのみたくなる http://perlbrew.pl/ perlbrewedなperlの実行方法対話シェル上でスクリプトのshebang (#!) cronで実行する場合サーバーワイドな共通の@INC perlbrewedなperlの実行方法 perlbrewedなperlをどう実行するか、3つの局面にわけて考えます。対話シェル上で基本、~/.bashrcで $PERLBREW_ROOT/etc/bashrcを読めばOK。なのですが、(深淵なる理由があ

lizy 2012/10/31

どういう場合に同一ユーザで複数のperlbrew環境が必要になるのかが気になる

リンク

dstatの万能感がハンパない - （ひ）メモ

サーバーのリソースを見るにはグラフ化は重要ですが、推移ではなくリアルタイムな状況、例えば秒単位のスパイキーな負荷を見るには、サーバー上でvmstatやiostatなどの*statファミリーを叩く必要があります。さて、vmstatはメモリの状況やブロック数単位のI/O状況は見られますが、バイト単位のI/O状況やネットワークの送信、受信バイト数を見ることはできません。 # vmstat 1 procs -----------memory---------- ---swap--- -----io----- --system-- -----cpu------ r b swpd free buff cache si so bi bo in cs us sy id wa st 3 1 0 4724956 355452 726532 0 0 54 484 3 3 1 0 99 0 0 2 0 0 47

lizy 2012/02/29

リンク

フロント/バックのreverse proxy構成で、指定秒数以内に必ずレスポンスを返す方法 - （ひ）メモ

目的フロントがHTTPリクエストを受けて、バックエンドのアプリケーションサーバにreverse proxyするような構成において、指定秒数以内に何かしらのレスポンスを返したい。 200が返せない場合は、処理を打ち切って500を返したい。背景フロントでApacheやNginxをreverse proxyとして使っている場合、バックエンドが無応答になってしまうと、クライアントにレスポンスが返るのはデフォルトで数十〜数百秒後(ApacheのTimeoutのデフォルトは300秒、Nginxのproxy_read_timeoutのデフォルトは60秒)になってしまいます。通常のWebサービスではこのオーダーのタイムアウトでもいいのかもしれませんが、数秒以内に(エラーでもいいので)レスポンスを返すことが求められる環境も存在します。(最近、特に多いのではないでしょうか:P) もちろんバックエンドが

lizy 2010/06/23

リンク

実録MySQLのチューニング春の陣 - （ひ）メモ

long_query_time = 0.5 とか閾値を小さめにしてもスロークエリが出なくなったけど、CPU(user)使用率高いとか、なんか足引っ張ってるクエリがあるっぽいなぁという場合のお話です。﹁実録﹂の通り、現在絶賛進行中ですので、逐次動きがあったら書き足していくつもりです。﹁あれを見た方がいい﹂とか﹁これをあーした方がいい﹂とかあれば、コメントかTwitterで @hirose31 までお知らせいただけるとうれしいです！使用しているのは、MySQL 5.1.41 です。前提: サーバーリソースのグラフ GangliaでもCactiでもMuninでもなんでもいいんですが、サーバリソースのグラフ化は必須です。チューニングした際の効果測定や、そろそろリソース食い潰してやばいとかの予測にも使えます。自分はDBサーバの場合このあたりをグラフ化してます。 CPU使用率 (user,

lizy 2010/05/17

リンク

ncある限りぼくはどこまででもいけるッ！ - （ひ）メモ

多段SSHの話。 2008-05-02追記ncの-w secオプションで、一定時間通信がなければncが終了するようにしました。このオプションを指定しないと、sshコネクションを切った後でもncのプロセスが残留してしまいます。 2010-03-08 OpenSSH 5.4以降のnetcat mode (ssh -W host:port ...) を使えば、ncコマンドは不要かも。 2010-11-08 zshでNo such file or directoryと言われるのは、これが原因かもhttps://bugzilla.mindrot.org/show_bug.cgi?id=1494 正攻法でこたつにアクセスするには下図のようなSSHアクセスを繰り返さなければならない、といった状況があるとする。 uchi ----> otonari otonari ----> genkan genkan

lizy 2010/03/13

リンク

メモ: InnoDB Pluginのバグ - （ひ）メモ

自分も含め、InnoDB Pluginの使用を検討してる人も多いのではないかと思うのですが、ちと気になるバグを見かけたので追試してみました。 Bug #47621 MySQL and InnoDB data dictionaries will become out of sync when renaming columns http://bugs.mysql.com/bug.php?id=47621 http://bugs.mysql.com/bug.php?id=44571 現象カラムの名前を替えて、新しい名前のカラムに対して index をつけると、InnoDB Plugin 1.0.4 以前は mysqldがクラッシュし、1.0.5 以降はエラーが出て index がつけられない。対処法別テーブルを作ってデータをコピーする。再現方法 DROP TABLE IF EXISTS

lizy 2010/01/05

リンク

ソースから自前ビルドしたソフトウエアの効率的な管理方法 - （ひ）メモ

ぼくは長年こういう方法で管理してますよ、というお話です。Linuxです。ディレクトリレイアウト概観たとえば、asoとbmdという名前のソフトウエアをインストールしている状態はこんな感じ: /usr/local/ ┬ app/ ┬ aso → aso-1.3 │ ├ aso-1.2/ ┬ bin/ ┬ armored │ │ │ └ scrum │ │ ├ sbin/ ─ syd │ │ └ share/ ─ man/ │ ├ aso-1.3/ ┬ bin/ ┬ armored │ │ │ └ scrum │ │ ├ sbin/ ─ syd │ │ └ share/ ─ man/ │ ├ bmd → bmd-2.0 │ └ bmd-2.0/ ┬ bin/ ─ tri │ ├ include/ ─ angle.h │ └ lib/libsnk.so.2.0.0 ├ bin/ ┬ armor

lizy 2009/12/17

リンク

レプリケーションしてるMySQLで、マスタやスレーブが障害停止した場合のリカバリプラン - （ひ）メモ

MySQLで、レプリケーションベースのHAな構成について考えたメモです。 3台(というか2台＋1台)がいいかなぁと思っていて、前半はその理由を、後半では{マスタ,スレーブ}が{再起不能になった,ちょっとダウンしてすぐ復帰した}場合のリカバリプランについて書きます。今のところはこれがベストかなと思っているのですが、「こうしたほうがいいと思う！」「ここがおかしい！」などなどのご意見はコメント、TBなどでいただけるとうれしいです。ゴールマスタが落ちてもぐーすか寝ていられるようにしたいリカバリの作業はできるだけ単純に、かつ、短時間で完了するようにしたいめんどくさいのはいや基本構成、方針 2台＋1台サービスで使うのは2台 (db1, db2) もう1台は管理用 (db3) スレーブを多数並べる構成にはしない台数増えると管理コストが上がるマスタダウン時のフェイルオーバとそのフェイルバ

lizy 2009/10/23

リンク

WEB+DB PRESS Vol.50のgit特集とkazeburoさんの連載がよいっすね！ - （ひ）メモ

わかばちゃんの髪留めが「Ｄ」の形に見えますが何か意味があるのでしょうか？東京都港区　ひろせ３１さんという質問をわかばのお悩み相談室に投書しようか悩んでいるhirose31です。 WEB+DB PRESS Vol.50 作者: 杉山貴章,羽生章洋,川口耕介,青木靖,鶴岡直也,長野雅広,森田創,伊藤直也,武者晶紀,ミック,高林哲,栗原傑享,米林正明,小飼弾,角田直行,橋本正徳,はまちや2,久末隆裕,Junio C Hamano,グニャラくん,やまだあきら,WEB+DB PRESS編集部出版社/メーカー: 技術評論社発売日: 2009/04/24メディア: 大型本購入: 24人クリック: 235回この商品を含むブログ (95件) を見るまだ全部読んでませんが、目についたのから読んでいってます。はじめてのGit gitはチュートリアルをなんとなく読んでなんとなく使ってきた感じなので、内容が

lizy 2009/05/01

git
book

リンク

checkoutしたファイルのmtimeを、そのファイルがcommitされた時刻に合わせたい ― svnとgitの場合 - （ひ）メモ

唯一の中央レポジトリと複数のcheckoutするノードというトポロジの場合、checkoutしたファイルのmtimeがノード間で同じ時刻(当該ファイルがcommitされた時刻)になっているとなにかと都合がいいです。例えば、Webアプリのデプロイを中央レポジトリからのcheckout(やupdate)で行う場合を考えます。もし、内容が同じなのに複数あるアプリサーバの間でmtimeが異なってしまっていると、サーバごとにETagヘッダの値が異なってしまう ※Apacheの場合、FileEtagディレクティブを調整(mtimeを見ないように)することによって統一可能ではありますサーバ間でrsyncをかけると無駄なファイルコピーが発生する内容が同じににもかかわらずmtimeが異なるせいでコピーが発生する ※--size-onlyオプションでmtimeを見ないようにして回避可能ではありますと

lizy 2009/01/11

リンク

mysqlコマンドで、テーブル名とかカラム名の補完(completion)をする方法 - (ひ)メモ

追記: rehash(auto-rehashも含む)すると、SQL文の補完(seleでタブ打鍵とか)が効かなくなるよと、はす向かいの人に教えてもらいました。個人的には、SQLは﹁mysql> help select﹂とかでオンラインヘルプがびょっと出るので、スキーマの補完ができるんならSQLの補完はとりあえずあきらめてもいいかなと思っています。常々、テーブル名とか補完できるといいなーと思っていたので、ボロっときいてみたら教えてもらいました。あざーーーーっす！ id:mikihoshi++ id:tokuhirom++ id:precuredaisuki++ おかげで効率が300%上がりました。(Benchmark::Stopwatchで計測) http://dev.mysql.com/doc/refman/5.1/en/mysql-command-options.html#option

lizy 2008/01/22

リンク

負荷をかけるツール - HTTP編 - (ひ)メモ

ApacheCon US 2007の、﹃Apache Performance Tuning / Part One: Scaling Up﹄, Sander Temme (PDF) より。abおなじみ、Apache付属のあいつ http_load http://www.acme.com/software/http_load/ flood http://httpd.apache.org/test/flood/ JMeter http://jakarta.apache.org/jmeter/ 最近のバージョンは使いやすくなったらしいあと、ほかには httperf http://www.hpl.hp.com/research/linux/httperf/ とか。

lizy 2007/12/02

http
tool

リンク

ファイルを変更したら自動的にreloadする方法 - （ひ）メモ

ファイルの更新を監視して、変更されたらMozReplなFirefoxさんにreload指令を送る。コンテンツのファイルをいじってて、いちいちF5するのがめんどいので。 reload指令を受理できるように MozLab - Trac をインストール。ツール→MozLab→Start Replで開始。 extensions.mozlab.mozrepl.autoStartをtrueにすれば、動きっぱなしにできるのかも。 4242でlistenしてるのはlocalhostだけなので、他のマシンからtelnetしたいときは、パケットリピータを使う。例えばstoneを使って、 4242宛てのパケットをlocalhost:4242にリピートするただし、接続を許可するのは10.6.25.201と10.6.25.202からのみとするときはこんな感じ: stone -nr localhost:42