[B! linux] fumikonyのブックマーク

Announcing the HashiCorp Linux Repository

Sign up for freeGet started in minutes with our cloud products TerraformInfrastructure as code provisioning‌‍‍‍‌‍‌‍‌‍‍‌‌‍‌‌‍‍‌‌‍‍‍‍‍‍‍‍‌‍‌‌‍‌‌‌‌‍‌‍‌‍‌‌‍‍‌‍‌‍‌‍‌‍‍‍‍‍‌‍‍‌‍‌‍‌‌‌‍‌‍‍‍‍‍‍‍‌‍‍‌‌‌‌‌‌‍‍‍‍‌‍‍‌‍‌‌‌‍‍‌‍‍‌‌‍‌‍‌‍‌‍‍‌‍‌‌‍‌‌‍‌‌‍‍‌‌‍‍‍‍‌‍‌‌‍‌‌‌‌‍‌‍‌‍‌‌‍‍‌‍‌‍‌‍‌‍‌‍‌‌‌‍‌‌‍‍‌‌‌‌

fumikony 2020/08/14

リンク

MicrosoftのLinux向け無料プロセス監視ツール「ProcMon」レビュー、システムコールごとの実行時間などを確認可能

MicrosoftがWindows向けトラブルシューティングツール群「Windows Sysinternals」に含まれるプロセス監視ツール「Process Monitor(ProcMon)」をLinuxに移植します。このLinux版ProcMonはオープンソースソフトウェアとして公開され、さっそくプレビュー版がリリースされたので実際に使ってみました。 GitHub - microsoft/ProcMon-for-Linux: Procmon is a Linux reimagining of the classic Procmon tool from the Sysinternals suite of tools for Windows. Procmon provides a convenient and efficient way for Linux developers to tra

fumikony 2020/08/02

linux

リンク

【 find 】コマンド（応用編その2）――検索したファイルを指定したフォーマットで表示する

【 find 】コマンド（応用編その2）――検索したファイルを指定したフォーマットで表示する：Linux基本コマンドTips（33）本連載は、Linuxのコマンドについて、基本書式からオプション、具体的な実行例までを紹介していきます。前回、前々回に続き、今回も「find」コマンドを解説します。

fumikony 2019/04/03

便利

linux
cli

リンク

パブリッククラウドやDocker Hubに最適化した「Minimal Ubuntu」がリリース

Minimal Ubuntu, on public clouds and Docker Hub(Canonical公式ブログより) Canonicalは2018年7月9日(米国時間)、パブリッククラウドおよびDocker Hubに最適したLinuxディストリビューション﹁Minimal Ubuntu﹂をリリースしたことを明らかにした。AWS(Amazon Web Services)およびGCP(Google Cloud Platform)を推奨パブリッククラウドとし、イメージファイルはWeb上からダウンロードできる。Minimal Ubuntuはクラウド上の仮想マシン用OSとして設計し、標準のUbuntuと比較すると、イメージサイズは50%未満、起動は40%高速化した。Amazon EC2やGCE(Google Compute Engine)、コンテナはLXDやKVM、OpenStack

fumikony 2018/07/10

リンク

いますぐ実践! Linuxシステム管理

﹁いますぐ実践!Linux システム管理﹂はこちらです。メルマガの解除、バックナンバーなども、以下からどうぞ。 https://www.usupi.org/sysad/ (まぐまぐ ID:149633) その他、作者に関するページは、概ね以下にございます。 https://www.usupi.org/kuri/ (まぐまぐ ID:126454) http://usupi.seesaa.net/ (栗日記ブログ) https://twitter.com/kuriking/ (twitter) https://facebook.com/kuriking3 (facebook) https://jp.pinterest.com/kuriking/pinterest) https://www.instagram.com/kuri_king_/ (instagram) [バックナンバーのトップへ

fumikony 2018/04/02

リンク

How to make OOM killer log into /var/log/messages when it kills any process?

fumikony 2017/12/27

リンク

プロセスのメモリ使用量が少ないのにメモリ使用量が増加していた時に調査、対応したこと | DevelopersIO

はじめにメモリ使用率が上昇傾向のインスタンスについて調査をしましたので調査内容と対応内容についてご紹介します。初動調査 freeコマンドで確認 $ free -m total used free shared buffers cached Mem: 7986 7657 329 33 99 312 -/+ buffers/cache: 7246 740 Swap: 0 0 0 メモリ使用量は7246MB topコマンドで確認　topの後にshift + m top - 12:40:32 up 36 days, 12:26, 1 user, load average: 0.00, 0.01, 0.05 Tasks: 96 total, 1 running, 95 sleeping, 0 stopped, 0 zombie Cpu(s): 0.0%us, 0.0%sy, 0.0%ni,100

fumikony 2017/12/19

リンク

【速報】AWS向けの新ディストリビューション Amazon Linux 2 を発表！ | DevelopersIO

ウィスキー、シガー、パイプをこよなく愛する大栗です。先程Amazon Web Services向けに最適化されたLinuxディストリビューションであるAmazon Linuxの次世代版であるAmazon Linux2が発表されましたのでご紹介します。 Amazon Linux 2 Announcement: Amazon Linux 2 LTS Release Candidate Available Introducing Amazon Linux2Amazon Linux2は一般公開になり正式な5年サポートのLTS版が公開されています [速報]5年長期サポートのAmazon Linux2が一般公開されました Amazon Linux2Amazon Linux2の特徴をまとめてみます。 AWSとのインテグレーション‥AWS CLIなどの多数のツールやcloud-initが

fumikony 2017/12/14

linux
aws

リンク

Linux のオーバーコミットについて調べてみた

Linux のオーバーコミットについて調べてみた Linux のオーバーコミットのはなし（これを書いたのは Linux 2.6.38 のとき） Linux カーネルは実メモリ以上にメモリをプロセスに割り当てることができるこの仕組みをオーバーコミット (over-commit) と呼ぶオーバーコミットでは，とりあえずメモリを malloc させて仮のアドレスを返しておき，実際に使われる段になってはじめて実メモリを確保する．実験ただ malloc し続けるだけのプログラムを作って実験してみる．このプログラムをメモリ 1 GB + スワップ 1 GB のホストで実行してみると， $ free -t total used free shared buffers cached Mem: 1022404 82992 939412 0 4172 12280 -/+ buffers/cache:

fumikony 2017/11/10

リンク

How to troubleshoot Out of memory (OOM) killer in Red Hat Enterprise Linux? - Red Hat Customer Portal

fumikony 2017/11/10

linux
oom

リンク

Amazon EC2(Linux)のswap領域ベストプラクティス | DevelopersIO

ども、大瀧です。 Linuxのメモリ管理で欠かせないのがswapですよね。EC2のディスク管理には独特な仕様があるのでその辺りを踏まえつつ、EC2(Linux)でどのようにswap領域を用意するのが良いのかまとめてみたいと思います。理屈をこねながらの解説になるので、先に本エントリーの結論を。公式AMIにはswap領域が含まれない m1.small、c1.mediumには900MBのスワップ領域がおまけでついてくる(Amazon Linux AMIであれば、Cloud-initによって自動マウントされる) swap領域には、インスタンスストア(別名Ephemeral Disk)を使うべしでは、それぞれ見ていきます。公式Linux AMIの初期構成にはswapパーティションが無い Amazonから提供される公式のLinux AMIのブートディスクには、swapパーティションが含まれてい

fumikony 2017/11/10

リンク

net.core.somaxconnについて調べてみた - 祈れ、そして働け～ Ora et labora

概要 ↓ memcachedのtcp_backlogのデフォルト値は1024で、stats settingsにも1024と表示されているのですが、 stats settings ... STAT tcp_backlog 1024 ... END↓ net.core.somaxconnがデフォルト値のままだと128に切り詰められてしまい、 # cat /proc/sys/net/core/somaxconn 128負荷が高いサーバーでは接続要求を取りこぼしてしまうことがあるそうです。このnet.core.somaxconn、MemcacheやMySQLなど、高負荷時に多くの接続要求を受け付けるサーバーではチューニングが必要なカーネルパラメータのようです。いったいどういう値なのか、調べてみました。 net.core.somaxconnとは TCPソケットはlisten()関数の第二引数ba

fumikony 2017/11/01

Linux

リンク

cachectld〜無駄なページキャッシュの削除を自動化〜 | メルカリエンジニアリング

原稿の執筆が一段落して心に余裕が出てきた@cubicdaiyaです。今回はサーバを運用しているとありがちなページキャッシュに関する問題とメルカリのアプローチについて解説します。 Fluentdによるログ転送話は変わりますが、メルカリの各サーバ上ではプログラムが吐いたログデータをKibanaやNorikraといった各種コンポーネントに転送するためにFluentdが稼働しています。各ログデータは原則単一のファイルに追記されてFluentdのtailプラグインによって各所に転送されていきます。ログデータのサイズはまちまちで、1日で数GB程度のログデータもあれば数十GB以上のログデータもあります。ページキャッシュと巨大なログファイル各サーバに吐かれるログデータのサイズはサーバに搭載されているメモリのサイズと比べると1日分だけでもかなりの量になります。そして、このように絶えず書き込まれる巨

fumikony 2017/10/31

リンク

Linux スラブ・アロケーターの徹底調査

IBM Developer is your one-stop location for getting hands-on training and learning in-demand skills on relevant techno logies such as generative AI, data science, AI, and open source.

fumikony 2017/10/30

linux
memory

リンク

Linuxにおける各種メモリについて - Tech random memoranda

Linuxで扱う様々な種類や単位のメモリについてまとめておく。また、メモリというリソースに関する制御や管理について考察する。 ulimit $ ulimit -a | egrep "memory|stack" max locked memory (kbytes, -l) 64 max memory size (kbytes, -m) unlimited stack size (kbytes, -s) 8192 virtual memory (kbytes, -v) unlimited max locked memory - mlockシステムコールを使うことにより、メモリの内容がディスク上にスワップされないようにする︵=Lockする︶ことができる。その最大容量。 max memory size - 静的︵スタック領域︶や動的︵ヒープ領域︶に確保するメモリの最大容量。 virtual mem

fumikony 2017/10/30

linux
memory

リンク

negative dentry と tmpfs で negative dentry がキャッシュされない理由について調べた - hibomaの日記

kazeburo さんの一時ファイルとdentry cacheとメモリを読んでからしばらくファイルシステム周りを調べていたのでした。先のエントリで /tmp のファイル作成/削除を繰り返して dentry キャッシュがもりもり溜まっていくのは negative dentry であることが理解できました。 negative dentry とは negative dentry とは存在しない inode に対応する dentry です。 dentry キャッシュの役割は RAM より低速な HDD や SSD などの二次記憶装置からのディレクトリエントリの読み取りをメモリにキャッシュしておき高速化するためですが、negative dentry をキャッシュすることで存在しないディレクトリエントリの読み取りもキャッシュされます。「存在しないのにキャッシュ？」がしばらくイミフだったので

fumikony 2017/10/30

linux
memory

リンク

革命の日々！続 @ITのmeminfoの見方の説明が完全に間違っている件について

http://www.atmarkit.co.jp/flinux/rensai/tantei01/bangai01c.html 続く drop_caches の説明も間違ってる 0. デフォルト状態に戻す場合 # echo 0 > /proc/sys/vm/drop_caches と書かれているが、当該箇所のソースは以下である linux/fs/drop_caches.c int drop_caches_sysctl_handler(ctl_table *table, int write, struct file *file, void __user *buffer, size_t *length, loff_t *ppos) { proc_dointvec_minmax(table, write, file, buffer, length, ppos); if (write) { if

fumikony 2017/10/30

リンク

Linuxの基礎知識 - アクセス権まわりについて - Qiita

アクセス権限 / Permission 初心者向けのまとめサイトをさらに噛み砕いてまとめた。メモ用。SUID SUIDとはSUID︵Set User ID︶は、実行権のあるファイルに設定される特殊なアクセス権。通常実行ファイルを実行すると、そのファイルを実行したユーザーの権限で実行されるが、SUIDが設定されたファイルでは、その実行ファイルの所有者のアカウント権限で実行される。もともとLinuxに入っているコマンド類にもSUIDが設定されているコマンドがあり、例えばpasswdコマンドがこれにあたる。注意すべきは。コマンドに対してSUIDを付加するという点。少しわかりにくい、、、確認方法所有者の部分がrwsとなっており、実行権の部分が通常のxではなくsになっている。 passwdコマンドは、/etc/passwdや、/etc/shadowの様な一般ユーザーでは通常変更できない