ikeikeikeikeのブックマーク - はてなブックマーク

Linuxでロードバランサやキャッシュサーバをマルチコアスケールさせるためのカーネルチューニング - ゆううきブログ
本記事の公開後の2016年7月にはてなにおけるチューニング事例を紹介した。はてなにおけるLinuxネットワークスタックパフォーマンス改善 / Linux network performance improvement at hatena - Speaker Deck HAProxy や nginx などのソフトウェアロードバランサやリバースプロキシ、memcached などの KVS のような高パケットレートになりやすいネットワークアプリケーションにおいて、単一の CPU コアに負荷が偏り、マルチコアスケールしないことがあります。今回は、このようなネットワークアプリケーションにおいて CPU 負荷がマルチコアスケールしない理由と、マルチコアスケールさせるための Linux カーネルのネットワークスタックのチューニング手法として RFS (Receive Flow Steering) を
ikeikeikeike 2015/04/01
cpu

network

Linux

performance

kernel
リンク
Facebookの数千台規模のmemcached運用について - ゆううきブログ
Linuxのブロックデバイスレベルで実現するrsyncより高速な差分バックアップについて - ゆううきブログの続きとして、Facebook の memcached 運用に関する論文を読んだ。タイトルなどは以下の通り。 NSDI はネットワークシステムに関するトップレベルのカンファレンス。 Scaling Memcache at Facebook Rajesh Nishtala, Hans Fugal, Steven Grimm, Marc Kwiatkowski, Herman Lee, Harry C. Li, Ryan McElroy, Mike Paleczny, Daniel Peek, Paul Saab, David Stafford, Tony Tung, Venkateshwaran Venkataramani NSDI'13 In Proceedings of the
ikeikeikeike 2014/07/10
facebook

c

memcached

architecture

conference

scale
リンク
Linuxのブロックデバイスレベルで実現するrsyncより高速な差分バックアップについて - ゆううきブログ
社内で論文輪読会みたいなことやってて、そこで紹介した論文の内容についてです。最近、Graphiteに保存しているデータのバックアップ︵データ同期︶に rsync 使ってて、かなり遅いので困ってた。 LISA っていう大規模システム、sysadmin 系のカンファレンスがあって、ここから論文探してたら、ちょうど巨大データの高速バックアップの実装の話があったので読んでみた。論文概要 dsync: Efficient Block-wise Synchronization of Multi-Gigabyte Binary Data - https://www.usenix.org/conference/lisa13/technical-sessions/presentation/knauth - Thomas Knauth and Christof Fetzer, Technische U
ikeikeikeike 2014/07/09
conference

HTTPS

binary

bitbucket

CPU

filesystem

rsync

Linux

kernel
リンク
GPUを用いたSSLリバースプロキシの実装について - ゆううきブログ
近年，汎用計算の高速化のためのアクセラレータとして注目されているGPUを，ネットワーク処理に適用する一環として，サーバサイドのSSL処理に注目した論文を読んだので，内容を軽く紹介します． SSLShader - GPU-accelerated SSL Proxy SSLShader SSLShader: Cheap SSL acceleration with commodity processors Proceedings of the 8th USENIX conference on Networked systems design and implementation 2011 なお，評価に使われた実装の一部のソースコードが公開されています． http://shader.kaist.edu/sslshader/libgpu crypto/ 紹介背景 SSL(Secure Socket
ikeikeikeike 2013/04/17
gpu

http

CPU

ssl

負荷対策

http2.0

リバースプロキシ

研究

高速化

ネットワーク
リンク
Perl屋さんに便利なVim Pluginを2つ書いた - ゆううきブログ
この記事は Vim Advent Calendar 2012 の22日目の記事です．21日目は @AmaiSaeta さんの﹁このVim plugin達に感謝しなければ年を越せない!私が今年使い倒した2012年のベストを全部ご紹介!﹂でした．最近，Vim Scriptを書き始めていて，今回は，Perl的に便利なVim Pluginを2つ書いたのでご紹介します．unite-perl-module.vim GitHub y-uuki/unite-perl-module.vimunite-perl-module.vim はClass::Acceccor::Liteなどのモジュール名をUniteのインタフェースで検索し，選択したモジュール名をカーソル位置に書き込むPluginです． Linda_pp先生のunite-ruby-require.vimを参考にして作りました．機能は以
ikeikeikeike 2013/01/07
global

vim

perl

unite

plugins
リンク
1