[B! gevent] ikeikeikeikeのブックマーク

ikeikeikeike id:ikeikeikeike

geventに関するikeikeikeikeのブックマーク (12)

Pinterest: geventでコードベースをマルチスレッドに - ワザノバ | wazanova.jp
http://engineering.pinterest.com/post/65713073803/how-we-use-gevent-to-go-fast Pinterestがエンジニアブログで、Pythonの数十万行のシングルスレッドのコードベースをgeventを利用してマルチスレッドにした経験を紹介しています。 1) Lessons from the early days シングルスレッドのコードベースでサイトの急成長に対処していくうちに、機能が増えるにつれてサーバが増えた。バックエンドのサーバが増えたら、障害や遅延のリスクが増した。コードにロジックが増えたので、network IOなど並列処理をしたかったが、シングルスレッドサーバが足かせになった。 2) Building high performance servers 並列処理サーバを実現するための解がgeventであった
ikeikeikeike 2013/11/07
セロリ使う箇所が減ってラクてぃん

greenlet

gevent

python

pinterest
リンク
Django トラノマキ
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
ikeikeikeike 2013/10/11
ansible

pymysql

gevent

python

django
リンク
Jegaをリリースした話 - Doge log
先日、やっとリリースしました。 tobikko時代から考えると数年がかりいじってた気がします。 Jegaについて concurrent networking and cooperative multitasking library for Python3. わかりやすく言うとgeventの後継ライブラリになります。 Python3.x系しかサポートしていません。 URL: https://github.com/mopemope/jega 特徴 Jegaはgevent、evergreen, PEP3156を参考に作られています。機能的なところはほぼevergreenと同様です。主な特徴は以下です。 picoevベースの高速なイベントループ greenletベースの協調スレッド c-aresよるDNS lookupの非同期化非同期処理はFutureにより管理(専用のconcurrent.
ikeikeikeike 2013/07/23
gevent

go

HTTPS

dns

python

greenlet

並行処理

技術

python3
リンク
https://www.codysoyland.com/blog/evented-django-part-one-socketio-and-gevent/
ikeikeikeike 2012/12/07
gevent

django

event

python
リンク
最速TCPサーバーの条件〜逆襲の Erlang と Haskell の挑戦〜 : DSAS開発者の部屋
釣った反響に応えて echo サーバーを改良していて PyCon JP の発表資料作成が進みません。自業自得です。 methane です。 Erlangとは何だったのかでのベンチマーク結果では Erlang のスコアが奮わなかったのですが、 github で性能改善する pull request をいただきました。性能が悪かった原因ですが、実は backlog がデフォルトだと5で、ベンチマーク開始時の大量の接続要求を捌ききれていないという状況でした。高負荷サイトのボトルネックを見つけるにはで紹介されている事例と同じ現象ですが、こちらのほうが backlog が小さく、しかもベンチマーク用クライアントはほぼ同時に大量に接続をしてくるという条件でよりシビアに現象が発生してしまいました。この問題が修正された Erlang は、 Goを超えて一気にランキング上位に踊り出
ikeikeikeike 2011/09/26
erlang

benchmark

performance

pypy

tornado

gevent
リンク
What is gevent? - gevent 24.2.2.dev0 documentation
Toggle navigation of gevent.socket – Cooperative low-level networking interface
ikeikeikeike 2011/09/15
gevent

python
リンク
Emerge Technology: [翻訳] geventのeventletとの比較
Bob Ippolitoは2006年にEventletの最初のバージョンを書きましたが、割とすぐに開発をやめてしまいました。Donovan Prestonは当時働いていたLinden Labの他の人とメンテナンスを行いました。ステートマシンやコールバックを使うよりも簡単にネットワークソフトウェアを方法を探しており、2008年にEventletに興味を持つようになりました。GreenletをベースとしたEventletは、当時あった他のフレームワーク(PYthonネイティブのジェネレータ、生のgreenlet、Corotwine)よりも、使いやすさという点で進んだものでした。その時関わっていたプロジェクトはTwistedを使っていたので、二つのライブラリを統合することから始めました。作業をしているとEventletの大量のバグを見つけて、ほとんどのコア部分を書き換えました。修正したブランチ
ikeikeikeike 2011/09/15
gevent

python
リンク
Python simple_server tuning « kumama
GAE/PythonでごそごそやってますがたまーにGAEじゃ出来ない事をしたくなるときが有ります。ローカルのデバイス操作したりファイルごにょごにょしたり。そんな時は…Apache入れてmod_wsgi入れて…って言うのが王道にも思いますが結構大変。いっそのことdev_appserverで逃げようかとか思ったりもするもののライセンスも良く解からん上、シングルスレッド動作のwebサーバなので気が引けます。で、Pythonに漏れなく付いてくるwsgiref.simple_serverとbottle+sqlalchemy/sqlite+flaskで落ち着いてたんですがやっぱりパフォーマンスが…。って事でちょっとぐぐる先生に聞いてみるとこんなページを紹介されるのでした。 Nicholas Piël » Benchmark of Python Web Servers すげー、その調査力に感服。って違
ikeikeikeike 2011/09/14
server

gevent

wsgi
リンク
Erlangとは何だったのか : DSAS開発者の部屋
タイトルは釣りです。 methane です。 8/20(土)にLL Planetesに行ってきました。今年は JavaScript 一色と言っていいほど、 JavaScript の存在が大きくなっており、そのなかでも特に Node.js の話題が多かったように思います。﹁Node.jsとはなんだったのか﹂というセッションでは主にコールバックチェーン型プログラミングvs軽量スレッドを使った手続き型プログラミングの話題や各言語におけるライブラリなどが紹介されていたのですが、以前個人的な興味でいくつかの言語とライブラリで echo server を実装していたので、他にも興味を持っておられる方のために公開します。いろんな言語でEcho Server@github 参考に、簡単なベンチマーク結果も載せておきます。各言語・フレームワークで完全に同じものを実装しているわけではないし、エ
ikeikeikeike 2011/08/23
gevent

node.js

PyPy

erlang
リンク
gevent 使ってみた - Twisted Mind
gevent: A coroutine-based network library for Python - http://www.gevent.org/ 知らない人はあんまりいないと思うので、説明は割愛。 erlang:spawn(module, fun, args) みたいに gevent.spawn(fun, *args, **kargs) って出来るんですね、これは良いものですね。 gevent.select と gevent.socket を使ってみました。gevent.select は epoll とか kqueue にうまいこと置き換えてくれる感じかな。 gevent.monkey がオモシロですね、既存の socket や select を置き換えてくれるみたいです。これはイイ:-) import gevent import gevent.socket import gev
ikeikeikeike 2011/08/09
gevent

python
リンク
gevent で proxy server を作る - methaneのブログ
Flash製アプリの試験用のアクセスパターンを作りたくて gevent を使って簡単なproxy serverを作った。 localhostの8000版で立ち上がるので、FoxyProxy などで、特定のドメインに対する proxy として登録してやると、リクエストを再現するのに必要なデータをmsgpackフォーマットで保存していく。 from gevent.pywsgi import WSGIServer from gevent import monkey from msgpack import packs import httplib def handler(environ, start_response): host = environ['HTTP_HOST'] method = environ['REQUEST_METHOD'] body = environ['wsgi.input
ikeikeikeike 2011/08/09
gevent

python

Proxy
リンク
peter - geventでWebSocketを使ったチャットを作る（Python備忘:06）
先日、一生懸命、twistedを使ってWebSocketのデモを作ってみたわけですが﹁twistedなんて疲れるし、ナウでヤングな人はgeventだよ！﹂と今年の4月に、おおたにさんが書いているのを見つけてしまって、すっかりショック。 Twisted教は面白いのですが、疲れるのも事実です。…… jbkingより﹁ナウでヤングな若者はgeventだ(意訳)﹂と教えてもらって、 http://blog.liris.org/2010/04/gevent.html 時代は変わっていたみたいです。なので、ナウでヤングなgeventで、さらにナウでヤングなWebSocketチャットをやってみました。 geventを使おう geventとは、コルーチンベースのネットワークライブラリ。 libeventライブラリのイベントループに対してハイレベルな同期APIを提供するために、Stackless Py
ikeikeikeike 2011/08/09
twisted

gevent

websocket

python
リンク
1