[B! mixi] sfujiwaraのブックマーク

IP制限を減らす取り組み

モンスト事業本部SREグループの伊藤です。普段はモンストに関するシステムの改善・運用を様々な面から行っています。今回もサービスの直接的な改善ではないですが、ツール等のIP制限を減らす取り組みについてご紹介します。サービスの直接的な改善もいつか書ければなと思っております。皆さんはIP制限をしているツール等はいくつくらいありますでしょうか？モンストにも歴史的経緯でIP制限されたツールや、特に制限されていないツール（！）までいくつもありました。自作のツール以外にも開発や運用で使っているツールのフロントエンドなども合わせると30以上のツールがあります。運用で使うツールはアラート対応などでオフィスにいない時でもどこからでもスマートに見れると嬉しいです。特にサーバーのメトリクスは移動中に見れると対応しているメンバーにアドバイスができたり非常に助かります。これまではオフィスのIPからの

sfujiwara 2019/05/30

リンク

モンストを支えるインフラの今とこれから

dots. Conference Spring 2016 ゲーム開発の裏側 http://eventdots.jp/event/580344

sfujiwara 2016/03/02

リンク

YAPC::Asia 2009で大規模画像配信とPerlについて発表しました - mixi engineer blog

開発部・システム運用グループの長野です。9月10日・11日に東工大大岡山キャンパスで開催されたPerlのカンファレンス、YAPC::Asia 2009に参加してきました。昨年は2つのセッションをやらせて頂きましたが、今年は1つだけ発表をしましたので、資料を公開します大規模画像配信とPerl SlideShareで公開しています。大規模画像配信とPerl View more documents from kazeburo. 一部アニメーションを利用していますので、PowerPointもあわせて参照してください。 mixiの画像配信については、このブログや技術評論社様の雑誌等を通して何度か紹介していますが、今回は携帯向けの画像配信、特に画像の動的変換について取り上げました。画像を扱うライブラリはいくつも種類があり、変換速度や変換後の画像に違いがあります、今回の発表ではその比較もしていま

sfujiwara 2009/09/16

mixi

リンク

MapReduce on Tyrant - mixi engineer blog

先日、隅田川の屋形船で花見と洒落込んだのですが、その日はまだ一分咲きも行ってなくて悲しい思いをしたmikioです。今回はTokyo Tyrant︵TT︶に格納したデータを対象としてMapReduceのモデルに基づく計算をする方法について述べます。 MapReduceとは Googleが使っているという分散処理の計算モデルおよびその実装のことだそうですが、詳しいことはググってください。Googleによる出自の論文やApacheプロジェクトによるHadoopなどのオープンソース実装にあたるのもよいでしょう︵私は両者とも詳しく見ていませんが︶。今回の趣旨は、CouchDBがMapReduceと称してJavaScriptで実現しているデータ集計方法をTTとTCとLuaでやってみようじゃないかということです。簡単に言えば、以下の処理を実装します。ユーザから計算開始が指示されると、TTは、DB内の

sfujiwara 2009/04/06

リンク

Pure JavaScript Template Engine その弐 - mixi engineer blog

どうも、こんにちは。hirokiです。前回は、HTML::Template::ProのJavaScript実装を紹介させていただきました。今回はその実装部においてのちょっとした工夫についてと、Webフロントエンドのパフォーマンスチューニングについて簡単にまとめさせていただきます。正規表現の話通常、テキストベースのDSL評価系を作成する際にはyacc/lexなどで文法記述を行うのが定石なんですが、シンプルな文法であること構文木の評価からコードジェネレートに方向性を転換したテキストマッチングの回数や高速化のための制御がしやすいなどの理由から、HTML Template(JavaScript)では正規表現ベースの文法解釈を行っています。︵ HTML::Template::Proのyacc文法ファイルをそのまま使えば記述は楽だったのですが...︶以下に実際に利用している正規表現を示しま

sfujiwara 2009/02/24

リンク

DBMによるテーブルデータベースその五 - mixi engineer blog

ついに発売されたスト4のコンシューマ機版をやりたくてしょうがないけど筐体を買ってもらえないので、駅前のゲーム屋のディスプレー前で垂涎するばかりのmikioです。今回は連載の最終回で、各種スクリプト言語を使ってお手軽にテーブルデータベースを操作する方法について説明します。 TokyoCabinet::TDB まずは、TCのPerlバインディングとRubyバインディングの最新版を入手してください。それぞれテーブルデータベースを扱うための TokyoCabinet::TDB というクラスが加わっています。以下のようなIDLによるガイドラインに準拠したインターフェイスが提供されますので、使い方は言語にかかわらず同じようになるはずです。 module TokyoCabinet { interface TDB { boolean open(in string path, in long omode);

sfujiwara 2009/02/16

リンク

DBMによるテーブルデータベースその弐 - mixi engineer blog

インフルエンザで休んだ影響で仕事が鬼のように溜まって消化不良のmikioです︵こんな記事を書いている場合じゃない︶。さて今回は、Tokyo Cabinetでリレーショナル風データベースを実現したテーブルデータベース︵TCTDB︶の実装について説明します。 SQLiteとの違いは？ SQLiteはアプリケーション組み込み型のSQL対応リレーショナルデータベースのライブラリです。TCのテーブルデータベースよりもはるかに高機能で、それでいて性能も大変優れています。いわゆるデスクトップアプリケーションに組み込むデータベースをお探しであれば、TCなんかではなく、断然SQLiteがおすすめです。一方で、TCなどのDBMは、より単純なデータ操作をより高速に実行できるように設計および実装されています。典型的なユースケースとして、大規模Webサイトのアカウント管理や、データマイニングに伴う集計操作が挙げら

sfujiwara 2009/01/26

リンク

mixiの年末年始対策日記投稿システムの改善 - mixi engineer blog

朝晩冷えてきましたね。風邪など引いていませんでしょうか。さて、年末が近づいてくるこの時期に弊社のエンジニアが最も気になるのは、お正月。それも来年1月1日を迎えた瞬間です。1日1日0時に何があるのでしょう？そう、mixiのサービスで最も日記が書き込まれるタイミングになるのです。個人的に﹁あけおめことよろアタック﹂と呼んでいます。今年は日記だけではなく、エコーでもメッセージが飛び交うことでしょう。この時期は携帯電話のキャリアでもさまざまな対策を行っていますが、ミクシィでも年末年始でもユーザの方に快適にサービス提供ができるように努めています以下は昨年の年末年始の日記投稿数の推移です。青色が12/31から1/1、赤色が1/1から1/2になります 1/1の方が全体的に多いですが、特に年が変わる前後の投稿数は倍近くなっていることがわかります。この時に負荷により日記の投稿がしづらい状態になっていたの

sfujiwara 2008/12/12

リンク

デベロッパーセンター

mixi Platform 皆様に新しいビジネスチャンスを提供します。mixiのコアバリューであるソーシャルグラフやデータを利用して、様々なアプリケーションやサービスを作ることができます。

sfujiwara 2008/12/11

mixi

リンク

mixi Engineers’ Blog » Lua on Tyrant: DBサーバにLLを組み込む

遅めの夏休みで那須塩原に行ってきたmikioです。牧場でアルパカに触ってきたのですが、めちゃかわいかったです。さて今回は、Tokyo Tyrant︵TT︶にスクリプト言語Luaの処理系を組み込んで使う方法について解説します。つか、Luaって何？ Lua︵公式サイトによると﹁るーあ︵LOO-ah︶﹂と発音︶という言語の名前は聞いたことがあっても、数あるマイナー言語のひとつと思って特に気にかけていない人も多いと思います。私もそうでした。しかし、今では、C言語使いの第2言語・第3言語として使うにはとても有望な言語だと思っています。 Luaに関する日本語の情報はまだ多くはないのですが、以下のサイトを順に読むとだいたいの雰囲気が掴めると思います。 Lua で組んでみる Lua 5.1 リファレンスマニュアル Luaは言語仕様が小さいので、とても習得しやすいです。上記のリファレンスマニュアルだけ読め

sfujiwara 2008/09/22

リンク

はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知

はてなグループの終了日を2020年1月31日(金)に決定しました以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記はてなグループ日記のエクスポートデータは2020年2月28

sfujiwara 2008/08/22

リンク

mixi OpenIDで「マイミクシィだけの掲示板」を作ろう(Perl編) - ラーニング人生。

今日はmixi OpenIDという認証サービスが発表され、各所で報じられている。ミクシィ、認証サービス﹁mixi OpenID﹂を提供--﹁mixi Platform﹂第1弾 mixiサービス企画部長に聞く、﹁プラットフォームを開放する理由﹂﹁あなたのマイミクだけコメント可能な掲示板﹂といったウェブサービスが開発可能になった﹃mixi OpenID﹄﹁mixiがOpenIDのOPになったからと言って何がどうなるというわけでもないでしょ﹂と思っていた人も、﹁マイミクシィ認証﹂﹁コミュニティ認証﹂という2つの仕様には少し驚いただろう。前者は﹁○○さんとマイミクシィであるか﹂、後者は﹁○○というコミュニティに入っているか﹂をそれぞれ証明するものだ。これらを使えば、単にmixiのユーザが使えるというだけに留まらない、人や関心でのつながりを生かしたアプリケーションを作れることになる。以下のコ

sfujiwara 2008/08/21

openid
mixi

リンク

速報、1500万人が使える mixi OpenID の技術面を解説するでござるの巻 - Yet Another Hackadelic

と言う訳でついに来ましたね。 http://mixi.jp/openid.pl mixi OpenID << mixi Developer Center (ミクシィデベロッパーセンター) 中の人、お疲れ様でした。実はさっきまで mixi に行って技術的な意見交換などしてきました。mixi OpenID の技術的な側面なんかを簡単に紹介したいと思います。ミクシィ認証これは普通の OpenID Provider の挙動と同じです。僕のアカウントは http://mixi.jp/show_profile.pl?id=29704 なので僕の OP Local Identifier は、 https://id.mixi.jp/29704ここでお気づきの方も居るかと思いますが、OP Local Identifier 自体も https で提供されています。さて最初の html の内容を確認して

sfujiwara 2008/08/20

openid
mixi

リンク

mixi Developer Center » mixi OpenID

仕様 mixi OpenID は mixi 内のユーザー情報を外部サイトでの認証に使用するためのサービスです。この文章では mixi OpenID の仕様について説明します。 FAQ mixi OpenID について、よくある質問とその答えをまとめました。 mixi Platform用素材利用ガイドラインユーザーに簡単にわかりやすくログインできるようにするために、専用ログインボタンを配布しています。また、利用ガイドラインに沿ったボタンの利用をお願いしています。ガイドライン mixi OpenIDを導入いただくにあたってのガイドラインとなります。本記載内容に沿った対応サイトを作成いただくことで、ユーザーにメリットのあるコミュニケーションがもたらされることを望んでいます。

sfujiwara 2008/08/20

openid
mixi

リンク

ロングテールな画像配信その2 - 3,000万の画像を配信するシステム - mixi engineer blog

Squidを検索する度に最初に表示される画像検索の結果に吹き出しそうになる開発部・システム運用グループの長野です。前回のロングテールな画像配信のその2ということで、実際の画像配信システムについて書かせて頂きます。 ■プロフィール画像の配信について前回紹介しましたが、mixiにおいてプロフィール写真を設定を設定しているユーザ数は全体の約70%、1,000万人の方が設定をされています。現在配信をしているプロフィール画像のサイズは180x180、76x76、40x40と3サイズあり、合計3,000万以上のファイル数になっています。また、もっともよく使われる76x76のサイズ1,000万件において、1日にアクセスされる画像の数は800万ファイル以上、うち97%が30回以下と非常に広範囲に渡ってアクセスされています。そのため大量の画像を配信できる仕組みが必要になります。 ■配信システムの全体像プ

sfujiwara 2008/08/20

リンク

mixi Engineers’ Blog » かんたん友人検索その壱

朝7時30分に起きて駒沢公園をジョギングすること10日目のmikioです。だいぶ体が軽くなってきて、そろそろ体型にも変化が出てくるかなと期待する毎日です。さて、以前の記事で予告した通り、Tokyo Dystopiaを使ったmixi内の検索機能をインディーズ機能としてリリースしました。﹁かんたん友人検索﹂という名のとおり、mixiの登録ユーザを対象として友人や知人を簡単に検索する機能です。操作を簡潔にしながらも、マイミクシィのつながりなどを使って検索精度を高めているのが特徴です。シンプルにした見た目として最も大きな特徴は、従来の友人検索よりも入力フィールドの数を減らしたことです。従来では﹁姓﹂﹁名﹂﹁ニックネーム﹂﹁性別﹂﹁年齢︵下限︶﹂﹁年齢︵上限︶﹂﹁血液型﹂﹁現住所︵都道府県︶﹂﹁現住所︵市区町村︶﹂﹁出身地︵都道府県︶﹂﹁出身地︵市区町村︶﹂﹁趣味﹂﹁職業﹂﹁キーワード﹂﹁写真﹂

sfujiwara 2008/08/18

mixi
search

リンク

第4回　memcachedの分散アルゴリズム | gihyo.jp

株式会社ミクシィの長野です。第2回、第3回と前坂がmemcachedの内部について紹介しました。今回は内部構造から離れて、memcachedの分散についての紹介をいたします。memcachedの分散連載の1回目に紹介しましたが、memcachedは﹁分散﹂キャッシュサーバと言われていますが、サーバ側には﹁分散﹂の機能は備わっていません。サーバ側には当連載の第2回、第3回で前坂が紹介したメモリストレージの機能のみが組み込まれており、非常にシンプルな実装となっています。では、memcachedの分散はどのように実現しているのかと言うと、すべてクライアントライブラリによって実現されます。この分散方法はmemcachedの大きな特徴です。memcachedの分散とはここまで数度﹁分散﹂という言葉を用いてきましたが、あまり詳しく触れてきませんでした。ここでは各クライアントの実装に共通する大ま

sfujiwara 2008/07/24

リンク

KLab

ニュース KLab株式会社が配信したニュースリリースやお客さまへのお知らせ、メディアの掲載情報をご覧いただけます。

sfujiwara 2008/06/24

リンク

mixi Engineers’ Blog » Tokyo Tyrantによる耐高負荷DBの構築

連休中はWiiのマリオカートをやりまくってやっとVR7000越えたmikioです。愛車はマッハ・バイクとインターセプターです。さて今回は、分散ハッシュデータベースサーバTokyo Tyrantでmixiの最終ログイン時刻を管理するようにした時の苦労話を書きます。ログイン処理は負荷地獄 mixiでは、全てのユーザについて、各々の最終ログイン時刻を管理しています。﹁マイミクシィ一覧﹂や﹁お気に入り﹂などの画面で、友人が近い時間にログインしていてコミュニケーションがとりやすい状態にあるかどうか確認できるようにするためです。 mixiのほぼ全てのページはログインしないと見られないページなので、ほぼ全てのページにアクセスされるたびにログイン確認が行われます。したがって、最終ログイン時刻はほぼ全てのページにアクセスされる度に更新されることになります。mixiの中で最も重いデータベースのひとつとして﹁

sfujiwara 2008/05/07

リンク

mixi Engineers’ Blog » memcachedの最新動向

先週アメリカに行ってMySQLカンファレンスやmemcached hackathonに参加してきました。そこで今回はmemcachedコミュニティやhackathonで行われた多くの議論に関してご報告させていただきたいと思います。前書きご存知の通りmemcachedはFacebookやWikipediaをはじめとする巨大ウェブサイトのコアテクノロジーの一つとして世界中で使われるまでに到達したソフトウェアです。mixiを支えるテクノロジーの一つでもあります。 hackathonをご存知ない方のために簡単に説明すると、オープンソースプロジェクトのハッカーたちが実際に集まってプロジェクトの開発をしたり仕様の議論や提案などをするイベントの事です︵とても楽しいです︶。今回で4回目になるmemcachedのhackathon︵議事録︶ですが、東京でもやったら面白いんじゃね？的な話を結構まえにした

sfujiwara 2008/04/25

リンク

はてなブックマーク

タグ

関連タグで絞り込む (25)

mixiに関するsfujiwaraのブックマーク (27)

お知らせ

今週のはてなブックマーク数ランキング（2024年7月第2週）

はてなブックマーク透明性レポート（2024年 2月-2024年4月）

今週のはてなブックマーク数ランキング（2024年7月第1週）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス