[B! infrastructure] babydaemonsのブックマーク

babydaemons id:babydaemons

infrastructureに関するbabydaemonsのブックマーク (13)

Netflixはどのようにして800Gb/sものデータ転送を実現しようとしているのか？
近年は動画ストリーミングサービスの利用者が増加しており、インターネットトラフィックの大部分を占めていると指摘されています。世界最大級の動画ストリーミングサービスであるNetflixが、日々大量のデータを全世界のユーザーに送信するためにどのような工夫を凝らしているのかを説明するスライドを公開しています。 2022-Streaming-Summit-Netflix.pdf (PDFファイル)http://nabstreamingsummit.com/wp-content/uploads/2022/05/2022-Streaming-Summit-Netflix.pdf Netflixは800Gb/sもの動画データを1つのサーバーで送信するシステムの構築を目指し、長い道のりを歩んできました。 Netflixのワークロードでは、動画を﹁静的メディアファイル﹂として送信しており、すべてのコーデック／
babydaemons 2022/08/22
斜め読みでは、TLSとNUMA関係しか判らなかったけど、こういうの読むとワクワクする

crypt

CPU

kernel

infrastructure

Netflix
リンク
VISAカードのインフラがDocker採用。数秒でプロビジョニング、パッチやメンテにさよなら、消えるインフラ。DockerCon 2017
VISAカードのインフラがDocker採用。数秒でプロビジョニング、パッチやメンテにさよなら、消えるインフラ。DockerCon 2017 4月に米テキサス州オースチンで開催されたDockerのイベント﹁DockerCon 2017﹂では、コンテナランタイムのためのLinuxコンポーネント﹁LinuxKit﹂の発表や、コンテナランタイムを組み立てる﹁Moby Project﹂の発表など、同社の新しい方向性を示す発表が相次いで行われました。そのなかでもう1つ、DockerCon 2017ではグローバルな決済サービスを提供しているVisaが、同社のインフラにDockerを採用したという事例が発表されました。これまでDockerは開発環境やテスト環境への採用が進んでいましたが、Visaのような著名な企業が本番環境でDockerを採用した事例の発表は、Dockerの本番環境への導入を市場に説得す
babydaemons 2017/05/08
Docker

Infrastructure

VISA
リンク
実際に運用してみてわかった、大規模Mastodonインスタンスを運用するコツ - pixiv inside
おはようございます、ImageFlux開発責任者のharukasanです。3日前の4月14日、ピクシブではPawooが急にリリースされることになりまして、ここ数日はずっとPawooサーバにログインしていました。このPawooサーバ、既にピクシブの監視体制に入っており、アラート受信後インフラエンジニアが障害対応できる仕組みを整えています。案の定、リリース直後の15、16日は週末にもかかわらずアラートを受け取ることになり、サーバにはりつくことになったわけです。どんなシステムであろうとアラートを受け取ったら対応する、それが我らインフラエンジニアです。 pawoo.netの構成さて、それではまずPawooの構成を見ていきましょう。digすればわかりますがpawoo.netはAWS上に構成されています。数百台以上の物理サーバを常時運用しているピクシブであっても、さすがにこんなにはやく物理サーバは用
babydaemons 2017/04/17
AWSですばやく立ち上げ、既にたくさんのプルリク送ってるpixivさん凄い

mastodon

AWS

infrastructure

pixiv
リンク
ITインフラもアジャイルで構築できる？
結論から言うと、少なくとも現時点では、インフラをアジャイルで構築することは現実的ではない。この点を間違え、泥沼にはまっているチームもある。インフラを決めずにアジャイル開発に入ると、大きな手戻りや無理のある実装として歪みが現れる。この問題が表面化したのは、割と最近のことだ。少し前まで、Webシステムの利用技術は決まり切っていた。IAサーバー上のJava＋Spring＋Oracle Database、あるいは.NET＋SQL ServerやLAMP環境が“鉄板構成”だった。インフラ面の不都合が後から判明するとしても、サーバーのサイジングがうまくできていないという程度だった。しかし、今はインフラ技術が格段に進化して多様化した。データベースはRDBだけでなく、NoSQL DBも使う。検索やバッチ処理に分散処理技術を使うことも珍しくない。これらを動かす環境はオンプレミスの物理サーバーだけなく、パ
babydaemons 2017/01/15
docker

.NET

RDB

infrastructure
リンク
WEB系各社で使われている監視ツールまとめ - mikedaの日記
次世代 Web カンファレンスで監視について話すことになったので、ネタとしてWEB系各社で使っている監視ツールを調査中。うちはこれ使ってるよ！！！ってのがあったら@mikedaにメンションください！ Cookpad Zabbix 昔はNagios+muninだけど台数増えて性能的に破綻したビューはそのままじゃ辛いのでmunin風に表示するのを自作 StatusCake DataDog。サービス系、サーバに紐付かない系の監視に。DashBoard便利 waker。通知用。PagerDuty高い、と言ってryot_a_raiが秒で作ったらしい Kibana imon。独自のリアルタイムなサービス稼働状況表示ツール NewRelic 試し中なもの Real-User Monitoring : JSでbeacon飛ばしてfluentd -> BigQuery。Google SpreadShee
babydaemons 2015/10/17
infrastructure

monitoring
リンク
グリーのインフラに Chef を導入した話 | GREE Engineering
類似のソフトウェアとして、Puppet や Ansibleといったものもあります。こういったインフラ自動化まわりのソフトウェアについてはペパボの宮下さんのインフラ系技術の流れが参考になります。 Chef in グリーさて、グリーでのChefまわりの構成をご紹介します。下図が全体の構成です。開発環境開発は各個人のマシン上で仮想マシンを立ち上げて行なっています。クックブックの開発では、クックブックを開発する人が serverspec でテストを書くようにしていて、構築後のサーバが期待通り動くことをテストしています。一つのクックブックでも設定値などの条件によって動作が変わってくるため、test-kitchen を用いて複数の条件︵ランリストやノードのアトリビュート︵以下、﹁アトリビュート﹂︶などの組み合わせ︶でテストを行っています。また、一部仮想マシンを使う必要がないテスト︵att
babydaemons 2014/01/01
chef

jenkins

github

gree

infrastructure
リンク
気象庁のスパコン半日ぶりに復旧　NHKニュース
4日夜、気象庁のスーパーコンピューターに不具合が発生し、気象予報のデータの一部が作成できない状態になっていましたが、気象庁によりますと、スーパーコンピューターは午前9時10分におよそ半日ぶりに復旧しました。
babydaemons 2013/02/05
どっちかというと、CPUやメモリといった本体よりも、冷却系のほうが壊れやすいので、そっちを先に二重化しておくべきだったんでは。。。

●IT

●Infrastructure
リンク
中小企業向けクラウド財務会計システムマガジン
財務会計システムとは中小企業の50％以上が導入をしている、社内の業務システムのひとつです。主な機能としては自動取組、自動仕分け機能、見積、請求、入金の管理、決算書、経営レポートなどを一元で管理するシステムのことです。これまで手書き伝票やエクセルで管理していたものをシステム化することによって、業務効率化の観点で大きくメリットが出ることが特徴です。詳しくはこちら現在国内の会計ソフトと呼ばれるものはごまんとあります。テレビCMでしている新興のソフトもあれば、大手システム会社が昔からリリースしているソフト、システムまで年々増え続けているのが現状です。その中で2010年ごろより、財務会計システム自体、これまでのオンプレミス型からクラウド型へと進化してきています。その為、現在システムを導入しているほとんどの中小企業はクラウド財務会計システムを活用されています。　クラウドのメリットとしては、いつでも
babydaemons 2012/07/24
今度のプロジェクトで買ってくれないかなー。マジで。先行調査で自宅で流してるバッチジョブがもう３日目。orz

fusion-io

ioDrive

infrastructure
リンク
ファイバーチャネル - Wikipedia
ファイバーチャネルスイッチの一例。水色のケーブルは光ファイバーファイバーチャネル︵英: Fibre Channel[1]、略称‥FC︶はギガビット級ネットワーク技術の一種であり、主にストレージエリアネットワーク (SAN) の構成要素としてデータセンターで使用されている。情報技術規格国際委員会︵INCITS, 米国国家規格協会‥ANSIが信任した委員会︶のT11技術委員会が標準化した[2]。接続には主に光ファイバーを使用し、長区間(最大100 km)かつ高速(最大128Gb/s)な伝送を実現する。種々の上位プロトコルがサポートされているが、主にSCSIコマンドがネットワーク上でやり取りされる。メインフレームではFICONが利用される場合もある。歴史[編集] ファイバーチャネルはIPI (Intelligent Peripheral Interface)プロトコルの拡張プロジェクトの一部
babydaemons 2010/03/30
Fiber Channel

infrastructure

Strage
リンク
ストレージセントリックネットワーク●OSも全部… - IT、IT製品の情報なら【キーマンズネット】
日々進歩するIT 技術は、ともすると取り残されてしまいそうな勢いで進化の速度を速めています。そこでキーマンズネット編集部がお届けするのが﹁5分でわかる最新キーワード解説﹂。このコーナーを読めば、最新IT事情がスラスラ読み解けるようになることうけあい。忙しいアナタもサラっと読めてタメになる、そんなコーナーを目指します。今回のテーマは﹁ストレージセントリックネットワーク﹂。クライアントPC内にある、ハードウエア以外のすべての情報を、ネットワーク経由で一元的に管理する新たなストレージの枠組みです。ストレージの集約によるPCの一括管理と、災害対策の実現を目指しています。企業などで使うパソコンのハードディスクに通常格納されているOSやアプリケーション、データのすべてを、広域IPネットワークを介した大容量ストレージに集約し、各パソコン内の情報を一元的に管理するためのネットワークソリューションのこと。
babydaemons 2010/03/30
Cloud Computing

infrastructure

Enterprice Computing
リンク
SSDでファイルシステムを高速化 - 浜村拓夫の世界
Webサーバのデータバックアップのため、ストレージを追加したい。 HDDにするか、SSDにするか？ Last.fmがサーバにSSDを導入、分散ファイルシステムもSSD対応にしてスケール向上に成功！音楽配信サイトのLast.fmは、今年の10月からXbox Liveでも利用できるようになったことを受けてユーザー数が大幅に増加。これに対応するためサーバにSSDを採用したところ、問題なくスケールの向上に成功してしまったことをブログ﹁Launching Xbox, Part 2 - SSD Streaming﹂で明らかにしています。 SSDで同時接続数が300から7000に増加 Last.fmはこれまで7200rpmのSATAドライブをバックエンドに利用。ファイルシステムとしてオープンソースの分散ファイルシステムであるMogileFSを採用していました。 MogileFSを拡張して﹁Hotノ
babydaemons 2010/03/13
Web Server

infrastructure

Server
リンク
[ニュース] はてななどの各社担当者が自作サーバーのノウハウを紹介
はてなやサイバーエージェントなど、5社の担当者が自作サーバーに関するメリットやデメリット、ノウハウなどを紹介する「自作サーバカンファレンス」が11月25日に開催された。自作サーバーのメリットといえば、コストダウンがもっともわかりやすいメリットだったが、最近ではベンダー製サーバーの価格低下やクラウドサービスも充実し、コスト面では以前ほどの価格差はなくなってきている。しかし、「まだまだ自作サーバーの可能性は豊富にある」ということで、はてななど自作サーバーを利用するITベンチャー5社が自社の導入例をもとにメリット・デメリット、ノウハウなどを紹介するカンファレンスを開催した。カンファレンス冒頭に登壇した、株式会社はてなで執行役員を務める田中慎司氏は「はてなでは設立当初から自作のサーバーを使ってきているが、ここ最近を見ると他社でも自作サーバーを使用するケースが出てきている」とコメントした。また
babydaemons 2009/12/24
自作サーバ

ハードウェア

Server

はてな

infrastructure
リンク
Googleが無料DNSサービスをテスト公開、Webの高速化が目的　
babydaemons 2009/12/04
Google

DNS

Internet

Web

infrastructure
リンク
1