[B! infrastructure] gologo13のブックマーク

gologo13 id:gologo13

infrastructureに関するgologo13のブックマーク (34)

25K request/secをさばいた「LINEのお年玉」のアーキテクチャの裏側 - LINE ENGINEERING
みなさんこんにちは、LINEのサーバーサイドエンジニアの長谷部です。普段は、最近でいうとLINE Loginや LINE Customer Connectなどの開発を担当しています。 2018年の年始に LINEのお年玉というイベントを実施し、その開発を担当しました。今回の記事では、LINEのお年玉のアーキテクチャの紹介や、当日実際に発生した問題(サービス過負荷起因のkafka consumer遅延)などの振り返りについて書こうと思います。 LINEのお年玉とはお年玉イベント期間中に、お年玉とLINEスタンプをセットで﹁お年玉つきスタンプ﹂として販売しました。対象スタンプを購入したユーザーさんは、スタンプ購入数 x 10個のお年玉が付与されます。こういったメッセージが受信されますユーザーは自分がもっているお年玉を友だちに直接送ったりグループに送信することができ、お年玉を受け取
gologo13 2018/05/01
Kafka

performance

architecture

line

api

infrastructure

パフォーマンス
リンク
「何も起きないこと」が、僕らのやりがい。DeNAライブ配信基盤を生んだ、漢祐介のインフラ構築術 – FullSwing
私たちが利用しているゲームやアプリ。そのほとんどは、24時間365日いつでも快適に使えることが当たり前です。しかしその裏には、“当たり前”を支えているプロフェッショナルがいます。インフラエンジニアです。何らかのシステムを機能させるため、サーバーやミドルウェア、ネットワークなど統合的なアーキテクチャ基盤を構築・運用する。彼らがそうした業務に日々“フルスイング”し続けているからこそ、私たちはいつでもどこでもシステムを使うことができます。システム＆デザイン本部IT基盤部第一グループ　グループリーダーの漢祐介︵はたゆうすけ︶も、そんなインフラエンジニアの仕事の魅力にとりつかれ、自信の技術を磨き続けてきた1人です。彼は、ライブ動画ストリーミングプラットフォーム﹁SHOWROOM︵ショールーム︶﹂やゲームやアプリの実況を生配信できるアプリ﹁Mirrativ︵ミラティブ︶﹂のインフラ基盤を担当
gologo13 2017/12/04
infrastructure

engineer

dena
リンク
8 surprising facts about real Docker adoption
Updated June 2018. Earlier editions of this article were published in 2015, 2016, and 2017. With thousands of companies using Datadog to monitor their infrastructure and applications, we can see software trends emerging in real time. Today we're excited to share our latest research into Docker adoption and usage.Our first edition of this report, in 2015, showed that Docker had already built a grea
gologo13 2017/11/13
docker

infrastructure

datadog
リンク
日経電子版を支える基盤API
自分好みの TS バンドラを Rust で作れる！Deno の内部ライブラリの活用 – Denoで変わるランタイムの景色実践事例 Lunch LT
gologo13 2017/02/06
かなりいいな. 参考になる.

development

api

AWS

docker

infrastructure

microservices
リンク
Open Sourcing Screwdriver, Yahoo’s Continuous Delivery Build System for Dynamic Infrastructure
Open Sourcing Screwdriver, Yahoo’s Continuous Delivery Build System for Dynamic Infrastructure By James Collins, Sr. Director, Developer Platforms and Services, and St. John Johnson, Principal Engineer Continuous Delivery enables software development teams to move faster and adapt to users’ needs quicker by reducing the inherent friction associated with releasing software changes. Yahoo's engineer
gologo13 2017/01/19
screwdriver OSS になったのか

Screwdriver

yahoo

CD

ci

engineering

infrastructure
リンク
Googleは巨大なインフラをどうやってセキュアに保っているか。独自のセキュリティチップ利用やDoS対策、安全なソフトウェア開発など、全体像を解説したホワイトペーパーを公開
Googleのクラウドは間違いなく世界最大規模のコンピュータシステムです。膨大なハードウェアとソフトウェアから構成されるこの巨大なシステムを、同社はどうやってセキュアに保っているのか。そのことを解説したホワイトペーパー﹁Google Infrastructure Security Design Overview﹂が公開されました。ホワイトペーパーには、Googleのデータセンターを構成するデバイスの1つ1つにまで独自のセキュリティチップを組み込んで正規のデバイスかどうかを相互に認証するという物理レベルのセキュリティから、何層のものロードバランサーからの情報を集約してDos攻撃を検知すると、その通信を破棄するといったDoS対策。そしてマシンも従業員もサービスも包括するグローバルな名前空間など、きわめて広範かつ綿密なセキュリティ施策が説明されています。クラウドがいかに高度なセキュリティで
gologo13 2017/01/16
google

infrastructure

security
リンク
Serverless Architecture
補足: AWS Lambda のコンテナのライフサイクルについては説明を単純化していますので、詳しくは http://www.slideshare.net/keisuke69/aws-lambda-46129981 こちらの 42 ページ以降を参照してください
gologo13 2016/10/24
architecture

lambda

AWS

infrastructure

serverless

microservices
リンク
Nianticの求人から推測する『Pokémon GO(ポケモンGO)』のサーバ構成 - Qiita
1ワールドで済ますというチャレンジ Nianticの求人を見ていて、凄く驚いたのは、﹁Software Engineer - Server Infrastructure﹂での次の項目。 all on a single, coherent world-wide instance shared by millions of users. 対訳全ての(アクション)は、数百万のユーザーに共有された単一の一貫した(サーバ群で行われる) つまり、ポケモンGOは1ワールドで構成されている。MMOのサーバを作ったことがある人なら5それがどんなに大変かピンとくるだろう。特に、ポケモン GOの様に一日に数百万人とかが遊ぶゲームで、1ワールドでゲーム世界を構築するのは、結構大変だ。6MMOで1ワールドがなぜ大変か(データストレージとの戦い) MMOの様なオンラインゲームで、1ワールドがなぜ大変かを図示する。
gologo13 2016/09/24
infrastructure

engineer

GCP
リンク
Cloud Native
Cloud Nativeというお題目で講演や発表を見かけることが多くなった。クラウドの良さを積極的に活かそう、そのノウハウを共有しようというスタンスは大変ありがたい。今後より深い議論や技術方式の確立などが望まれる分野だと思う。個人として、Cloud Nativeを語る上で気にしなくてはいけない観点が3つあると思う。1) レジリエンシ、2) アプリケーションデベロッパーフレンドリかどうか、3) モニタリングと運用容易性のビルトインの3つ。1のレジリエンシは、耐障害性という言葉よりもクラウドにふさわしく、よりしなやかに障害に対応できる・対応しやすい、という特性のこと。Cloud上にサービスやアプリケーションを安全に生産的に作っていくためには、障害に強い状況を最初から組み込んでおくことが大事なので、プラットフォーム側で提供するか、またはサービスのコア部分に入れ込んでおくことが大事。レジリエン
gologo13 2016/08/28
動画後で見たい。。

aws

cloud

infrastructure

あとで読む
リンク
新卒の子にどこまで勉強すれば良いですかね？と聞かれた件 - Qiita
ちょっと、簡単に答えられなかったので、休み中にまとめました。﹁どこまで勉強すれば良いか？﹂という質問には、自分の立ち位置や、今後の目標など関わるので、それらを踏まえて考える必要があると思います。職種によっても違いますが、質問された時の状況は、 Web系エンジニアが新卒の子に聞かれた形なので、考慮いただきたいです。また、そもそも、どんな背景をもったやつが書いてるんだ？と思う方もいらっしゃるかと思いましたので、簡単に自己紹介してから書きます。書いている人の自己紹介現在33歳で、エンジニアスタートしたのが、 2005年08月だったので、エンジニア歴は11年となります。ほとんどの現場がデスマーチ状態だったので、2ヶ月くらい前に転職して、現在はホワイトな会社のリクルート住まいカンパニーで、PHPを書いています。言語歴としては、最初にJP1スクリプトを1年半くらいやって、次に
gologo13 2016/07/21
]

engineer

infrastructure

java
リンク
Peter Bourgon · Go best practices, six years in
(This article was originally a talk at QCon London 2016. Video and slides here.) In 2014, I gave a talk at the inaugural GopherCon titled Best Practices in Production Environments. We were early adopters at SoundCloud, and by that point had been writing, running, and maintaining Go in production in one form or another for nearly 2 years. We had learned a few things, and I tried to distill and conv
gologo13 2016/05/02
golang

development

infrastructure
リンク
トレタのインフラ運用、支えている道具(Packer, Terraform, Serverspec, Ansible, Roadworker, Circle CI)、考え方 - トレタ開発者ブログ
インフラをアレしてる佐野です。トレタのコア部分はEngineyardで運用していますが、事業拡大に伴いサブシステムも増えてきました。新しいサブシステムは主にAWSで運用しています。そこで今回は事例として弊社の新規部分のインフラ運用のやり方、そこで使われている道具(Packer, Terraform, Serverspec, Ansible, Roadworker, Circle CI)、考え方などについて書きます。これらの道具はもはやよく知られたものであり、あまり真新しくはないとは思っています。しかしながら弊社に遊びに来た方や採用の応募者の方などからトレタのシステム運用に関する質問をいただくことがあり、その説明資料のかわりになるかな、という目的もあって書かせていただきます。これ以外にも道具はあるのですが、なんとなく興味をもってくれそうなワードをタイトルに羅列させていただきました。以下、目次
gologo13 2016/04/19
ansible

aws

ci

infrastructure

Packer

Terraform
リンク
クックパッドのサーバプロビジョニング事情 - クックパッド開発者ブログ
インフラ部の荒井︵@ryot_a_rai︶です。この記事ではクックパッドで利用しているプロビジョニングツール "Itamae" の紹介と細々した Tips を紹介します。式年遷宮とプロビジョニングツール現在、弊社ではインフラの式年遷宮*1を進めています。式年遷宮以前、弊社では Puppet を利用してサーバをセットアップしていましたが、式年遷宮に際して既存のプロビジョニングに関するコードは捨てることになるため、プロビジョニングツールの再検討を行うことになりました。 Puppet, Chef, Ansible, SaltStack を検討した結果、言語特性の観点では、Ruby DSL な Chef が良いアーキテクチャ・エコシステムの観点では、シンプルな Ansibleが良いといった点から、どれも決め手に欠ける状況で、Ruby DSL で記述できるシンプルなプロビジョニングツール
gologo13 2015/05/22
cookpad

chef

Itamae

infrastructure

ansible
リンク
Vault参考訳 | Pocketstudio.jp log3
HashiCorp から新しいツール Vault がリリースされました。credentialや機密情報的なものを管理するためのツール。例によって参考訳です。変なところありましたら、ご指摘いただけると助かります。 Vault – HashiCorp https://hashicorp.com/blog/vault.html ※今回も一応書いておきますと、本 blogでの投稿は私個人の意志によるものであり、所属する組織の意見を代表するものでもなく、仕事でもなく、誰からの指示をうけているわけでもなく、すべて興味本位であり、ぶっちゃけ好き勝手に書いています。これまでも、これからも。 ■ Vault 機密情報を管理するツール今日私達は Vault という安全な機密情報の管理と暗号化データ転送を行うツールを発表します。credential や API 鍵の保管から、ユーザ・サインアップ用のパスワードの
gologo13 2015/04/29
infrastructure

security

vault

hashicorp
リンク
技術選択とアーキテクトの役割
特定のプロジェクトがあり、要件定義をし概要設計をする。それがアーキテクトの仕事だと思われがちですが、大きな視点を持ち様々な課題を自らリードして解決していく立場としても絶好のポジションです。このセッションでは、Mobage オープンプラットフォームの立ち上げから、グローバルプラットフォーム展開、さらには mixi 社との共同プラットフォーム構築、 JavaScript SDK と認証技術の組み合わせによる新しい HTML5プラットフォーム構築をアーキテクトという立場でリードし続けた立場から、技術選択のみならず実現したい事に対する俯瞰的な捉え方を、これまでの実例と共に紹介し、アーキテクトという役割について、お話します。
gologo13 2015/03/28
architecture

developer

dena

infrastructure

business

cto
リンク
ソフトウェアエンジニアだけでサービス運用できる環境を作って失業した話 - まいんだーのはてなブログ
はじめにこのエントリは非常にポジティブで技術的なチャレンジに関するまとめであり求人エントリでもあります。まとめ昨年後半から、急成長するサービスを支えるため “どオンプレ” な環境で作ったサービスをクラウドに持っていく仕事をしていました。クラウドのオイシイところを押さえられるよう作り変えをした結果として “Infrastructure as Code” を実践することになり、結果としてソフトウェアエンジニアだけですべてがコントロール出来る状態になり、インフラおじさん業が不要になりました。そういった環境で働きたい "腕の立つIT エンジニア(特にスマホとサーバサイド)" を募集しています。発表資料&箇条書きで振り返る最近の動き AWS Casual Talks #3 https://github.com/myfinder/aws-casual-3/blob/master/slide.
gologo13 2015/03/28
ansible

AWS

infrastructure
リンク
http://agilecatcloud.com/2015/02/19/facebook-iowa-dc-new-network/
gologo13 2015/02/28
facebook

data

company

infrastructure
リンク
ある若手インフラエンジニアの現状確認 #wakateinfra
How We Structure Our Work At Mercari Microservices Platform Team
gologo13 2015/02/21
devops

infrastructure
リンク
Serverspecの作者がつくる、あるひとつのOSS文化 - 書評『Serverspec』 - Kentaro Kuribayashi's blog
著者のmizzyさんこと宮下剛輔氏よりご恵贈いただきました。ありがとうございます。 Serverspec 作者: 宮下剛輔出版社/メーカー: オライリージャパン発売日: 2015/01/17メディア: 単行本︵ソフトカバー︶この商品を含むブログ (1件) を見るさて、本書について、技術的な側面で語れるひとはたくさんいるだろうので、ちょっと趣向を変えて、エッセイ的な話を書く。ちょうど、著者も﹁本書は、単なるServerspecに関する解説書ではなく、Serverspecに関する思いを綴ったエッセイとも言えるかもしれません﹂(﹁はじめに﹂より)と書いていることだし。 Serverspec誕生の頃約2年前の今頃、ある新しいシステムのためにサーバを構築しようとしていて、我々(mizzyさん、@lamanotramaさん、僕)は苦心していた。Puppetでサーバ構成を記述するに際して、もっといけ
gologo13 2015/01/20
infrastructure

serverspec

chef

oss

software

エンジニア
リンク
Performance - Stack Exchange
Stack Exchange, Careers, Meta RAM: 768 GB • DB size: 3.9 TB
gologo13 2015/01/06
architecture

monitoring

Infrastructure

performance

stackoverflow
リンク
1 2 次のページ