[B! GCP] wata88のブックマーク

Google Cloudの主要サービスが10時間ものあいだ障害発生。原因は分散アクセスコントロールへの大量の変更要求が引き起こしたメモリ不足

Google Cloudの主要サービスが10時間ものあいだ障害発生。原因は分散アクセスコントロールへの大量の変更要求が引き起こしたメモリ不足 Google Cloudは、米国太平洋時間の3月26日木曜日16時50分︵日本時間27日金曜日午前8時50分︶頃から約10時間ほどのあいだ、Google Compute EngineやCloud Storage、Cloud SQLなどをはじめとする主要なサービスで障害を起こしていました。受けた影響はリージョンごとに異なりますが、ほぼすべてのリージョンで何らかの影響を受けたようです。 Googleはその原因についての調査結果を発表。原因はGoogle Cloud内部でアクセスコントロールを司る部分に障害が発生したことだったと説明しました。アイデンティティマネジメントへの大量の更新要求がキャッシュサーバの障害にクラウド内部では、APIへのアクセス

wata88 2020/04/11

GCP

リンク

GCP の IAM をおさらいしよう

この記事は Google Cloud Japan Customer Engineer Advent Calendar 2019 の6日目の記事です。 TL;DR本記事ではGoogle Cloud Platform (GCP) でのユーザーや権限を管理する IAM について整理していきます。はじめにクラウドを使う上で、ユーザー管理や権限管理は重要ですよね。GCP を使う際に、どのようにユーザー管理できるのか、権限管理や認証を整理してみようと思います。GCP では権限管理を Identity and Access Management︵ IAM ︶というもので管理しています。IAMでは、誰が、どのような操作を、何に対して行えるかというものを定義・管理します。これによりアカウントの追加・削除や権限付与がシンプルになり、管理が容易になります。 IAMのユーザーと権限GCP で利用できるアカウ

wata88 2019/12/07

GCP

リンク

AWSとGCP間でVPNを設定する方法 - Gunosy Tech Blog

はじめに AWSのネットワーク構成 GCPのネットワーク構成 AWS と GCP 間での通信 VPN設定手順 TGWを用いたルーティングの設定 (AWS) Shared VPC の設定 (GCP) Terraform まとめはじめにこんにちは。DR & MLOps Group というところで働いている阿部といいます。Data Reliability & Machine Learning Operations の略で、データ基盤やML基盤を作って運用するグループです。私はもともとは記事配信ロジックやデータ分析をやっているグループにいましたが、今年移ってきました。こちらが紹介記事です: DREの使命とは？﹁数が神より正しい﹂と言うための正確性を求められる技術力 – Gunosiru 弊社のシステムは基本的にはAWSで動いていますが、とあるプロジェクトでGCPを使うことになりました。そ

wata88 2019/11/29

GCP
aws

リンク

GCEちょい技 - Cloud IAP TCP Forwarding で踏み台サーバ要らずなメンテナンス

外部IPアドレスがないCompute Engine VMにSSH/RDPログインするためには、これまでは踏み台サーバ(Bastion Server)を経由する必要がありました。外部IPがなければFWルールの状態にかかわらず外部インターネットからのアクセスを制限できる反面、踏み台サーバを用意して起動しておく必要があり、余計なコストがかかっていました。これから紹介する Cloud IAP TCP Forwarding を使えば、踏み台サーバを用意せずに外部IPアドレスがないVMに対してSSHやRDPログインすることが可能になります。対象読者 Cloud Shellにそんなに抵抗がないコマンド実行のためだけの踏み台サーバの運用がつらい Cloud Shellの基本的な使い方については、こちらの記事を参考にしてください。 HandsOn環境迷子に贈るCloud Shell 準備作業

wata88 2019/10/31

GCP

リンク

Deleted Compute Engine service account

wata88 2019/10/18

やっちまった時のやつ

gcp

リンク

【ノーカット掲載】オンプレミスかクラウドか。社内を二分する論争にDeNA南場智子が出した"答え" | フルスイング by DeNA

コスト・品質ともに最高レベルを実現していた、DeNAのオンプレミス。しかし2018年6月、DeNAは全社方針としてそのオンプレミスを捨て、3年の移行期間をかけクラウドに全面移行することを決定しました。なぜDeNAは経営の意思決定として、当初﹁3倍のコストになる﹂と言われたクラウド全面移行に踏み切ったのか？本記事では﹁クラウドシフト決定の判断﹂に至る経営者の思いを語った﹃Google Cloud Next ’19 in Tokyo﹄でのDeNA代表取締役会長南場智子︵なんばともこ︶講演内容をノーカット掲載します！﹁経営の言語﹂と﹁技術の言語﹂両方話せる人材を信頼する私がDeNAを立ち上げたのは、1999年。今からちょうど20年前です。もともと、経営コンサルタントをしていました。得意なのは戦略や提携。それからマーケティングや分析などですね。一緒に起業した仲間も、同じファームから連

wata88 2019/08/22

リンク

GitLab.com、200TB超のデータとともにAzureからGCPへ移行完了。三度の計画停止による予行演習を繰り返し、移行手順も公開

GitLab.com、200TB超のデータとともにAzureからGCPへ移行完了。三度の計画停止による予行演習を繰り返し、移行手順も公開ソースコード管理サービスを提供するGitLab.comは、GitHubの競合として見なされています。そのため、今年の6月にマイクロソフトがGitHubを買収するとの報道の際には、大手企業の傘下にない独立したGitサービスの提供元として突如として注目度が上昇していました。参考‥GitLabへのインポートが普段の10倍に急増、GitHubの買収報道でその同じ6月、GitLab.comはこれまで同社のサービスを提供する基盤として利用してきたMicrosoft Azureから、Google Cloud Platformへ移行することを発表します。 I wrote a post about @gitlab's project to migrate our SA

wata88 2018/08/17

リンク

GCPをフル活用したゲームログ収集基盤の構築

Building Better People: How to give real-time feedback that sticks.

wata88 2018/07/14

GCP
ログ

リンク

安価なGKE（k8s）クラスタを作って趣味開発に活用する - えいのうにっき

tl;dr GKEでk8s（kubernetes）クラスタを作成すると、各ノードはGCEインスタンスとして起動する GCEインスタンスには preemptible モードが指定でき、これはGKEクラスタとして起動するノードに対しても指定可能 GCEのf1-micro無料枠の適用と合わせて、この運用費用は約 $7.68/month 動機 GKEクラスタを維持する最安料金ていくらだろー— a-know | Daisuke Inoue (@a_know) 2018年6月11日趣味開発用途として手軽にあれこれ試すことができて、それでいてできるだけ安くあがるコンテナオーケストレーション環境（k8s環境）がほしい。 k8sそのものを運用したい・そのノウハウを学びたいというわけではないのでマネージドサービスがいい「k8s上でアプリケーション・サービスを運用する経験」がしたいその上で、できるだけ安く

wata88 2018/06/18

ロードバランサーつけなければ大丈夫そう

docker
GCP

リンク

【AWSしかやったことない人向け】AWSとGCPのネットワークの違いを理解してみよう - まーぽんって誰がつけたの？

背景 AWSでVPC作ったりしたことあるけど、GCPやったことないって人は色々違いに戸惑うアカウントの関係性、ネットワークの概念の違いなどを理解したのでまとめた AWSとGCPのアカウントの考え方の違い AWSの場合、ある人間に対して色々なAWSアカウントが付与される。 (人間) -> 個人で発行されたアカウント -> 会社で発行されたアカウント GCPの場合、ある人間は色々なプロジェクトというものに属することができる。そして、その人間が使うアカウントはGmailとかで使ってるようなGoogleアカウントである。 (人間withGoogleアカウント) -> プロジェクト会社のやつ -> プロジェクト何の関係もない個人のやつ GCPの方が始めるのはすごく簡単な気がする。アカウント管理もGoogleアカウントさえやっときゃいいみたいな感じなので、Googleにロックインされる感は

wata88 2018/05/20

GCPネットワークまじすごい

GCP
aws

リンク

BigQuery に関する１２の誤解の真相を明らかにする

この記事は Busting 12 myths about BigQuery の著者の許可を得た上で @yutah_3 が日本語訳、補足したものです。個人的に気になった話等を含めて “訳者注” を入れながら翻訳します。割と最近、 Forrester Research のレポート The Forrester Wave™: Insight Platforms-As-A-Service, Q3 2017 では Google Cloud は Leader のポジションとして位置付けられました。 BigQuery がこの中で果たした功績は間違いなく大きいでしょう。私達は日々、スタートアップから大企業のお客様に至るまで、多様な Google BigQuery をお使いのお客様と、お客様の分析やデータウェアハウスに関する課題を解決するために一緒に取り組んでいます。多くの場合、私達のお客様は BigQu

wata88 2018/03/21

BigQuery
GCP

リンク

Google Compute Engine Incident #17008 | Google Cloud Status Dashboard

Google Cloud Status Dashboard Incidents Google Compute Engine Google Cloud Status Dashboard This page provides status information on the services that are part of Google Cloud Platform. Check back here to view the current status of the services listed below. If you are experiencing an issue not listed here, please contact Support. Learn more about what's posted on the dashboard in this FAQ. For ad

wata88 2017/07/07

リンク

Google Cloud Functions [Alpha] を使って GCP の課金データを BigQuery に投入してみた - Qiita

Google Cloud Functions [Alpha] を使って GCP の課金データを BigQuery に投入してみたGoogleBigQueryGoogleCloudFunctionsgooglecloud こんにちは。Google I/O 2016 の開催が近づきワクワクしている wezardnet です。さて、今回はアルファ版で公開された Google Cloud Functions を使って Google Cloud Platform︵以下GCP︶の課金データを BigQuery に入れる仕組みをサンプルとして作ってみたので紹介したいと思います。 1. Cloud Functions ってなに？ Cloud Functions では、クラウド環境でイベントが発生したときに実行される Node.js を書くことができ、巷では﹁サーバレスアーキテクチャ﹂とか呼ばれているそ

wata88 2017/06/07

GCP
BigQuery

リンク

BigQueryのコストに対する恐怖心を払拭する - Qiita

はじめに大量データをクラウドに格納してデータ分析に利用してみようと思い、速い・安いと言われるGoogleCloudPlatform(GCP)のBigQueryを触ってみた… かったのですが、以下の記事にもあるように予想外に課金されてしまった事例を小耳に挟んでいたため二の足を踏んでいました。 BigQueryで150万円溶かした人の顔 BigQueryのコストに対する恐怖心を払拭すべく公式ドキュメントを料金面にフォーカスして読み解き、不用意に大量課金されないよう気をつける点をまとめたのが本記事となります。今後も改定される可能性もありますので、利用の際にはご自身でも確認していただければと思います。また、情報が誤っていた場合はご指摘いただければ幸いです。課金される操作 BigQueryで課金される内容は・ストレージ代金・データ操作代金です。単純ですね。ただし、データ操作は回数

wata88 2017/05/11

いい記事だ

GCP
BigQuery

リンク

GAE/GoでSlackの'/'（スラッシュ）コマンドサーバーを立てる - Qiita

この記事は GoAdvent Calendar 2015 の13日目の記事です。はじめに WebSocketを使ったhubotが圧倒的に流行っていますが、何かしらチャットでbotに話しかけてサーバー側で処理してSlackに結果を返すケースであれば、SlashCommandsのIntegrationで十分こと足ります。 GAE/Goで、このSlashCommandsのサーバーを無料枠内でサクッと作れてしまうのでオススメです。事前準備済み Googleアカウント、GCP登録済み Slack登録済み Go環境構築済み GAE/Go開発環境構築済み環境準備 GoogleCloudPlatformでプロジェクトを作成する ※プロジェクト名はご自由に設定ください Project用意してdeployする github.com/kyokomi/slack-slash-commandsをチェックアウ

wata88 2015/12/13

リンク

はてなブックマーク

タグ

関連タグで絞り込む (13)

GCPに関するwata88のブックマーク (15)

お知らせ

今週のはてなブックマーク数ランキング（2024年6月第5週）

今週のはてなブックマーク数ランキング（2024年6月第4週）

今週のはてなブックマーク数ランキング（2024年6月第3週）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス