[B! ProtocolBuffers] raimon49のブックマーク

raimon49 id:raimon49

ProtocolBuffersに関するraimon49のブックマーク (32)

protolintの自作pluginによるprotoファイルのレビュー負荷軽減のための取り組み - Cybozu Inside Out | サイボウズエンジニアのブログ
こんにちは。cybozu.com Cloud Platformチームの pddg です。Cloud Platformチームでは現在、精力的に cybozu.com のインフラ基盤の移行に取り組んでいます*1。その取り組みの一環として、gRPCを用いたスキーマファーストな開発を推進しています。今回はスキーマを記述したprotoファイルのレビューにおいて一部のレビュー項目をCIで自動的に確認されるようにし、レビュワーの負荷を軽減できたのでその方法についてご紹介します。 ※ これは Cybozu Advent Calendar 202215日目の記事です。背景 cybozu.com のバックエンドでは、これまではサービスのAPIのスキーマをドキュメント等によりカバーしてきました。これはその実装チームが整備し、適宜更新していくものを指します。しかし、こういったドキュメントはしばしばメンテされ
raimon49 2023/01/02
CI

Go

Google

ProtocolBuffers

guideline

lint

plugin
リンク
ポケットモンスターソード/シールドにHaxeが採用されていた - terurouメモ
顛末昨日、こういう感じのツイートを見かけかました。ポケモンほどの大規模なゲームでHaxe採用されるの初めてなのではhttps://t.co/i8lCJx0NWh— neguse (@neguse) November 14, 2019 結果、このような形となりました。これは、Haxeという高度な型システム及びマクロシステムを持つ静的型付き言語であり、マルチプラットフォームでC++, JavaScript, C#, Java, Python, PHP, Luaなどのターゲットに出力可能なプログラミング言語の現実世界での利用状況を調査するために購入されたものです pic.twitter.com/UnaZsMrH9I— てろるー (@terurou) November 16, 2019 調査結果確かにポケモンソード/シールドの知的財産の表記には、Haxeの記載がありました。確かにポケモ
raimon49 2019/11/17
Game

Haxe

Lua

ProtocolBuffers

cpp

ポケモン

任天堂
リンク
rust.tokyo のまとめ・感想 - mizchi's blog
このブログを書いてる経緯 rust.tokyo 楽しみ！絶対行く！といってたのに申込みを忘れたところ、じゃあスタッフとしてブログを書けという話になったので、ブロガー枠？らしく感想を書きます。とはいえ書けるのは見たやつだけです。 https://rust.tokyo/sessions# 前提自分は低レベルプログラミングは詳しくないです。年に3日ぐらい思い出したように Rust 勉強することがある。 wasm 周りのエコシステムはずっと追ってる。会場の雰囲気組み込み勢とブロックチェーン勢が多そうな気配を感じた。 Visualization of mechanical CAD drawings using WebAssembly and WebGL Aki / CADDi (発表資料見つからず) 概要 Computer aided design (CAD) models used in m
raimon49 2019/10/27
C

JavaScript

MachineLearning

ProtocolBuffers

Python

Rust

performance

programming
リンク
マイクロサービスにおけるWeb APIスキーマの管理 ─ GraphQL、gRPC、OpenAPIの特徴と使いどころ｜ハイクラス転職・求人情報サイト AMBI（アンビ）
マイクロサービスにおけるWeb APIスキーマの管理 ─ GraphQL、gRPC、OpenAPIの特徴と使いどころマイクロサービスにおける通信方式の選択について、おおた︵ota42y︶さんが、GraphQL・gRPC・OpenAPIといった主なWeb APIスキーマの管理の利点と使い分けを解説します。近年流行しているマイクロサービスアーキテクチャにおいては、﹁どういった通信方式を選ぶか﹂が開発の効率やサービスの信頼性、パフォーマンスを大きく左右します。この記事では、GraphQL・gRPC・OpenAPIそれぞれの利点と適切な使い分けについて解説します。マイクロサービスにおけるWeb API管理の重要性 Schema First DevelopmentとWeb API 人ではなくプログラムが処理できるよう管理する Web APIのインタフェース定義手法の比較 OpenAPI ─ R
raimon49 2019/08/22
API

GraphQL

JSON

ProtocolBuffers

REST

cache

guideline

monitoring

performance
リンク
gRPC-WEB がもたらす我々の生活への変化 - tokuhirom's blog
gRPC-WEB がGAとなった。これが我々の生活にどのような変化をもたらすのかについて考える。従来の gRPC の課題 gRPC は google が公開しているRPC 方式であり、java, golang などの言語で利用可能になっている。 gRPC は protocol buffers over HTTP/2 を基本としているため、通信が multiplexing されるし、schema定義がきっちりされるのでクライアント側とのコミュニケーションがしやすい。一方、protocol buffers はbinary であるためにbinaryの取扱が苦手な Browser JavaScript からのアクセスが難しいという問題があった。 grpc-gateway grpc-gateway という実装があって、これを利用すれば Browser JavaScript からのアクセス
raimon49 2018/11/01
TypeScript supportたしかに来そうだし欲しい。

Go

JavaScript

ProtocolBuffers

TypeScript

binary

browser

nginx

web
リンク
gRPC-Web is going GA
On behalf of the Cloud Native Computing Foundation, I’m excited to announce the GA release of gRPC-Web, a JavaScript client library that enables web apps to communicate directly with backend gRPC services, without requiring an HTTP server to act as an intermediary. This means that you now easily build truly end-to-end gRPC application architectures by defining your client- and server-side data typ
raimon49 2018/10/30
API

JavaScript

ProtocolBuffers

generator

web
リンク
メルカリは開発組織を拡大するためにマイクロサービスアーキテクチャを採用した（前編）。Mercari Tech Conf 2018
2013年から2017年のあいだ、スタートアップを含む2000以上の組織に対して、いかに組織のパフォーマンスを加速するかという聞き取り調査を行い、その調査結果をまとめたものです。その調査結果のひとつにこのグラフがあります。これは組織のエンジニアの人数とそのパフォーマンスを、組織の違いによって示したものです。横軸がエンジニアの人数、縦軸はエンジニアあたりの1日のデプロイ数を指標としたパフォーマンスです。これによると、パフォーマンスの低い組織はエンジニアが増えるとデプロイ数も減少しています。普通のパフォーマンスの組織はエンジニアが増えてもデプロイ数に変化はありません。一方でパフォーマンスの高い組織はエンジニアが増えるほど指数関数的にデプロイ数が増えていきます。メルカリが目指しているのはここです。これは単純にアーキテクチャをモノリシックからマイクロサービスへ移行するだけでは実現できま
raimon49 2018/10/09
オーナーシップ本当に大事。作りっぱなしで責任者不在のモノは改善もできない。

API

DevOps

Go

Kubernetes

ProtocolBuffers

design

guideline
リンク
CacooはなぜKubernetesによるmicroservicesへの道を選んだのか？ | ヌーラボ
こんにちは。Cacoo チームの木村︵@cohhei︶です。Cacoo チームでは、 Kubernetes によるアーキテクチャの microservices 化に取り組んでいます。今回は私たち Cacoo チームが microservices 化によって解決しようとしている課題と取り組みの内容、その成果についてご紹介します。この記事では以下の内容を含みます。 Cacoo の開発チームがどんな課題を抱えていたか何故 microservices の道を選んだかどんな技術を選んだか microservices 化してどうだったか現状の課題課題‥古いフレームワークとモノリシックなアプリケーション Cacoo は2009年にベータ版がリリースされた歴史のあるプロダクトで、モノリシックなアプリケーション上ですべての機能が実行されていました。そのため、それぞれのコードの依存関係を十分に理解
raimon49 2018/09/27
方針・原則の項が共感しかない。

Cacoo

Go

GraphQL

Kubernetes

ProtocolBuffers

design

guideline

pattern
リンク
API GatewayによるMicroservices化
API GatewayによるMicroservices化 mercari.go#1 3 July 2018 Taichi Nakashima About me @deeeet / @tcnksm (GitHub) Blog on deeeet.com Tech lead at Mercari microservices platform team 2 Mercari Meetup for Microservices Platform 7/19 遊びに来てくれ！ https://mercari.connpass.com/event/92168/ 3 tl;dr Mercari Microservices化のために開発したAPI Gatewayについて紹介する． API Gatewayとは何か? API Gatewayの設計思想は? API Gatewayの機能の実装方法は? API Gate
raimon49 2018/07/04
API

GCE

Go

HTTP

ProtocolBuffers

design

pattern

performance

proxy

translation
リンク
なぜPHPはgRPCサーバーがサポートされていないのか？ - 恥知らずのウェブエンジニア -web engineer, shameless
なんかもうアレなので、前回少し触れたのですが、2018/2月現在公式なPHPのgRPCサーバーはサポートされていません。 GoでgRPCサーバー立てて、PHPでリクエストしてみる - 恥知らずのウェブエンジニア -web engineer, shameless 様々な迫害には慣れているPHPerでもそもそもサポートされないというのは辛いものがあります。なぜPHPのgRPCサーバーがサポートされていなのか下記のMLのdiscussionを英語の勉強も兼ねてまとめてみようと思います。 ※素人意訳なので、間違いありましたらごめんなさい。 groups.google.com gRPC Servers in PHP?PHPのgRPCクライアントは作れるけど、gRPCサーバーは作れません。それの技術的ブロッカー、将来的な実装のロードマップはあります？ PHPのgRPCサーバーにはいくつかの問題があ
raimon49 2018/03/14
Apache

FastCGI

PHP

ProtocolBuffers

nginx

support
リンク
今さらProtocol Buffersと、手に馴染む道具の話 - Qiita
Protocol Buffersは別に新しい技術ではない。同時にそれは、未だ知られざる、未だに可能性を秘めた先端のソフトウェア技術基盤である。新しくないのは事実で、GoogleがProtocol Buffersをオープンソース化したのは2008年のことだし、オープンソース化前に社内で使われ出したのは更に昔に遡るだろう。たぶん。デザイン的にもJSON対応は後付けで、将来JSONが隆盛を極めることなんか全然想定していなかったのが透けて見えて古くさい。しかし、同時にどうも情報に聡い人であってもなかなかその真価を実感し得ておらず、ある意味で未知の技術であるらしい。ならば、Protobuf (Protocol Buffersの略)を解説した文書は幾多あれども、それに1を加えるのもやぶさかではない。 Protocol Buffersとは Protobufはスキーマ言語だ!一般的にはProtob
raimon49 2018/02/08
＞スキーマ定義という税金を支払わないとその分のツケはどこかで回ってきて、1時間掛かるE2Eテストがこけるとか、週次変更レビュー合同会議の発足とか、そういうやつで支払うことになる。 / あるある過ぎて分かる…。

JSON

Google

ProtocolBuffers

XML

generator

programming

tag
リンク
GitHub - google/rejoiner: Generates a unified GraphQL schema from gRPC microservices and other Protobuf sources
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session.
raimon49 2018/01/21
Google

GraphQL

Java

ProtocolBuffers

generator
リンク
RPCに特化したGoogleのセキュリティ通信ALTSとは何か - ぼちぼち日記
はじめに昨年、Googleから Google Cloud Platform に関するWhitePaperがいくつか公開されました。その中でGoogleのサービス内部で使われている新しいALTSというプロトコルを説明した文書﹁Application Layer Transport Security﹂は、読んでみると非常に面白く、セキュアなサービス間通信には本当に何が必要なのか、といったことを改めて深く考えさせられるものでした。物理的なマシンからサービス運用まで、ALTSがカバーする範囲は幅広い領域に渡り、あの巨大なGoogleのサービスをよくここまでまとめ上げたものだとホント感心させられます。以前から、Googleはデータセンタ内のサービス通信までも暗号化を進めていると言われていました。それは、2013年にエドワード・スノーデンが暴露した資料が、Googleのデータセンタ内部の通信データ
raimon49 2018/01/16
Google

ProtocolBuffers

Security

encryption

network
リンク
HTTP/2における双方向通信とgRPCとこれから - Qiita
この記事は第2のドワンゴ Advent Calendar 2017 最終日の記事です。はじめにウェブ技術を語る上で欠かすことのできない要素として、HTTPがある。従来のHTTP/1を無くして、ここまでのウェブの発展はなかったといえるだろう。言うまでもなく、HTTP/1が我々人類に齎した功績は大きい。しかしその一方で、その規格のシンプルな原理原則に縛られた結果、要件を達成するために非効率なネットワーク使用を前提とするシステムが量産されるなど、HTTP/1がもたらした技術的負債も存在する。その中の一分野として、双方向通信に着目したときに、HTTP/1からHTTP/2へのアップグレードによってどのような変化がもたらされたか。本稿ではHTTP/2という規格と、それが持つ可能性の一端としてgRPCについての仕組みを紹介し、従来とこれからのWeb開発における双方向通信について述懐する。
raimon49 2017/12/25
HTTP

ProtocolBuffers

binary

study

歴史

あとで読む
リンク
GraphQLはWeb APIの次のフロンティアか？ | POSTD
RESTの規約。URLはリソースであり、CRUDはHTTP動詞にマップされる。 RESTの規約に1つ問題があるとすれば、規約が十分でないということでしょう。上記で”通常”、”多くの場合”、”時に”という表現を使ったのは、これらのやり方は仕様で推奨されているものの守られるとは限らないためです。実世界では、大抵のAPIはRESTishがせいぜいです。例えばStripeでは、リソース更新に PUT ではなく PATCH を使うべきですが、歴史的理由でそうはなっておらず、おそらく現時点では変更に値しないでしょう。いずれにしても開発者はドキュメントを読む必要があり、その時、 POST メソッドのユビキタスな使い方があることに気づくのです。 RESTには他の問題もあります。必要なものだけでなく全てが返ってくるため、リソースのペイロードが非常に大きくなることがあるのです。そして多くの場合、クライアントが
raimon49 2017/06/28
API

Facebook

GitHub

GraphQL

ProtocolBuffers

REST

UX

design
リンク
どのようにして5,000ドルのGoogleマップXSSを発見したか | POSTD
数ヵ月前、私はGoogleマップを、もっと正確に言うとGoogleストリートビューを利用しました。Googleストリートビューは子供の頃に思い描いた未来的なテレポートみたいで、とても気に入っています。私は、普段そうするように、その時もアドレスバーを見ました。2014年のいつ頃からか、パラメータは単なるクエリの文字列ではなくなり、その代わりに感嘆符で区切られた英数字の奇妙な寄せ集めになったようです。難解で、現在のところ公開されたドキュメンテーションもなく、多くの人々に毎日使用され、リバースエンジニアリングが可能なプロトコル。こういうコードを目の前にすると、私は解読したくてウズウズしてきます。私はブラウザのWebコンソールも見てみました。AJAX APIへのリクエストが同じようにエンコードされていただけではなく、もしレスポンスの一部が画像だった場合、その他のレスポンスは暗号を用いたバイナリ
raimon49 2017/05/06
Protobufバイナリハック

Chrome

Google

JavaScript

ProtocolBuffers

Python

XSS

binary

地図
リンク
Rebuild: 169: Your Blog Can Be Generated By Neural Networks (omo)
Hajime Morita さんをゲストに迎えて、達人プログラマーなどについて話しました。 Show Notes Rebuild: Supporter Naoya Ito: "業界の悪習: 新人に10冊も20冊も自分が読んだ本を薦める" 新装版達人プログラマー職人から名匠への道 | Amazon 新装版達人プログラマー職人から名匠への道 | オーム社 eBook Store The Pragmatic Bookshelf Convolutional neural network Rational Unified Process UML 統一モデリング言語 Plantuml レガシーコード改善ガイド Add Code from a Template | Android Studio Protocol Buffers Amazon Athena Sumo Logic Splunk jq
raimon49 2016/12/25
プレーンテキストの限界と構造化テキスト表現の話、DSL作り出してしまう病。すごく面白い。

Agile

JSON

ProtocolBuffers

SQL

book

design

pattern

programming

教育

休日
リンク
HTTP API の設計方向
Twitter の TL に Dropbox が API v2 で REST をやめたという内容がかかれている記事が流れてきた。
raimon49 2016/10/08
JSON over HTTPからProtocol Buffers over HTTP/2へ。ペイロードがJSONでも全部POSTで包む設計は豪気で良いなとは思う。サーバのリクエストログから集計や監視みたいなところが懸念だろうか。

API

HTTP

JSON

ProtocolBuffers

REST
リンク
DMM inside
DMM inside︵ディーエムエムインサイド︶は、DMM.com Groupが運営する公式オウンドメディア︵ブログ︶です。 DMM.com Group の今を、人、プロジェクト、技術という切り口でお伝えします。記事を通して、DMM.com Groupの一番深くておもしろいトコロをぜひ感じてください。
raimon49 2016/02/15
Appleもデータ通信にGoogle製のProtocol Buffers使ってるんだ。不思議な感じだ。

Apple

Geolocation

Google

ProtocolBuffers

Wi-Fi

iPhone
リンク
GitHub - alexeyxo/protobuf-swift: Google ProtocolBuffers for Apple Swift
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
raimon49 2015/10/16
proto3にも対応？

ProtocolBuffers

Swift
リンク
1 2 次のページ