[B! golang] ttakezawaのブックマーク

Go, Containers, and the Linux Scheduler

Like many Go developers my applications are usually deployed in containers. When running in container orchestrators it’s important to set CPU limits to ensure that the container doesn’t consume all the CPU on the host. However, the Go runtime is not aware of the CPU limits set on the container and will happily use all the CPU available. This has bitten me in the past, leading to high latency, in t

ttakezawa 2023/11/20

GoのランタイムはコンテナのCPU制限を認識してなくてホストのCPU数を使って動いてしまう。 https://github.com/uber-go/automaxprocs にGOMAXPROCSを設定してもらえば、GC、STWが短くなる。っていう話

リンク

スケジューラから学ぶGoランタイム〜code reading of runtime pkg〜

21/11/13 Go Conference 2021 Autumnにて発表 https://gocon.jp/2021autumn/ https://gocon.connpass.com/event/213865/

ttakezawa 2021/11/14

golang

リンク

Goでの並行処理を徹底解剖！

並行処理をうまく使うのは難易度が高めです。それゆえに、go文とチャネルについて基本的な文法書で知った後﹁並行処理ちゃんとできる！﹂の段階まで自力でたどり着くのは大変でしょう。この本は、 *﹁並行処理ってやって何が嬉しいの？﹂ *﹁ゴールーチンとかチャネルとかって一体何者？﹂ *﹁ゴールーチンやチャネルを使ったうまいコードの書き方が知りたい！﹂ *﹁Goランタイムで並行処理をどううまく処理しているか知りたい！﹂といった要望にお答えする、﹁Goでの並行処理﹂に関連した事柄について網羅的・徹底的に書きまくったものです。

ttakezawa 2021/06/19

リンク

GoのGCを10分で学ぼう　 - Qiita

はじめに GoのGC(Garbage Collection)を調べる中で学んだことをなるべく分かりやすく簡潔にまとめたものです。GCのアルゴリズムやメモリ割り当てについてまとめています。記事内で使われている﹁オブジェクト﹂という用語はGoにおいては適切でないかもしれませんが、説明のしやすさから使用しています。概要を把握しやすいように単純化しているため細部は正確でない部分があります。GC基本用語集前提となる用語です。ルートルートとは、オブジェクトが到達可能か︵生存しているか︶を判定するための始点です。プログラミング言語にもよりますが、基本的にメモリのスタック領域がルートになります。フラグメンテーションフラグメンテーションとは、使用可能なメモリが断片化し途切れ途切れになっている状態です。フラグメンテーションになってしまうと、総量的にはメモリが空いていてもアプリケーション

ttakezawa 2019/12/16

golang

リンク

Getting to Go: The Journey of Go's Garbage Collector - The Go Programming Language

Tips for writing clear, performant, and idiomatic Go code

ttakezawa 2019/10/29

リンク

Introduction · Go-SCP

Introduction Go Language - Web Application Secure Coding Practices is a guide written for anyone who is using the Go Programming Language and aims to use it for web development. This book is collaborative effort of Checkmarx Security Research Team and it follows the OWASP Secure Coding Practices - Quick Reference Guide v2 (stable) release. The main goal of this book is to help developers avoid com

ttakezawa 2019/08/06

リンク

Goptunaを使ったGo言語におけるベイズ最適化の活用 | Research Blog

はじめに形状のわからない関数(ブラックボックス関数)の最大値あるいは最小値を求める手法として、ベイズ最適化が広く利用されています。機械学習モデルのハイパーパラメーター最適化を中心に活用が進んでいますが、入力とそれに対する評価値さえ設計できればあらゆる問題に適用できます。例えばFacebookでは、MLモデルのチューニングはもちろん、映像コーデックのエンコードパラメーター1、AR/VRハードウェア設計、HHVM JITコンパイラのパラメーターチューニングにベイズ最適化を適用するため BoTorch やAxの開発を進めています (F8 2019の発表 Product Optimization with Adaptive Experimentation を参照)。弊社では多くのサーバーシステムでGo言語が採用されていますが、サーバーのgoroutine数やキャッシュシステムのメモリーバ

ttakezawa 2019/07/29

リンク

堅牢なTCPサーバを作るために - katsubushiの知見から/kamakura.go#5

kamakura.go #5

ttakezawa 2019/06/23

リンク

Go Proverbs

Proverbs from @rob_pike's inspiring talk at Gopherfest SV 2015 (video). The Gopher character is based on the Go mascot designed by Renée French and copyrighted under the Creative Commons Attribution 3.0 license. These proverbs are the basis of a talk by Rob Pike and the list may be updated when he next gives the talk. Please read the contribution guidelines before opening an issue to nominate a ne

ttakezawa 2019/06/18

golang

リンク

GoのLanguage Specificationの特定の仕様に関わる処理系の実装を探す #golang - My External Storage

Goの仕様はこのHTML1ページにまとまっている。 The Go Programming Language Specification https://golang.org/ref/spec 仕様に書いてある処理はどうやって実装されているのか調べたかった。 Goの仕様の1文からその仕様に関係する処理系のコードを探す方法をメモしておく。 TL;DR GoのLanguage Specificationに書いてある仕様の処理系の実装を探す https://golang.org/ref/spec GoのLanguage SpecificationのHTMLはGoリポジトリのdocディレクトリに入っている https://go.googlesource.com/go Language Specificationのコミットログから仕様の追加日を知るgit log -L 2569,2579:./doc

ttakezawa 2019/06/13

golang

リンク

crawshaw - 2019-04-28

Go 1.13: xerrors 2019-04-28 Part of the Go 2 series of language changes is a new error inspection proposal. The error inspection proposal adds several features to errors that have been tried elsewhere (in packages such as github.com/pkg/errors), with some new implementation tricks. The proposal has been implemented in tip as preperation for Go 1.13. You can try it out today by working with Go from

ttakezawa 2019/05/04

golang

リンク

ErrorValueFAQ

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

ttakezawa 2019/05/04

golang

リンク

最近のGo Modulesプラクティス ~ ghqユーザーの場合も添えて | おそらくはそれさえも平凡な日々

最近Go Modulesを使っていて、だいたいプラクティスが定まってきたのでまとめてみる。個人的な結論 GoModulesは積極的に使っていけばいい幾つか課題はある $GOPATH から出る必要もない $GO111MODULE を適宜設定すればよいどうせ次のGo 1.13からはどこに置こうが関係なくなる2つのモード $GOPATH/src にプロジェクトを置いていると、今(Go 1.12)の標準動作はGOPATHモードになる。これは、$GOPATH/src 以下からサードパーティパッケージを読み込むこれまでのGoと同様の動作になるということ。それ以外の場所では gomod コマンドを使ってGo Modulesを利用することができる。これをmodule-awareモードという。go.mod と go.sum を使って依存ライブラリを管理する方式になる。これらのファイルはgom

ttakezawa 2019/04/03

golang

リンク

Practical Go: Real world advice for writing maintainable Go programs

This is a workshop style presentation, I’m going to dispense with the usual slide deck and we’ll work directly from the document which you can take away with you today.

ttakezawa 2019/03/26

リンク

Compiler Explorer

Add new...Clone CompilerExecutor From ThisOptimizationStack UsagePreprocessorASTLLVM IROpt PipelineDeviceRust MIRRust HIRRust Macro ExpansionGHC CoreGHC STGGHC CmmGCC Tree/RTLGNAT Debug TreeGNAT Debug Expanded CodeControl Flow Graph

ttakezawa 2019/02/17

リンク

Goでスタックトレースを構造化して取り扱う - freee Developers Blog

はじめましてfreee株式会社でソフトウェアエンジニアをしているbudougumi0617ことしみっちょです。普段はGoによるアカウントアグリゲーション機能︵銀行同期基盤︶の開発に携わっています。この記事はfreee Developers Advent Calendar 2018 の23日目の記事です。12月23日と言えば国民の祝日、Perfumeかしゆかさんの誕生日ですね。おめでとうございます。今回は私が先日参加したPerfume 7th Tour 2018 ﹁FUTURE POP﹂の感想を書こうと思ったのですが、ツアーが終わるまでネタバレは禁止なのでGoの話をすることにしました。この記事では私が携わっているプロダクトで行なっているエラーハンドリングの一部とGoでスタックトレースを構造化に扱う方法について紹介します。なお、文中で利用しているソースコードや出力結果は以下のサンプル

ttakezawa 2018/12/26

golang

リンク

Goによる静的解析入門 - BASEプロダクトチームブログ

この記事は﹁BASE Advent Calendar 2018﹂24日目の記事です。 devblog.thebase.in はじめに BASEでエンジニアとしてインターンをしている池田です。今日はクリスマスイブということで、以前から気になっていたグリューワイン︵ドイツのクリスマスに欠かせないホットワイン︶をクリスマスマーケットに飲みに来ています。普段はBASE BANKというBASEの100%子会社にて金融事業の立ち上げを行っています。BASE BANKのプロダクトのAPIはGoを使って書かれているのですが、BASEでのGoの使用はこのプロジェクトが初だったので、開発基盤整備の一貫で様々なlinterの導入を行いました。その際にlinterの内部がどうなっているかに興味を持ち、すごく簡単なlinterの仕組みを実際に作ってみたので、今回はその知見をお話しします。 Goと静的解析 Goには

ttakezawa 2018/12/24

golang

リンク

Golangでログを吐くコツ — KaoriYa

この記事は GoAdvent Calendar 2018 の16日目の記事です。 Golangでプログラムを書く時にログを吐くの、どうしてますか?本記事ではログを吐く際のコツというか気にして欲しい事項と、なぜそうなるのかを解説していきます。一概に﹁ログを吐く﹂と言っても、ライブラリからログを吐く場合とアプリケーションから吐く場合では相当に事情が異なります。 TL;DR ライブラリ(パッケージ)を書く時は… まずログを吐かないことを検討しましょう。 errorで返してライブラリのユーザーにログへ吐かせるかどうかを選ばせましょう。 *log.Logger を使いましょう。デフォルトは log.Printf に対して吐き(またはそれと同等のログを吐く)、ライブラリユーザーの設定で任意の *log.Logger に切り替えられるようにしましょう。自前の Logger インターフ

ttakezawa 2018/12/16

golang
log

リンク

Goで書くClean Architecture API - Qiita

Enterprise Business Rules ビジネスルールの為のデータ構造を持ったオブジェクト。データの実態を表す場所。 Application Business Rules ビジネスルールを操作する場所。つまりこのアプリケーションで何ができるかを実践します。Interface Adapter 外部からの入力、データの永続化、表示を担当する場所 Frameworks & Drivers Webフレームワーク、DB操作の実際に担うソース、フロントエンドのUIなどがここに所属しています。外側のレイヤーの要素を直接参照してはならない上記の図におけるこの矢印は依存を表しており、内側のレイヤーから外側のレイヤーの要素への依存を禁じます。ここでいう依存とは要素(構造体、変数など)への直接参照をさせないということです。では外側のレイヤー要素を参照せざる得ないは、どうするのでしょ