yassan0627のブックマーク - はてなブックマーク

What is the difference between docker and containerd about logging?

Kubernetes 1.20 から Runtime としての Docker が非推奨となるが、containerd に変更した場合のロギング周りの違いについて紹介 3-shake SRE Tech Talk #2 での発表資料 https://3-shake.connpass.com/event/214041/

yassan0627 2024/01/26

docker
k8s

リンク

【資料公開】ベロシティ Deep Dive

みなさんこんにちは。@ryuzeeです。 2024年1月10日〜12日開催のRegional Scrum Gathering Tokyo 2024の登壇資料を公開します。﹁ベロシティ Deep Dive﹂ということで過去のDeep Diveシリーズの続きになっています。過去のDeep Diveシリーズはこちらからご覧ください。プロダクトバックログ Deep Dive スプリントプランニング Deep Dive スプリントレビュー Deep Dive セッション資料は以下になります。結論から言うと、﹁ベロシティなんかにDeep Diveせず、もっと重要なところに集中しろ﹂です。スクラムチームの状況を何らかの数値で表したいという考え自体は尊重しますし、それが役に立つこともあります。ただし、数字遊びをしたところでプロダクトの価値を生み出せるわけではないので、ほどほどにしましょう。ス

yassan0627 2024/01/24

リンク

ソフトウェアに関わる人が知っておくといいかもしれない法則10個

「チームトポロジー」や「エンジニアリングマネージャーのしごと」「スクラム実践者が知るべき97のこと」の著者や翻訳者などで知られる吉羽龍太郎氏が、「ソフトウェアに関わる人が知っておくといいかもしれない法則10個（勝手セレクション）」という興味深いポストをX（旧Twitter）で公開しています。ソフトウェアに関わる人が知っておくといいかもしれない法則10個（勝手セレクション）コンウェイの法則パレートの法則グッドハートの法則パーキンソンの法則ブルックスの法則リトルの法則ピーターの法則ハインリッヒの法則ピーク・エンドの法則ホフスタッターの法則 — Ryutaro YOSHIBA (@ryuzee) January 23, 2024 これらの法則の多くは経験則だったりもしますが、いずれにせよ知っておくと上司の説得に役立ったり、ソフトウェアの開発現場でチームの運営に役立ったり、物

yassan0627 2024/01/24

リンク

1Passwordを使って、ローカルにファイル(~/.configや.env)として置かれてる生のパスワードなどを削除した

1Passwordを使って、ローカルにファイル(~/.configや.env)として置かれてる生のパスワードなどを削除した最近、コミットはされないがローカルのディレクトリに置かれている.envのようなファイルから生のパスワードやAPI Tokenを削除しました。これは、ローカルでマルウェアを実行した場合に、ローカルに置かれている生のパスワードやAPI Tokenを盗まれる可能性があるためです。最近は、npm install時のpostinstallでのデータを盗むようなマルウェアを仕込んだりするソフトウェアサプライチェーン攻撃が多様化しています。 Compromised PyTorch-nightly dependency chain between December 25th and December 30th, 2022. | PyTorch What’s Really Goin

yassan0627 2024/01/24

リンク

Netflix、MaestroとApache Icebergを使ったインクリメンタル処理ソリューションを構築

垂直スケーラビリティと効果的なテストによる金融取引システムのパフォーマンスと効率の最大化 Peter Lawrey氏はJavaチャンピオンであり、Chronicle SoftwareのCEOとして、開発者を鼓舞してソリューションのクラフトマンシップを高めることに情熱を注いでいる。経験豊富なソフトウェアエンジニアとして、Lawrey氏はソフトウェア開発プロセスにおけるシンプルさ、パフォーマンス、創造性、革新性を奨励することに努めている。

yassan0627 2024/01/24

リンク

PostgreSQLの仕組みから学ぶために必要な資料 - そーだいなるらくがき帳

質問されることが多いのでPostgreSQL初学者が運用を行うためにしっておく知識に必要な内容をまとめる。PostgreSQLの基本的なアーキテクチャPostgreSQLのアーキテクチャを知らないと自分がやっている作業が危険な作業かどうかわからないし、パラメータの意味もわからない。そこで以下のリンクを読むと良い。富士通が後述の資料を参考にまとめたのだろうなと思われる記事。非常によくまとまっているのでわかりやすい。 www.fujitsu.com もっと細かく知りたいならPostgreSQL Internalsがおすすめ。富士通の資料と重複するところがあるがこっちが本家。 Githubで管理されているので誤字脱字などあったら気軽にPRを出してほしい。 www.postgresqlinternals.org PostgreSQL Internalsが少し古いので最新事情で知りたい場

yassan0627 2024/01/19

PostgreSQL

リンク

https://googlecloudcheatsheet.withgoogle.com/architecture

yassan0627 2024/01/17

システム構成図作成ツール

gcp

リンク

OpenTelemetry best practices: A user's guide to getting started with OpenTelemetry | Grafana Labs

yassan0627 2024/01/17

リンク

AWS側の目線から理解する、Google Cloud ロードバランサの世界 - How elegant the tech world is...!

はじめにお久しぶりです、iselegantです。今回はAWSアーキテクトの目線から、多様なGoogle Cloud Load Balancingの世界を紹介してみたいと思います。昨今、担当業務やプロジェクトによってはAWSのみならずGoogle Cloudを活用したり、マルチクラウドとして両方扱うエンジニアの方も多くなってきたのではないでしょうか？特に、SI企業に所属する人においては、担当プロジェクトや業務、お客様が変われば利用するクラウドサービスも変わる、なんてこともよくあると思います。私もその道を辿ってきた一人です。現在ではクラウドサービス間においてもある程度のコモディティ化が進んでおり、ある一つのクラウドサービスに精通すると、他のクラウドサービス利用時におけるメンタルモデルが出来上がり、システムを構築する際に前提の知識や経験が大いに役立つはずです。特にAWSはサービスの幅

yassan0627 2024/01/15

リンク

Incremental Processing using Netflix Maestro and Apache Iceberg

by Jun He, Yingyi Zhang, and Pawan Dixit Incremental processing is an approach to process new or changed data in workflows. The key advantage is that it only incrementally processes data that are newly added or updated to a dataset, instead of re-processing the complete dataset. This not only reduces the cost of compute resources but also reduces the execution time in a significant manner. When wo

yassan0627 2024/01/11

リンク

SlidesGala

yassan0627 2024/01/11

Googleスライドのテーマ

スライド

リンク

The good, the bad and the ugly of templating YAML in Kubernetes

yassan0627 2024/01/11

リンク

The Case for Kubernetes Resource Limits: Predictability vs. Efficiency

Author: Milan Plžík (Grafana Labs) There’s been quite a lot of posts suggesting that not using Kubernetes resource limits might be a fairly useful thing (for example, For the Love of God, Stop Using CPU Limits on Kubernetes or Kubernetes: Make your services faster by removing CPU limits ). The points made there are totally valid – it doesn’t make much sense to pay for compute power that will not b

yassan0627 2024/01/11

リンク

Computing Delta Lake State Quickly with Checkpoint Files

yassan0627 2024/01/10

リンク

https://www.uber.com/en-CA/blog/fast-copy-on-write-within-apache-parquet/

yassan0627 2024/01/09

リンク

[Ansible / AAP / AWX] EEのコンテナイメージ作成にAnsible Builderは必ずしも必要ないかを確認してみた (小ネタ) - zaki work log

AAPやAWXでジョブ実行に必要なExecution Environments(EE)を作るために通常はAnsibleBuilderを使ってコンテナイメージをビルドするが、要件を満たせばDockerfileを直接書いて自前でビルドしても動くのでは…と思ったので確認してみた。結論としては、以下が入っていれば最低限動作した。 Ansible Core プラス必要なAnsible Collection Ansible Runner SSHクライアント sshpass (パスワード認証の場合) AnsibleBuilderではRHEL系コンテナしか使えない(夏にv3対応したときにいろいろ試したがRHEL系以外はダメだった)が、お試しでDebian系…もいいかと思ったけど、せっかくなのでAnsible利用時にあまり使われず(個人の感想)、イメージサイズがより小さいAlpine Linuxでビル