clavierのブックマーク - はてなブックマーク

SREチーム立ち上げ3年目、Embeddedやってみた実践と気づき/the practice of embeddedSRE

Tech Brew in 東京「Embedded SRE 現場に寄り添うアプローチ」（ https://findy.connpass.com/event/323099/ ）での発表資料です。

clavier 2024/07/23

リンク

[動画公開] データ分析を支える技術データモデリング再入門 #devio2022 | DevelopersIO

データアナリティクス事業本部のコンサルティングチームの石川です。クラスメソッド主催のオンラインカンファレンス、Developers.IO 2022にて﹁データ分析を支える技術データモデリング再入門﹂というテーマにてセッション動画と資料を公開いたしました。セッション概要﹁仏作って魂入れず﹂ということわざがありますが、データモデリングせずにDWHという﹁器﹂を導入しただけでは、データ分析は捗りません。データモデリングを考えずに導入したデータ分析基盤は、データマートの乱立、もしくは、データが分かりにくく、分析に手間がかかるため、あまり使われなくなってしまったり、分析に適さないテーブル構造や構成による性能低下、オーバープロビジョニングによるコスト上昇などの問題が考えられます。 DWH︵データウェアハウス︶のデータモデリングとは何か、代表的なDWHのデータモデリング手法の紹介と、長所・短所、

clavier 2024/07/23

リンク

Looker Studioの魅力と便利な使い方を紹介します - yasuhisa's blog

初めて使ったBIツールはLooker Studioのid:syou6162です。これまでTableau / Looker(≠ Looker Studio) / Metabase / Redash / Connected Sheetsなど色々なBIツールを触ってきましたが、不満は色々ありつつも個人的に一番しっくりきて愛着があるのはLooker Studioです。このエントリでは、その魅力と便利な使い方や注意点について書きます。例によって、社内勉強会向けの内容を外向けに公開しているため、内容の網羅性などは特に担保していないことにご注意ください。 Looker Studioの魅力利用のハードルが限りなく低い & Google Workspaceとの連携が便利複雑過ぎることができないので、諦めが付けやすいちゃんとBIツールになっている Looker Studioの便利な使い方多様なデータソ

clavier 2024/07/22

リンク

AWS RDS/Auroraでモニタリング＆チューニングを始めるための資料11選

これはなにども、レバテック開発部のもりたです。もりたはデータベースが好きなんですが、最近は特にAWS RDS/Auroraでのモニタリングとパフォーマンスチューニングについて興味があります。ただ、これらのうちモニタリングは扱っている話題が若干ローレベルであまりピンとこず、またチューニングもどこから手をつければいいのかわかりませんでした。この記事では、もりたがモニタリング＆チューニングを学習する上で役に立った書籍やWeb上の資料をロードマップ形式で紹介していきます。対象読者はDBのモニタリングとチューニングをやりたいけどどこから手をつければいいか分かんないなとなっている人、ゴールはそんな人がモニタリング＆チューニングの第一歩を踏み出せることです。スコープ今回扱うもの、扱わないものは以下の通りです。扱うモニタリング＆チューニングの概要モニタリングの前提知識チューニングの前提知

clavier 2024/07/21

リンク

BigQueryとGemini 1.5 Proによるラーメン店クチコミの定量分析 - G-gen Tech Blog

G-gen の神谷です。本記事では、Google MapsAPI から取得したラーメン店のクチコミデータに対する定量分析手法をご紹介します。従来の BigQuery による感情分析の有用性を踏まえつつ、Gemini 1.5 Pro の導入によって可能となった、より柔軟なデータの構造化や特定タスクの実行方法を解説します。分析の背景と目的可視化イメージ分析の流れとアーキテクチャクチコミデータ取得と BigQuery への保存 API キーの取得データ取得のサンプルコードクチコミ数の制限と緩和策料金感情分析とデータパイプライン Dataform の利点 Dataform を使った感情分析のパイプライン定義例感情分析の結果解釈 ML.GENERATE_TEXT︵Gemini 1.5 Pro︶関数を使用した高度な分析ユースケースに応じた独自の評価観点によるクチコミの定量化

clavier 2024/07/21

リンク

CTOから見た事業開発とプロダクト開発 / My Perspective on Business and Product Development as CTO

DevelopersIO 2024 でお話したスライドです

clavier 2024/07/21

リンク

AWS CloudFormationの最近の変更点 - Qiita

AWS CloudFormationの最近の変更 AWS CloudFormationでは2023年末から2024年6月にかけて多くの改善・機能追加がありました。特に下記は﹁三大変更点﹂と呼んでもいいかなと思います。Gitと同期(Git Sync) (2023/11) IaCジェネレーター (2024/02) オンラインエディタをデザイナーからApplication Clomposerへ変更 (2024/03) また、﹃最近CloudFormationのデプロイが早くなった気がする﹄とか思っている人も多いと思います。下記の変更がアナウンスされています。4スタック作成を高速化 (2024/04) スタックセットでも地道に変更があり、オプションが追加されています。5スタックセットで﹁同時実行モード﹂オプション追加 (2023/11) 他にも変更はありますが、CloudFormati

clavier 2024/07/21

リンク

AWS 上で大規模な GitHub Actions のセルフホステッドランナーを使用する際のベストプラクティス | Amazon Web Services

Amazon Web Services ブログ AWS 上で大規模な GitHub Actions のセルフホステッドランナーを使用する際のベストプラクティス注記: お客様は自身の GitHub ランナーを管理する必要がなくなりました。AWS CodeBuild を使用すると、管理された GitHub Actions セルフホストランナーを利用できるようになり、強力なセキュリティ境界と低い起動レイテンシーを備えた一時的でスケーラブルなランナー環境を提供します。CodeBuild を使えば、独自のインフラストラクチャを維持したり、スケーリングロジックを構築する必要がありません。すべてが CodeBuild によって完全に管理されます。開始するには、単に Webhook を作成して、CodeBuild で GitHub Actions ジョブを自動的にトリガーするだけです。概要GitHu

clavier 2024/07/21

リンク

AWS NAT ゲートウェイを理解した上で起動＆停止 Lambda を用意する - Qiita

実現したいこと既存のAWSのバックエンドシステムにおいて、コスト削減のため開発環境とステージング環境のNATゲートウェイ（NAT Gateway）を夜間と休日の間は停止させるべく、NATゲートウェイを起動・停止させるLambdaを作成します。待て、まだコードを書こうとするな「NATゲートウェイ　自動　停止」とかで検索すると少ないながらもいくつか記事が出てきますが、理解せずにそれをまるまるコピペして実行させるだけではうまくいかないことが多いですし、望まないNAT削除をしてしまう可能性があります。 NATゲートウェイ、ルートテーブル、Elastic IPなどが自分の開発しているシステムではどのように設定されていて、どのリソースを操作すれば良いかをちゃんと理解する必要がありました。こちらは開発していたシステムの構成図を、NATゲートウェイ周りだけを抽出して描いたものです。手描きでごめん

clavier 2024/07/21

リンク

資料公開:「Golangを使ったバックエンドの実装入門」で DevelopersIO 2024に登壇しました #devio2024 | DevelopersIO

ども、もこ(札幌オフィス)です。本日開催のClassmethod Odyssey (DevelopersIO 2024) で登壇いたしましたので、資料とソースコードを公開します。資料ソースコードDEMOでお見せしたコードは下記にて公開しております。 https://github.com/mokocm/go-task-backend 所感 gRPC、なんとなく難易度が高そうなイメージがありますが、Protocol Bufferとの親和性も高く、非常に洗礼されたエコシステムとなっているため、是非これきっかけで興味を持っていただけると幸いです！

clavier 2024/07/21

リンク

containerにおけるSELinuxの役割について - Gekko0114 備忘録

背景本家のruncで実装されているSELinux機能が、Youki (Rustでruncを再実装するOSS︶に実装されていないことがわかった。そこで、SELinux機能をYoukiに導入することになったのだが、SELinux crateが無かったのでRustで再実装することになり、そのプロジェクトにアサインしてもらった。しかし、SELinuxについて何も知らなかったので、SELiuxについて色々と調べたことをまとめた。SELinuxとは何か？ security-enhanced Linuxの略称。MAC制御を行うことができる。通常のセキュリティに加えてSELinuxを設定することで、システムセキュリティを更に強化できる。 Labelとpolicyを組み合わせたセキュリティ制御が特徴である。process・file・networkなどのobject、process・userなどのsu

clavier 2024/07/21

リンク

Docker互換のセキュアなコンテナ実行環境「Podman」超入門

いまやWebアプリの開発やデプロイにおいて、コンテナは欠かせないものになってきました。コンテナ実行環境にも色々ありますが、その中でも支配的なのがDockerでしょう。ですがDockerは、その構造上いくつかの問題も抱えています。今回はDockerと互換性を持ちながらも、よりセキュアに運用できるPo…

clavier 2024/07/21

リンク

心の残業は、やめよう | タイム・コンサルタントの日誌から

夜中に目が覚めて、眠れなくなった。目を閉じても、頭がループしたように、考えるのは同じ事柄とシーンばかり。しばらくしてから、ようやく自分で﹁ああ、また心で残業してしまっている﹂と気づいた。こんな残業を深夜に自分の寝床でしても、誰も手当を払ってくれる訳でもない。やめよう、やめよう。﹁仕事に心をつかってはいけない﹂と、昔、あるベテランのプロジェクト・マネージャーから聞いた事がある。でも、聴いて真意をすぐに理解したとはいえない。仕事は複数の人間が協力して進めるものだし、人に気遣いをするのは、ある意味、大事じゃないか。そうも思った。しかし、この方が言われていたのは、もっと深い話だった。﹁心をつかう﹂とは、じつは気遣いとか心遣いの事ではない。心を浪費する、という意味なのだ。あるいは、わたし達の中にある、感情と思考という大切な脳のリソースを無駄につかってはいけない、というアドバイスだ。仕事の時間が

clavier 2024/07/21

リンク

今さらながらGoogleの「NotebookLM」を触ったら、インターネットサーフィンが普通にそのまま"仕事"になった話

今さらながらGoogleの「NotebookLM」を触ったら、インターネットサーフィンが普通にそのまま"仕事"になった話 6月頭くらい？　にGoogleがリリースして話題になっていた、自分専用のRAGが簡単に組めるLLMツール「NotebookLM」ですが、そのうち触ろうと思いつつも、「またRAGか」「どうせRAGでしょ？　知ってます」みたいな気持ちでいたら腰が重くなってしまい、いつのまにか一ヶ月くらい経ってしまっていました。そして今日、たまたまちょっと時間が空いたので触ってみたんですが、想像していたよりもずっと楽しくてすごかったので書き残したく思った次第です。ちなみにこれ↓ NotebookLMってファイルとかURLとかかなりの量放り込めて、放り込まれただけ参照できる(しかもかなり精度高い)っていうツールなんですが、これの何がすごいというと、インターネットサーフィンをしながらおもしろい

clavier 2024/07/21

リンク

「名前だけは格好いい十字軍」世界史というよりヤンキー漫画みたいで、敵対勢力との関係をしめした勢力図がわかりやすい「ぴよぴ〜よ速報」さんが出した本「小学生でもわかる世界史」

吉村英崇🎂8/28が誕生日と覚えなくて良いのよ_(: 3 ﹂∠ )_ @Count_Down_000 #吉村おいちゃんが今日読んだ本　744 小学生でもわかる世界史注意点 ●世界史というより﹃特攻の拓﹄﹃湘南純愛組！﹄というヤンキー漫画 ●よってヤンキー漫画でよくある﹃？？﹄みたいな頭が悪い展開が多い ●ぶっちゃけ、いい加減だぜ！と書いてる。が、面白い amzn.to/3S3hrAC 吉村英崇🎂8/28が誕生日と覚えなくて良いのよ_(: 3 ﹂∠ )_ @Count_Down_000 ヤンキー漫画を読むみたいにスルスルよめるのがこの本の特徴ですね歴史の勉強って難しそうだな…という抵抗感を減らすのにこの本は立つと思いますｗまたヤンキー漫画と同じなので、敵対勢力との関係をしめした勢力図がわかりやすく、そこは世界史の漫画より良さげ x.com/mount_gori/sta…

clavier 2024/07/13

リンク

「Lambdaレス」なサーバーレスについての考察

2024/7/13(土)に開催された「JAWS-UG Okayama 2024」の懇親会LTにおける私の発表「『Lambdaレス』なサーバーレスについての考察」の発表資料になります。 https://jaws-ug-okayama.doorkeeper.jp/events/171535 #j…

clavier 2024/07/13

リンク

Go言語での実践を通じてクリーンアーキテクチャの理念と実装を学べる解説書が発売／『Go言語で構築するクリーンアーキテクチャ設計』【Book Watch/ニュース】

clavier 2024/07/13

リンク

Fluent Bit の低レイヤーに飛び込んでみて、わかったこと

こんにちは！シェルフィー株式会社で SRE を担当している石田です。弊社では、本番のワークロードにて Fluent Bit を使っております。今回、Fluent Bitの処理について理解を深めたので記事を書いてみました。世界中で使われているとても有名なミドルウェアなので、参考になればとても嬉しいです。はじめに弊社では、ECS on Fargate で稼働しているバッチジョブのログをサイドカーコンテナ︵Fluent Bit︶を使い Datadog に連携しています。ログのサイズが 16 KB 以上ある場合、shim-logger の仕様により、そのログは分割されてしまうため、 Fluent Bitにて分割されたログの再結合処理を行う必要性があります。この点についてはDeNAさんの記事がわかりやすいので、詳細はそちらを参考にしてもらえたらと思います。 AWS ECS on Fa

clavier 2024/07/13

リンク

セキュアなAWS環境の設計についての解説【2024年版】 - サーバーワークスエンジニアブログ

こんにちは！イーゴリです。 AWS にとって、クラウドのセキュリティは最優先事項です。(AWS公式ページ) AWS環境のセキュリティ対策としてAWSサービスを解説するよりも、まずはAWS環境の最適な設計について考える必要があります。AWS Well-Architected Frameworkを考慮しながらの設計を推奨します。AWS Well-Architected Frameworkを全部詳しく読むことをおすすめしますが、この記事では個人的に一番重要だと思う点について記載します。とてもざっくり説明しますと、AWS Well-Architected Frameworkとは、クラウドシステムの最適な設計方法を提供するAWSのガイドラインで、6つの柱があります。この記事では基本的に﹁セキュリティ﹂の柱を技術的観点から見てみたいと思います。 AWS Well-Architected Framew

clavier 2024/07/13

リンク

小さなデプロイで大きな成果！ Next.jsで実現するマイクロフロントエンド

はじめにこんにちは、令和トラベルでフロントエンドエンジニアをしているyamatsumです。ここでは複雑なWebアプリケーションを開発・保守する場合に有効なアーキテクチャパターンとして知られているマイクロフロントエンドをNext.jsを用いて実現した時の設計とその課題について紹介したいと思います。 ※ この記事は令和トラベルのTechLT会で共有した内容を記事にしたものです。社外の方にもご参加いただけるTechLT会は connpass にて告知しています。マイクロフロントエンドとはマイクロフロントエンドは、複雑なウェブアプリケーションを小さな独立したWebアプリやモジュールに分割するアーキテクチャパターンです。各Webアプリは異なるチームによって開発・保守することができ、一般に技術スタックやフレームワークの選択も自由です。このWebアプリ群を組み合わせることで、以下のような利

clavier 2024/07/13

リンク

はてなブックマーク

タグ

clavierのブックマーク (57,241)

お知らせ

今週のはてなブックマーク数ランキング（2024年7月第3週）

今週のはてなブックマーク数ランキング（2024年7月第2週）

はてなブックマーク透明性レポート（2024年 2月-2024年4月）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス