[B! 技術] harumaki_netのブックマーク

データ基盤を支える技術

主にクラウドの話してます - 広島での登壇資料です。 https://omoni-cloud.connpass.com/event/315682/

harumaki_net 2024/05/11

リンク

はじめにあなたはブラウザからデータベース(DB)に情報が行き着くまでにどんな技術が使われているか説明できますでしょうか？どのようなプロトコルが用いられ、どの技術を駆使してサーバと通信しているのか、Webサーバでは何が行われ、どのようにして負荷が分散されているのか、トランザクションはどのように管理されているのか、そしてデータベースではシャーディングや負荷対策のためにどのような対策が取られているのか… なんとなくは理解しているものの、私は自信を持って﹁こうなっている！！﹂とは説明ができません。そこで今回は﹁大規模サービス﹂を題材としてブラウザからデータベースに至るまでの、情報の流れとその背後にある技術について、明確かつ分かりやすく解説していきたいと思います。対象としてはこれからエンジニアとして働き出す、WEB、バックエンド、サーバーサイド、インフラ、SREを対象としております。 1.

harumaki_net 2024/04/03

リンク

エンジニアのためのSRE論文への招待 - SRE NEXT 2023 - ゆううきブログ

この記事では、2023年9月29日に開催されたSRE NEXT 2023 IN TOKYOでの講演の概要に加えて、講演では触れられなかった部分の補足と、発表を終えての後記、最後にSRE NEXT全体の感想を書きました。 SRE NEXT 2020の基調講演に招いていただいたところから始まり、昨年のSRE NEXT 2022の公募セッションでも発表し、今回で3回目の発表になりました。今回の講演は、SRE NEXTの﹁NEXT﹂と価値観の一つである﹁Diversity﹂を踏まえて、自身のエンジニアと研究者の両方の経験を活かして、SREを深く実践する上で、技術論文を探して読むアプローチを提示するものです。昨今の国内のSREコミュニティでは組織的実践に主な関心が移っている状況と対比させて、コンピュータサイエンスに基づく技術的挑戦の可能性を示唆する意欲的な講演を目指したつもりです。この講演での主要

harumaki_net 2023/10/03

リンク

「推測するな、計測せよ」という訳はミスリードと言う話 - aki33524’s blog

パフォーマンス改善の文脈で良く用いられるフレーズとして、「推測するな、計測せよ」というものがある。これはRob PikeのNotes on Programming in Cからの引用なのだが、原典と少し印象が違う。 Rule 1. You can’t tell where a program is going to spend its time. Bottlenecks occur in surprising places, so don’t try to second guess and put in a speed hack until you’ve proven that’s where the bottleneck is. Rule 2. Measure. Don’t tune for speed until you’ve measured, and even then don’t

harumaki_net 2023/08/26

リンク

文化祭で某チェーン店を再現して失敗した話 - Qiita

要約 Wifiは無いに等しいと考えること。 (来場者1万強/日なんていう状況下でWifiが動くと想定するのが駄目でした) 進捗管理する第三者を設けること。ソースコード https://github.com/Na4Yu/EasyEats (RTDBのURLやSquareの個別キーは抜いているのでそのままは使えないです) はじめましてはじめまして、高校2年のNaYuです。今回は文化祭で派手に失敗した話をさせて頂きます。血反吐を垂れ流しながら書いていましたが、もし皆さんが文化祭を経て﹁この人のしたことをしなくて良かった~﹂なんて言っていただければ幸いです。(人の不幸は蜜の味) お願い本記事は知見の共有を目的として個人が執筆したものであり、本記事の内容について学校、学校関係者への問い合わせはご遠慮頂けるようお願い申し上げます。これを読んでいる後輩の方々へこの記事が私からの引き継ぎに

harumaki_net 2023/08/12

素晴らしい。すごいを通り越して、感嘆と称賛しかない。

リンク

株式会社リクルート　エンジニアコース新人研修の内容を公開します！（2023年度版）

こんにちは！ 2023年度エンジニア新卒の、吉田です。株式会社リクルート新卒エンジニアコースでは、部署への配属前に、BootCampと呼ばれる新人研修を行っています。本日は2023年度の研修の内容を、実際に受講した新卒の立場から紹介させていただきます。研修の内容については毎年反響をいただいていますが、今年度も一段と進化し、より充実した研修でした。ページ下部に研修資料を公開していますので、ぜひ研修の雰囲気を感じ取っていただけると嬉しいです。研修の概要エンジニアコースの新人研修は、配属後にスピード感を持って成長できるようになることを見据え、﹁さまざまな技術領域の講座を受け、興味関心を広げて、知らなかった好奇心に出会う﹂﹁現場で求められる﹃仕事への取り組みスタンス﹄をつかむ﹂﹁気軽に相談できる仲間︵同期︶をつくる﹂の3点が目的とされています。今年度は、入社前に行われたスキ

harumaki_net 2023/08/11

リンク

ゲームの“自動生成”技術がすごいことになっている (1/4)

いま生成AIが話題になっていますが、AI 技術の一つである﹁プロシージャル生成﹂の考えも重要です。プロシージャルというのは数式や関数にもとづき3Dコンテンツを生成する手法で、﹁手続き型﹂とも言われます。自動的にデータを作り出すという側面から、生成AIとプロシージャル生成は混同されることがありますが、実はまったく違う背景を持つ技術です。Epic Gamesが新たにゲームエンジン﹁Unreal Engine 5.2﹂に搭載したプロシージャルコンテンツ生成機能︵PCG︶は驚くべきものでした。3月のGDCで発表されていたデモマップ﹁Electric Dream﹂が6月21日に公開されています。今回はこのデモマップを使って技術を紹介しながら、生成AIとの違いを見ていきます。お待たせしました！ Electric Dreams 環境サンプルプロジェクトを無料公開しました！#UnrealEngine 5

harumaki_net 2023/07/11

リンク

コンテナセキュリティ

「コンテナセキュリティ - Forkwell Library#26」の資料です。 https://forkwell.connpass.com/event/287259/

harumaki_net 2023/07/06

リンク

Goでゼロから作る自作TCP/IPプロトコルサーバー

﹁マスタリングTCP/IP を読んだけど理解がイマイチ進まない。Goがどのようにサーバーを立てているのか気になる。﹂そんなスキマを埋めるための本です。 Goの標準パッケージである net package を一切利用せずに、自作TCP/IPプロトコルでサーバーを作ります。パケットをどのようにやり取りするかハンズオン形式で解説し、最後にToDoリストAPIを実装します。

harumaki_net 2023/07/02

リンク

当社社員が翻訳協力した「ChatGPTのセキュリティへの影響」が公開されました | NTTデータ先端技術株式会社

一般社団法人　日本クラウドセキュリティアライアンス︵以下‥CSAジャパン︶にて、﹁ChatGPTのセキュリティへの影響﹂が公開されました。 CSAジャパンは、Cloud Security Alliance︵以下‥CSA︶の日本法人で、日本のクラウドセキュリティの向上を目的とし、クラウドのセキュリティに関する啓発・情報発信等の活動を行う任意団体です。﹁ChatGPTのセキュリティへの影響﹂は、CSAが公開している﹁Security Implications of ChatGPT﹂の日本語訳で、ChatGPTのような大規模な言語モデルがサイバーセキュリティ産業の未来をどのように形作るかを包括的に理解することを目的としています。原本である﹁Security Implications of ChatGPT﹂の日本語化において、当社サイバーセキュリティ事業本部石井英男が、翻訳メンバーの一員と

harumaki_net 2023/06/25

リンク

超おもしろい古典制御の歴史。制御工学誕生のドラマとは！？

紀元前‥水時計太古のフィードバック制御システムとして有名なのが、紀元前3世紀のギリシャで用いられていた水時計です。水時計は次のような機構で水を溜め、溜まった水の量で時間を計る装置です。水が溜まるスピードを一定にするためには、1段目のタンクの水位を一定に保つ必要がありました。そのため三角錐型の﹁浮き﹂によって、下図のような機構で水の量が調整されていました。この水時計、17世紀に振り子時計が登場するまでは、この世で最も精度のよい時計だったそうです。意外とすごいですね。 1788年‥ワットの遠心調速機時は飛んで18世紀のイギリス。ここで制御工学の原点と言える装置が実用化されます。蒸気機関です。蒸気機関は人類が初めて手にした原動機であり、産業革命をもたらしました。この蒸気機関の発展に多大な貢献をしたのが、ワット︵Watt︶です。蒸気機関を産業利用するためには、生み出される回転の速度を一定に

harumaki_net 2023/06/05

リンク

令和05年最新版　日本の半導体産業の現状について

台風で仕事が休みになりそうなので暇つぶしに。3年くらい前に日本の半導体産業の近況をまとめたのですが、ここ数年で政治家の先生たちが何かに目覚めたらしく状況が大きく変わりつつあるので各社の状況をアップデート。前回の記事 https://anond.hatelabo.jp/20200813115920 先端ロジック半導体■ JASM (TSMC日本法人) 熊本工場‥28nm, 22nm (工場稼働時) / 16nm, 12nm (将来計画) 日本政府の補助金とソニー・デンソーの出資という離れ業により、業界人が誰も信じていなかったTSMCの工場進出が実現した。現在は建屋の建設が進んでおり、順調にいけば2024年内には量産開始となる。生産が予定されているプロセスはいずれも世界最先端に比べると古いものだが日本では最先端であり、HKMG(ハイケーメタルゲート、トランジスタの性能を上げる技術)やFin

harumaki_net 2023/06/02

リンク

Docker一強の終焉にあたり、押さえるべきContainer事情

章立てはじめに Docker・Container型仮想化とは Docker一強時代終焉の兆し Container技術関連史様々なContainer Runtime おわりに 1. はじめに Containerを使うならDocker、という常識が崩れつつある。軽量な仮想環境であるContainerは、開発からリリース後もすでに欠かせないツールであるため、エンジニアは避けて通れない。Container実行ツール︵Container Runtime︶として挙げられるのがほぼDocker一択であり、それで十分と思われていたのだが、Dockerの脆弱性や消費リソースなどの問題、Kubernetes︵K8s︶の登場による影響、containerdやcri-o等の他のContainer Runtimeの登場により状況が劇的に変化している。本記事では、これからContainerを利用したい人や再度情報

harumaki_net 2023/04/03

リンク

｢石油を掘らなくても車は走る｣ゴミ資源を半永久的に循環させる､世界が注目する日本の"すごい技術" ｢地上資源｣のリサイクル徹底で､地下資源を採掘しなくてもいい日が来る

地球環境問題待ったなし﹁地球温暖化が進まないようにしましょう﹂﹁海洋プラスティックゴミを無くしましょう﹂﹁より良い地球を子どもたちや孫たちに残しましょう﹂ここ10年くらい、多くの人々から、このような言葉を頻繁に聞くようになりました。また社会全体としても﹁ESG経営﹂に取り組む企業が増えました。 SDGs︵Sustainable Development Goals‥持続可能な開発目標︶が掲げる17のゴールの中には、地球環境問題への取り組みがあり、ESG経営の﹁E﹂は、Environment︵環境︶を意味しています。環境に対する私たちの関心は、かつてないほど高まっているといえるでしょう。それは、とても良いことだと思います。環境汚染に伴う地球温暖化現象がこのまま深刻化すれば、地球上の生態系に悪影響が及び、私たち人類ばかりではなく、あらゆる生物の命を脅かします。地球上の生命が未来永劫え

harumaki_net 2023/03/13

リンク

“排水から電気を作る”って？ | NHK | ビジネス特集

その会社は松山市にある水処理メーカー『愛研化工機』です。創業は1982年。従業員10人余りの中小企業で、工場から出た排水を処理する装置の開発を行っています。今注目されているのが「ネット・ゼロ・エネルギー型排水処理システム」という最新装置です。排水の処理には大量の電力が必要となりますが、この装置は汚れた水をきれいにするだけでなく、処理過程でエネルギーを生み出し発電するといいます。捨てられていた排水から電気を作ることができるこの装置で会社は特許を取得し、ことし1月に発表された「ものづくり日本大賞」で優秀賞を受賞しました。

harumaki_net 2023/02/08

リンク

【第1回・前編】エンジニア和田卓人の今を形作る技術 | GeeklyMedia(ギークリーメディア) | Geekly（ギークリー） IT・Web・ゲーム業界専門の人材紹介会社

﹃テスト駆動開発﹄や﹃SQLアンチパターン﹄をはじめとする技術書の翻訳者、さまざまなIT企業をわたり歩く技術顧問、さらに最近ではエンジニアリング文化を伝える講演者としても活躍されている和田卓人さん(https://twitter.com/t_wada)。そのソフトウェアエンジニアとしての素顔を株式会社一休CTOの伊藤直也さん(https://twitter.com/naoya_ito)が聞き出す対談の前編では、一線を画すエンジニアであり続けるために自らのプロジェクトで意識的にコードを書いているという和田さんの姿勢に始まり、ベテランとして﹁技術のらせん﹂を読み解くケーススタディとしてDDD︵Domain-Driven Design︶を題材に話を伺います。・伊藤直也さん / 株式会社一休　執行役員 CTO 新卒入社したニフティ株式会社でブログサービス﹁ココログ﹂を立ち上げ、CTOを務め

harumaki_net 2023/02/01

リンク

仕事ってどうやったらできるようになるのかが何となくわかってきた。

かつて仕事の覚えが悪くて色々と悩んでいた時期の時の話である。先輩医師から﹁物覚えの良し悪しなんて、仕事の本質ではない﹂﹁ぶっちゃけた事をいえば、仕事なんてのは99％の人にはやってれば自然とできるような性質のものでしかない﹂﹁そういうほっておいたら誰でもできるような部分ではない部分にこそ、仕事の本当の大切なモノがある﹂と言われた事があった。当時は単なる慰めぐらいにしか思わなかったのだが、中堅ぐらいの年齢になった今、彼の言っていた事の意味が痛いほどによくわかる。実際、仕事の”やり方”自体を身に着けられないという人はほぼ居ない。多少は習得スピードに差はあるが、それでもせいぜい1～2年もあればその差は埋まる。じゃあ誰でも仕事が同じようにできるようになるのかというと、それもまた否だ。この差が何に起因するのか長い間よくわからなかったのだけど、最近になって﹁受験勉強への取り組み方で上手

harumaki_net 2022/12/24

リンク

海底ケーブルはこうやってつくられる、世界3強の一角占めるNEC子会社工場に潜入

国際通信の99％を担う海底ケーブルが、空前の建設ラッシュを迎えている。近年、米Google︵グーグル︶や米Meta︵Meta Platforms、旧Facebook︶など巨大IT企業︵ビッグテック︶が海底ケーブル投資の主役となって、太平洋や大西洋を横断する大型海底ケーブル建設プロジェクトを相次いで進めているからだ。今や海底ケーブルは、ビッグテックのデジタル覇権を支える地政学的な武器と化している。そんな海底ケーブルの製造や敷設について、実は日本企業が世界3強の一角を占めていることはあまり知られていない。フランスAlcatel Submarine Networks︵アルカテル・サブマリン・ネットワークス︶、米SubCom︵サブコム︶と並んで世界シェアトップ3に名を連ねるのが日本のNECだ。NECの子会社であるOCC︵横浜市︶が北九州市に持つ海底システム事業所こそ、海底ケーブルの世界有数の生産

harumaki_net 2022/10/20

リンク

働きながら情報系の大学院を修了した｜父

2022年9月末で北陸先端科学技術大学院大学の博士前期課程を修了し、修士︵情報科学︶が授与された。働きながら通い始めて丸3年かかった。学位記。大変だったので嬉しい…とても大変だったので学位記が届いたときは万感の思いだった。ただ、このエントリを書いたのは﹁すげえだろ﹂とかそういうのとはどちらかと言えば真逆の感情で、僕の修士課程がどのくらい低空飛行でどのくらい誰にでもできることなのかを詳らかにして同じような境遇の人を鼓舞することが目的だ。そのために敢えてみっともない、見栄を張りたいなら書く必要のない恥まで含めてある。学位というものに一抹の未練がある人は是非読んで欲しい。筆者について進学時36歳、修了時39歳。職業はソフトウェアエンジニア。2児の父。4流大の文学部卒。暇な人は過去のエントリに詳しいが、別に読まなくても構わない。入学まで僕が大学院進学を決意したのは元同僚で友人のさのたけと

harumaki_net 2022/10/13

簡単には真似出来ないけど見習いたい

リンク

クリプト・Web3業界の誇大広告に踊らされてはならない：1500人超の科学者・エンジニア・技術者が米議会に警告 | p2ptk[.]org

クリプト・Web3業界の誇大広告に踊らされてはならない：1500人超の科学者・エンジニア・技術者が米議会に警告投稿者: heatwave_p2p 投稿日: 2022/7/262022/7/26 以下の文章は、1500人のコンピュータ科学者、ソフトウェアエンジニア、テクノロジストらが米議会指導部、各委員会委員長・少数党筆頭委員に送付した「Letter in Support of Responsible Fintech Policy」という公開書簡を翻訳したものである。責任あるフィンテック政策を求める書簡 2022年6月1日チャック・シューマー上院多数党院内総務ミッチ・マコネル上院少数党院内総務ナンシー・ペロシ下院議長ケヴィン・マッカーシー下院少数党院内総務デビー・スタバノウ上院農業・栄養・林業委員会委員長ジョン・ボーズマン上院農業・栄養・林業委員会少数党筆筆頭委員

harumaki_net 2022/07/26

リンク

はてなブックマーク

タグ

関連タグで絞り込む (112)

技術に関するharumaki_netのブックマーク (146)

お知らせ

今週のはてなブックマーク数ランキング（2024年7月第2週）

はてなブックマーク透明性レポート（2024年 2月-2024年4月）

今週のはてなブックマーク数ランキング（2024年7月第1週）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス