[B! kernel] moritataのブックマーク

moritata id:moritata

kernelに関するmoritataのブックマーク (77)

新Linuxカーネル解読室 - ソフト割り込み処理 - VA Linux エンジニアブログ
﹁Linuxカーネル2.6解読室﹂︵以降、旧版︶出版後、Linuxには多くの機能が追加され、エンタープライズ領域をはじめとする様々な場所で使われるようになりました。それに伴いコードが肥大かつ複雑化し、多くのエンジニアにとって解読不能なブラックボックスとなっています。世界中のトップエンジニア達の傑作であるLinuxカーネルにメスを入れ、ブラックボックスをこじ開けて、時に好奇心の赴くままにカーネルの世界を解読する﹁新Linuxカーネル解読室﹂プロジェクト。本稿では、旧版第3章で解説されていたソフト割り込み処理について、カーネルv6.8/arm64のコードをベースに解説します。はじめに割り込み禁止区間と応答性について perfにおけるNMI割り込みから見る応答性ソフト割り込み処理ソフト割り込み処理の考え方ソフト割り込み実行までの流れソフト割り込み要求︵RCU_SOFTIRQの場
moritata 2024/06/14
ソフト

linux

フリーソフト

kernel
リンク
新Linuxカーネル解読室カテゴリーの記事一覧 - VA Linux エンジニアブログ
カーネルv6.8のコードをベースに、プロトコルごとに異なる処理をソケットがどのように抽象化しているのか、またソケットがなぜファイルとして操作できるのかについて、データ構造を中心に解説します。
moritata 2024/06/14
linux

プロジェクト

ソフト

プロジェクト管理

kernel
リンク
Linuxカーネル解読室再び - VA Linux エンジニアブログ
Linuxカーネルコード解析プロジェクト立ち上げ Linuxカーネル成長の歴史カーネルの大きさバージョン番号 SCM導入カーネル機能の変遷執筆者 : 高橋浩和 ※ ﹁新Linuxカーネル解読室﹂連載記事一覧はこちら Linuxカーネルコード解析プロジェクト立ち上げ弊社内にて若手技術者が中心となり、最新のLinuxカーネルコード全体を読み解くプロジェクトが進行中です。解析したコードのうち興味を惹かれたもの、重要そうなものを中心にブログ記事にまとめていく予定です。詳解LinuxカーネルやLinuxカーネル2.6解読室を執筆していたころよりLinuxカーネルは大きく膨れ上がっています。どこまで辿り着けるかは分かりませんが、気長にお待ちください。対象Linuxカーネルのバージョンは6.8 ブログ執筆中に興味深い機能が取り込まれたら、より新しいバージョンのカーネルについて解説する
moritata 2024/06/13
git

linux

開発

アーキテクチャ

kernel
リンク
2024年最初のカーネル「Linux 6.7」がリリース、新ファイルシステムBcachefsをサポート | gihyo.jp
LinuxDailyTopics 2024年最初のカーネル﹁Linux 6.7﹂がリリース⁠⁠、新ファイルシステムBcachefsをサポート Linus Torvaldsは1月7日︵米国時間⁠︶⁠、事前の告知通りに﹁Linux 6.7﹂の正式リリースをアナウンスした。開発期間中に年末年始が含まれていたため、通常よりも1本多い8本のリリース候補版︵RC︶を経ての公開となる。サイズ的には過去のリリースの中でも最大の部類に入るものの、リリースに際しては大きなサイズのカーネルにありがちな大きな混乱や問題もなく、Linusが望んだように穏やかな年始めとなったようだ。 Linux 6.7 -Linus Torvalds Linux 6.7における最大のハイライトは、長年に渡って実装が期待されていたコピーオンライト︵CoW︶の新ファイルシステム﹁Bcachefs﹂のサポートで、現時点でも実験的な立ち
moritata 2024/01/14
linux

Gihyo

アーキテクチャ

kernel

システム
リンク
オープン化で裾野広がるμT-Kernel 3.0、プログラミングコンテストを起爆剤に
オープン化で裾野広がるμT-Kernel 3.0、プログラミングコンテストを起爆剤に‥2023 TRON Symposium︵1/2 ページ︶﹁2023 TRON Symposium﹂では、TRONプロジェクトのRTOS﹁μT-Kernel 3.0﹂をテーマに大手マイコンメーカー4社が協賛する﹁TRONプログラミングコンテスト﹂が発表された。本稿では、このμT-Kernel 3.0関連を中心に2023 TRON Symposiumの展示を紹介する。 1984年に誕生した﹁TRONプロジェクト﹂は、2024年に40周年の節目を迎える。10年前の2014年に30周年を迎えてからの10年間は、組み込み機器で広く利用されてきたμITRONの実績をベースにIoT︵モノのインターネット︶への取り組みを強化してきた10年間でもあった。TRONプロジェクトリーダーの坂村健氏も、2017年3月末に東京大
moritata 2023/12/12
kernel

プロジェクト

IoT

programming

プログラミング
リンク
WasmLinux: LinuxカーネルをWebAssemblyにする
LinuxカーネルがWebブラウザで動いたらどう考えても面白いんだけど、そこに至るまではなかなか難しい道のりになる。その第一歩として、Linuxカーネルのユーザーランド版であるLKL( https://github.com/lkl/linux )をWebAssemblyにコンパイルして、wasm2cでC言語に変換した上、Visual Studio 2022でコンパイルしてWindows上で実行してみた。まだWebブラウザでは動いていないが、思ったよりは簡単にWasmに移植できた(個人の感想です) ウケが良ければMUSL libc移植編 → デバイスドライバ活用編 → Webブラウザ上動作編と続ける感じで。。EDIT: Visual Studioのスクリーンショットを撮りなおし。memory-control はanonymousなmapしか救えないので、ここ数年スパンではエミュレーシ
moritata 2023/10/29
linux

kernel

技術

technology
リンク
自作OSで学ぶマイクロカーネルの設計と実装怒田晟也(著/文) - 秀和システム
紹介マイクロカーネルOSは、﹁美しい設計ではあるものの、遅い実装﹂というイメージを持たれることがありますが、それは過去の話です。現在では、目立たないところで実用的なOSとして使われ、世界を支えています。本書では、マイクロカーネルOSの概念からその実例まで、機能ごとに分けて説明しています。本書全体としては、基礎知識、マイクロカーネルの解説、その上で動くソフトウェア部分︵ユーザーランド︶の解説、そして発展的内容の4つのパートから構成されており、それぞれのパート内の章は、概念の解説部分と、その概念をどのように実装しているかを解説した実装部分に分かれています。各章の実装例として、本書のために筆者が開発したマイクロカーネルOS﹁HinaOS﹂を用いて、わかりやすく解説しています。HinaOSは、エミュレータ上で動かすことを想定した教育目的のOSですが、OSの実装を学ぶのに必要となる最低限の機能
moritata 2023/09/24
メモリ

サーバ

システム

設計

kernel
リンク
1,000行で作るオペレーティングシステム
「Writing an OS in 1,000 Lines」というオンラインブックを書きました。ゼロから1,000行でOSを作るという内容です。『自作OSで学ぶマイクロカーネルの設計と実装』とは違い、最初の一歩の部分を重点的に解説しています。シンプルなモノリシックカーネル設計で、実装の解説だけでなくカーネルプログラミング特有の難しい部分、特に「カーネルをどうデバッグすれば良いか」をおさえた、初学者向きの内容になっています。 3日ほどあれば済むボリュームです。夏休みの自由研究がてら、ぜひチャレンジしてみてください。
moritata 2023/09/24
システム

設計

プログラミング

debug

kernel
リンク
How does the Linux Kernel start a Process
...and how to ptrace the entry point and m3ss w1th da stack. In this article, you will learn what happens inside the Linux Kernel when a process calls execve(), how the Kernel prepares the stack and how control is then passed to the userland process for execution. I had to learn this for the development of Zapper - a Linux tool to delete all command line options from any process (without needing r
moritata 2023/09/16
kernel

linux

programming

プログラミング
リンク
Linux システムコール徹底入門
Linux システムコールについて調べたことをまとめる。システムコールの仕組みを理解すると、OSとアプリケーションがどのように連携して動いているのかを理解できるようになります。システムコールは CPU に依存する処理が多いため、 x86_64 に絞ります。検証環境]# cat /etc/redhat-release CentOS Linux release 8.0.1905 (Core) ]# uname -a Linux localhost.localdomain 4.18.0-80.11.2.el8_0.x86_64 #1 SMP Tue Sep 24 11:32:19 UTC 2019 x86_64 x86_64 x86_64 GNU/Linux ]# cat /proc/cpuinfo | head processor : 0 vendor_id : GenuineInte
moritata 2023/09/16
システム

kernel

cpu

linux
リンク
WASMバイナリを実行する自作OS, mavisの紹介
mavisとは mavisは私がフルスクラッチで開発している自作OSです。これをビルドしてmake runするとshellが立ち上がり、"hello"コマンドを実行すると"Hello World!"が表示されます。現状できることはたったこれだけですが、面白いのはその仕組みです。実は上の画像のshellとhello worldプログラムはどちらも WASMバイナリです。そしてkernelは低レベルなメモリ管理機能とタスク管理機能を除くと、﹁WASMバイナリをタスクとして実行する﹂以外の機能を持ちません。つまりkernelがWASM Runtimeであり、それによって"ユーザーランド"を実現しているということです。このOSは﹁仮想メモリ﹂を持ちません。なぜならWASMバイナリは位置独立だからです。WASMはスタックマシンベースの命令セットなので、スタックさえ用意すればどこでも、何度でも
moritata 2023/09/04
kernel

プログラム

システム

アーキテクチャ
リンク
はじめに - Writing an OS in 1,000 Lines
本書では、小さなOSをゼロから少しずつ作っていきます。OSと聞くと腰が引けるかもしれませんが、OS (特にカーネル) の基本機能は案外単純です。巨大なオープンソースソフトウェアとしてよく挙げられるLinuxでさえ、バージョン0.01はたった8413行でした。様々な要求に応えるために次第に肥大化していっただけで、当初は大変素朴な実装になっていました。本書では素朴なコンテキストスイッチ、ページング、ユーザーモード、コマンドラインシェル、ディスクデバイスドライバ、ファイルの読み書きをC言語で実装します。これだけ様々な機能が詰め込まれているのに、コードは合計でたった1000行未満です。﹁1000行なら1日でできそう﹂と思うかもしれませんが、初学者には少なくとも3日はかかるでしょう。OS自作のハマりポイントは﹁デバッグ﹂です。アプリケーション開発とは違うデバッグ手法・能力を習得する必要がありま
moritata 2023/08/06
本

コマンド

debug

kernel
リンク
カーネルコードの歩き方 ‐ ソースコードを読むための勘所を知る
数千万行に及ぶLinuxカーネルのコードのうち、どんなときにどこのコードを読めばいいか、そのときに何を手がかりにすればいいか、などについてお話します。本記事は、TechFeed Experts Night#19 〜達人に聞く、Linuxカーネルコードの歩き方のセッション書き起こし記事になります。イベントページのタイムテーブルから、その他のセッションに関する記事もお読み頂けますので、一度アクセスしてみてください。本セッションの登壇者セッション動画﹁カーネルコードの歩き方﹂というタイトルでお話しする武内覚と申します。ふだんはsatと呼ばれています。社会人1年目から15年ぐらいカーネルの開発とサポートをずっとやってきました。今も必要に応じてカーネルソースを見ています。本LTで学べるのは﹁Linuxのカーネルソースの読み方についての勘所﹂です。直接読んでいくというより、もう少しメタな
moritata 2023/07/28
git

linux

kernel

subversion
リンク
BPFを利用し、Linuxカーネルのパラメータを継続的に自動チューニングする「bpftune」。オラクルがオープンソースで公開
オラクルはLinuxカーネルのパラメータを、ワークロードに合わせて継続的に自動チューニングするツール﹁bpftune﹂をオープンソースで公開しました︵GitHubのページ︶。 bpftuneは﹁BPF﹂︵Berkeley Packet Filter︶と呼ばれる、Linuxカーネル内のさまざまな機能をフックして機能拡張が可能な仕組みを利用し、継続的にLinuxカーネルのきめこまなかレベルで監視を行い自動チューニングを実現しています。オラクルはbpftuneを開発した背景として、クラウドに代表される大規模なサーバ展開が可能なインフラにおいて、以前よりも個々のサーバのチューニングについて注意が払われることがほとんどなくなったこと、チューニングされるとしても静的に適切な設定があると考えられることが一般的であることを挙げています。 bpftuneによる自動チューニング対象の項目 bpftuneは現
moritata 2023/07/03
チューニング

linux

oracle

tuning

kernel

performance

パフォーマンス

software

tool
リンク
Linuxで動くNICドライバの開発をしている - BYB
概要おことわり流れ [前半]:NICドライバ実装に必要な作業 insmod/rmmod時のエントリポイントとなる関数を用意 pci_diriver構造体を定義して、ドライバを登録 net_deviceとして登録 net_deviceハンドラ関数を用意してハンドラテーブルに登録割り込みの定義(未動作確認) MMIOレジスタを適切に初期化して、実際にパケットを処理する部分を書いていく(未実装) ハンドラとスケジューリング [後半]:Linuxカーネル関連で詰まったところ insmod時のカーネルクラッシュインターフェースのstateがUPにならない問題ソースコードさいごに概要 Linuxで動くe1000eドライバを開発しようとしており、ドライバと紐付けたNICのstateがupになるところまで進めました。個人的に忙しくなった都合で一旦ここでプロジェクトを止めるため、備忘録とし
moritata 2023/05/07
linux

開発

デバイス

kernel
リンク
デバッガと和解せよ
2022/08/28 Kernel/VM探検隊online part5 (https://kernelvm.connpass.com/event/256248/) の @nullpo_head (https://twitter.com/nullpo_head) の発表資料です。 ptraceを使って対象コマンドの全子プロセスにattachしてDwarfを見つつデバッグしたいプロセスを探し、最終的には他のデバッガに処理を流すような不思議なデバッガ(?)を作ることで、zero configurationでvscodeでブレークポイントを打ったプロセスのデバッグを始めてくれる dbgee (https://github.com/nullpo-head/dbgee) という便利ツールを作ったときの話をしました。
moritata 2023/05/04
kernel

コマンド

github

debug

virtualization
リンク
LinuxカーネルをフックするeBPFによるサービスメッシュを、Kubernetesに加えてVMやパブリッククラウドまで拡大する「Cilium Mesh」が登場
LinuxカーネルをフックするeBPFによるサービスメッシュを、Kubernetesに加えてVMやパブリッククラウドまで拡大する「Cilium Mesh」が登場 Linuxのカーネルをフックする「eBPF」（extended Berkeley Packet Filter）と呼ばれる仕組みを用いてサービスメッシュを構成する「Cilium」などを開発するIsovalentは、Kubernetesだけでなく仮想マシンやパブリッククラウドまでをカバーするサービスメッシュを実現する「Cilium Mesh」を発表しました。 Introducing Cilium Mesh. Cilium & eBPF powered networking, security, and observability for VMs, servers, and existing networks across cloud,
moritata 2023/04/19
サービス

linux

ネットワーク

kernel

software
リンク
Linuxのローダを自作する
概要 Linuxのスタンダードなローダ、ld-linux-x86-64.so.2 の挙動を理解するために、ld-linux-x86-64.so.2を置き換え可能な https://github.com/akawashiro/sloader を2年ほど前から開発しており、ある程度動くようになってきました。目次ローダとは何か ld-linux-x86-64.so.2 の問題点 sloader sloader の現状 sloaderの実装 libc.so内のシンボルの解決ロードされたプログラムのためのTLS領域の確保 sloaderの課題お願いローダとは何か Linuxで実行可能なバイナリファイルをexecve(2)を使って実行するとき、その実行パスは大きく2つに分類されます。 Linux カーネルが直接、バイナリファイルをメモリ空間にロードする。バイナリが指定したローダ[1]がバイ
moritata 2023/04/15
linux

プログラム

kernel
リンク
Linux でのハングタスクについて - 赤帽エンジニアブログ
Red Hat でコンサルタントをしている菅原と申します。この記事では、意外とあまり説明されていないような気がする Linux システムで発生するハングタスクについて少し説明したいと思います。現場のシステムでもハングタスク検知の設定がされていることが多いと思いますが、ハングタスクとは何なのかを正しくご理解いただくことで、ハングタスク検知を行う目的が明確になること、また、実際の障害事例もご紹介することで、通常あまりハングタスクと関連づけて考えないような設定でもハングタスク発生につながる場合があることを知っていただき、少しでもシステム管理や障害の理解、障害対応などのお役に立てれば幸いです。なお、この記事では RHEL のみを対象に書いていますが、他の Linux ディストリビューションにも適用される内容と思います。ハングタスク (hung tasks) とはハングタスクとは読んで字のご
moritata 2023/03/14
kernel

cpu

システム

linux

filesystem

hotentry

コンピュータ

computer
リンク
Linus Torvalds 氏の理想の git 運用と GitHub
Note 本記事の内容は Linus 氏の発言が人を傷つける場合に筆者がそれを良しと考えるといった意図はございません少し古い記事になるが、 Linus Torvalds 氏の GitHub に対する苦言が記事になっていた。 LinuxカーネルにNTFSドライバーが追加、トーバルズ氏はGitHub経由のマージに苦言 - ZDNet Japan Linus 氏が GitHub について苦言を呈するのは今に始まったことではない︵後述︶が、別に GitHub のすべてを否定しているわけではない。[1] では一体何が不満なのか。Linus 氏の理想とするgit の開発フローを考察した上で、整理してみたい。 Linus 氏の理想結論からいうと、﹁意味あるコミットを作れ﹂﹁コミットを大事にしろ﹂という思想が伺える。では﹁意味あるコミット﹂﹁大事にされたコミット﹂とは何なのか。筆者な
moritata 2023/03/07
git

github

kernel

linux

運用

subversion

oss

開発

プログラミング
リンク
1 2 3 4 次のページ