トラブルシューティングからLinuxカーネルに潜り込む ‐ 実際のサービス運用で深めたカーネルへの理解
本記事は、TechFeed Experts Night#19 〜 達人に聞く、Linuxカーネルコードの歩き方のセッション書き起こし記事になります。 イベントページのタイムテーブルから、その他のセッションに関する記事もお読み頂けますので、一度アクセスしてみてください。 本セッションの登壇者 セッション動画 GMOペパボの伊藤洋也です。2007年からGMOペパボにて勤務しており、ホスティングサービスや技術基盤チームを経て現在はセキュリティ対策室に所属しております。オンラインではTwitterおよびGithubのアカウントとブログで活動しています。今回は実際のサービス環境でのLinuxカーネルのトラブルシューティング事例とともに、カーネルの詳細調査やコードリーディングの方法をご紹介します。 私はLinuxカーネルのコミッターをしているわけではなく、またLinuxカーネルの開発業務もさほど行って
コンテナやコマンドなどのリソース単位で外部への意図しない通信をブロックする
特定の外部ネットワークへの通信の制限にはファイアウォールなどを利用することが多いですが、コンテナや実行されたコマンド名などをもとに、通信を制御したいという需要が自分の中でありました。 具体的には GitHub Self-hosted runner のような CI / CD 環境で、依存パッケージに悪意あるコードが入り込んでしまうようなサプライチェーン攻撃などを検知・防御し、意図せずにクレデンシャルなどの秘匿すべき情報が外部に漏洩するのを防ぎたいと思っていました。 このようなサプライチェーン攻撃への対策は様々ですが、実行時に悪意のある動作を検出するものとして、GitLab が Falco をベースとした Package Hunter などがあります。このツールは依存パッケージなどをインストールする際に実行されるシステムコールなどを監視するものです。 検知するだけであれば Package Hu
TCP 接收窗口
最近有空阅读了一些 TCP 窗口相关的内核代码，知识点相对比较琐碎，做一些简单的笔记，本篇主要关于 TCP 接收窗口。 本篇主要基于 Linux v5.2.2 内核，如有不准确之处，会日后修订。 前置知识在 TCP 传输中提到的窗口一般有三个，接收窗口、发送窗口和拥塞窗口： 接收窗口：一般是接收端向发送端通告自己还可以接收和缓冲多少数据， 可在用户态通过设置 SO_RCVBUF 一定程度上调整初始的接受窗口大小。 拥塞窗口：可以理解为拥塞算法定义的逻辑窗口，是有发送端的流控算法，一般是 MSS（最大分段大小）的数倍。在一般意义的拥塞算法中，窗口在慢开始阶段增长，当窗口值到达 ssthresh（慢启动阈值）或数据丢失时，会进行相应调整。总之，这是一个由拥塞算法所控制的窗口。 发送窗口：算是一个综合性的窗口，主要用于调整可发送数据的大小，和发送缓冲区剩余大小，拥塞窗口及发送中的数据包量（pac
BPF(bcc)のメモ
bpf や bcc 周りは使わないと忘れてしまうのでメモ。 Hello, World clang で bpf オブジェクトを作って C でそれを読み込む…という方法よりも https://github.com/iovisor/bcc/ を使う方が楽なので、bcc でやります。 C でやると環境作るところから大変なので… ref : https://blog.raymond.burkholder.net/index.php?/archives/1000-eBPF-Basics.html execve システムコールが呼ばれたときに Hello, World! と表示するプログラムを作ります。 from bcc import BPF bpf_text = """ #include <uapi/linux/ptrace.h> #include <linux/sched.h> #include <
LKML: Roman Gushchin: [PATCH v2] cgroup, blkcg: prevent dirty inodes to pin dying memory cgroups
[PATCH v2] cgroup, blkcg: prevent dirty inodes to pin dying memory cgroups We've noticed that the number of dying cgroups on our production hosts tends to grow with the uptime. This time it's caused by the writeback code. An inode which is getting dirty for the first time is associated with the wb structure (look at __inode_attach_wb()). It can later be switched to another wb under some conditions
LKML: Greg Kroah-Hartman: [PATCH 4.16 64/81] fsnotify: Fix fsnotify_mark_connector race
[PATCH 4.16 64/81] fsnotify: Fix fsnotify_mark_connector race 4.16-stable review patch. If anyone has any objections, please let me know. ------------------ From: Robert Kolchmeyer <rkolchmeyer@google.com> commit d90a10e2444ba5a351fa695917258ff4c5709fa5 upstream. fsnotify() acquires a reference to a fsnotify_mark_connector through the SRCU-protected pointer to_tell->i_fsnotify_marks. However, it a
dyndbg(dynamic debug)の使い方 - へにゃぺんて＠日々勉強のまとめ
printk()はデバッグ出力無効化の際には、コメントアウトするなりして再ビルドする必要があります。 何度もビルドを繰り返すのは面倒なので、デバッグ出力の有効/無効を実行時に動的に切り替えられるようにする機能が dyndbg(dynamic debug)です。 なお以降の説明は、Linux 3.14.51で確認したものです。 また、debugfsのマウントポイントをで略記しています。 参考: debugfsのマウント方法 (マウントポイント /sys/kernel/debug の場合) sudo mount -t debugfs none /sys/kernel/debug カーネルコンフィギュレーションの変更 dyndbgを使用するには、カーネルコンフィギュレーションの変更が必要です。 まず、以下の場所にある「CONFIG_DYNAMIC_DEBUG」を有効化します。 Kernel ha
Re: regression in 4.14-rc2 caused by apparmor: add base infastructure for socket mediation
On Thu, Oct 26, 2017 at 8:54 PM, James Morris <james.l.mor...@oracle.com> wrote: > On Thu, 26 Oct 2017, Linus Torvalds wrote: > >> I'm *very* unhappy with the security layer as is > > What are you unhappy with?We had two big _fundamental_ problems this merge window: - untested code that clearly didn't do what it claimed it did, and which caused me to not even accept the main pull request - apparmo
Re: regression in 4.14-rc2 caused by apparmor: add base infastructure for socket mediation
On Tue, Oct 24, 2017 at 1:57 PM, John Johansen <john.johan...@canonical.com> wrote: > > actually a lot of work and testing has been done. A regression was > found, the fix is in testing and it should land soon, but its not the > regression you are having issues with.Stop gthis f*cking idiocy already! As far as the kernel is concerned, a regressions is THE KERNEL NOT GIVING THE SAME END RESULT WITH
Linux Load Averages: Solving the Mystery
Recent posts: 28 Apr 2023 » eBPF Observability Tools Are Not Security Tools 01 Mar 2023 » USENIX SREcon APAC 2022: Computing Performance: What's on the Horizon 17 Feb 2023 » USENIX SREcon APAC 2023: CFP 02 May 2022 » Brendan@Intel.com 15 Apr 2022 » Netflix End of Series 1 09 Apr 2022 » TensorFlow Library Performance 19 Mar 2022 » Why Don't You Use ... 26 Sep 2021 » The Speed of Time 06 Sep 2021 »
Linux_4.12 - Linux Kernel Newbies
Linux 4.12 has been released on Sun, 2 July 2017. Summary: This release includes a new BFQ I/O scheduler which provides a much better interactive experience; it also includes preliminary support for Radeon RX Vega graphic cards and support for USB Type-C connectors; improvements to the live kernel patching feature, support for Intel IMSM's Partial Parity Log which allows to close the RAID5 write h
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://tech.pepabo.com/2020/06/26/kernel-dive-tcp_mem/
net: increase SOMAXCONN to 4096 - kernel/git/torvalds/linux.git - Linux kernel source tree
SSD Advisory – Linux Kernel AF_PACKET Use After Free (packet_sock) – SecuriTeam Blogs
Intent to Ship: Long Task API - Google Groups
GitHub - mihic/linux-intel-undervolt: Guide to linux undervolting for Haswell and never Intel CPUs
The 2017 Linux Storage, Filesystem, and Memory-Management Summit [LWN.net]
Automatic NUMA Balancing
GitHub - intel/numatop: NumaTOP is an observation tool for runtime memory locality characterization and analysis of processes and threads running on a NUMA system.
Googleグループ