Kernel Exploring
  • 前言
  • 支持
  • 老司机带你探索内核编译系统
    • 编译出你的第一个内核
    • 内核编译中的小目标
    • 可能是kbuild中最直接的小目标 – help
    • 使用了一个kbuild函数的目标 – cscope
    • 内核中单个.o文件的编译过程
    • 根目录vmlinux的编译过程
    • 启动镜像bzImage的前世今生
    • setup.bin的诞生记
    • 真假vmlinux–由vmlinux.bin揭开的秘密
    • bzImage的全貌
    • kbuild系统浅析
  • 启动时的小秘密
    • INIT_CALLS的秘密
    • 内核参数
  • 内核加载全流程
    • bootloader如何加载bzImage
    • 内核压缩与解压
    • 内核加载的几个阶段
    • 保护模式内核代码赏析
  • 内存管理
    • 内核页表成长记
      • 未解压时的内核页表
      • 内核早期的页表
      • cleanup_highmap之后的页表
      • 映射完整物理地址
      • 启用init_level4_pgt
    • 自底而上话内存
      • e820从硬件获取内存分布
      • 原始内存分配器--memblock
      • 页分配器
        • 寻找页结构体的位置
        • 眼花的页结构体
        • Node-Zone-Page
        • 传说的伙伴系统
        • Compound Page
        • GFP的功效
        • 页分配器的用户们
      • slub分配器
        • slub的理念
        • 图解slub
      • 内存管理的不同粒度
      • 挑战和进化
        • 扩展性的设计和实现
        • 减少竞争 per_cpu_pageset
        • 海量内存
        • 延迟初始化
        • 内存热插拔
        • 连续内存分配器
    • 虚拟内存空间
      • 页表和缺页中断
      • 虚拟地址空间的管家--vma
      • 匿名反向映射的前世今生
      • 图解匿名反向映射
      • THP和mapcount之间的恩恩怨怨
      • 透明大页的玄机
      • NUMA策略
      • numa balance
      • 老版vma
    • 内存的回收再利用
      • 水线
      • Big Picture
      • 手动触发回收
      • Page Fram Reclaim Algorithm
      • swapfile原理使用和演进
    • 内存隔离
      • memcg初始化
      • 限制memcg大小
      • 对memcg记账
    • 通用
      • 常用全局变量
      • 常用转换
    • 测试
      • 功能测试
      • 性能测试
  • 中断和异常
    • 从IDT开始
    • 中断?异常?有什么区别
    • 系统调用的实现
    • 异常向量表的设置
    • 中断向量和中断函数
    • APIC
    • 时钟中断
    • 软中断
    • 中断、软中断、抢占和多处理器
  • 设备模型
    • 总线
    • 驱动
    • 设备
    • 绑定
  • nvdimm初探
    • 使用手册
    • 上帝视角
    • nvdimm_bus
    • nvdimm
    • nd_region
    • nd_namespace_X
    • nd_dax
      • dev_dax
  • KVM
    • 内存虚拟化
      • Qemu内存模型
      • KVM内存管理
  • cgroup
    • 使用cgroup控制进程cpu和内存
    • cgroup文件系统
    • cgroup层次结构
    • cgroup和进程的关联
    • cgroup数据统计
  • 同步机制
    • 内存屏障
    • RCU
  • Trace/Profie/Debug
    • ftrace的使用
    • 探秘ftrace
    • 内核热补丁的黑科技
    • eBPF初探
    • TraceEvent
    • Drgn
  • 内核中的数据结构
    • 双链表
    • 优先级队列
    • 哈希表
    • xarray
    • B树
    • Maple Tree
    • Interval Tree
  • Tools
  • Good To Read
    • 内核自带文档
    • 内存相关
    • 下载社区邮件
Powered by GitBook
On this page
  • 先用起来
  • 跟着我走
  • 真刀真枪
  • 基本概念
  • 写在最后

Was this helpful?

老司机带你探索内核编译系统

Previous支持Next编译出你的第一个内核

Last updated 1 year ago

Was this helpful?

内核编译是一个非常生僻的领域,哪怕是做内核的童鞋也不一定关注过整个内核编译的流程,更不用说内核的门外汉了。

然而了解学习内核编译系统,可能会有你意想不到的收获。我在这个过程中从以下几个方面获得收益。

  • 深入的理解makefile如何管理大型项目

  • 编译出错了也不会那么慌张

  • 多年后才明白究竟是哪个文件才是放在/boot/目录下的那个启动文件以及它和另一个很像的文件之间的差别

  • 节省了编译时间,不会每次都用make all这种粗暴的方式了

  • 传说的make -j8中,这8个进程是在什么条件下才能开启的

  • 进一步的了解了整个内核的构造,而不是仅仅知道自己做的那一块了

  • 了解了某些编译链接细节,帮助看懂内核启动时的一些操作

但是很多人,包括我自己在很长的一段时间内都没有相对仔细阅读和研究内核编译的过程。在此,我希望通过分享自己一点点的经验,帮助大家破除对内核编译系统的抵触,快速掌握内核编译系统的整体架构,为后续的深入研究开一个好头。

鉴于本人经验尚浅,或有不透彻甚至是错误的地方,还望大家包涵。如能告知,万分感谢。

先用起来

大多数人都是从最简单的开始的,我也不例外。首先你得有这么一个环境,能够编译内核,接下来你才有机会去修改去实验去探索内核编译的过程。

第一步先

由此小白们可以体会一下编译的过程,和使用自己编译的内核的快乐。也为后续我们做深入的实验做好准备。

在了解了基本的编译过程和步骤之后,我们再来看看那些

这些小目标可以帮助我们

  • 生成辅助资料

  • 生成单个目标文件

  • 节约时间

  • 偶尔可以帮助一下调试

或许你会发现某个对你有用的~

跟着我走

现在我们已经会使用基本的命令制作出内核和一些小目标了。说实话,整个kbuild系统还是有点复杂的。不过不用担心,我们先来三个简单的小目标,了解一下基本的运作方式。或许你会觉得并没有想象中的那么高不可攀,或许可以让自己觉得还是有那么点机会可以看懂的~

先来一个最简单最直接的

看了这个例子,你或许会觉得不过瘾。什么嘛,这个help的目标就和平时自己写的makefile的套路是一样的。没有什么花头,也不是什么高级货。好了,这次我们来一个稍微复杂一些的。上面的例子太直接了只有一个层次的结构,那这次来一个有两层的看看。

有了上述这两个不是编译目标的目标,我们已经储备了相当的make和kbuild知识,了解了一定的kbuild系统结构,接下来来看一个稍微复杂一点但相对还是比较直接的目标。这次可是货真价实的编译目标了哦~

真刀真枪

能走到这,而且看懂上面三个小目标的基本上已经储备了足够多的基础知识。正所谓养兵千日,用兵一时,接下来我们就该动真格的了~

在根目录下最明显的内核目标就数vmlinux了。不过编译内核这么多年,安装内核无数次,却从来都没有好好研究过他老人家出生的过程。那我们就先来看看

研究完了根目录的vmlinux,我突然发现还有一个叫bzImage的目标。也是啊,内核不是说要压缩的么?vmlinux是ELF格式,那就能被直接加载到内存了?带着这些疑惑,让我们来探索一下

探索的过程中发现bzImage是由setup.bin和vmlinux.bin两个目标粘合而成。看来马上就要弄明白整个bzImage编译过程了。咱逐个探索~

终于,经历了九九八十一难之后,可以说彻底的理解了内核编译的整个过程,也对kbuild系统架构有了基本的认识。可以学成下山了。

基本概念

温故而知新,在探索过程中我们是见招拆招,可能用到了不少概念,但没有系统梳理。现把相关知识点整理如下,以便有更好的理解。

写在最后

整个内核的编译系统依然是十分庞大复杂的。其中还有不少细枝末节在本系列中没有深入仔细地去分析,讲解和探索。经过了这么一段时间的磨练,相信大家已经掌握了基本的知识,对kbuild系统运作原理有了深入了了解,若能为大家进一步的探索打下了基础也算是没有白费功夫。

本系列文章或许还会再修正更新增加,本次更新就先到这里。愿大家能够在内核探索的道路上勇猛精进。

送君千里,终须一别,我们来日江湖再见~

。

弄明白了这两个组成部分后,在来看看

编译出你的第一个内核
内核编译中的小目标
可能是kbuild中最直接的小目标 -- help
使用了一个kbuild函数的目标 -- cscope
内核中单个.o文件的编译过程
根目录vmlinux的编译过程
启动镜像bzImage的前世今生
setup.bin的诞生记
真假vmlinux--由vmlinux.bin揭开的秘密
bzImage的全貌
kbuild系统浅析