Kernel Exploring
  • 前言
  • 支持
  • 老司机带你探索内核编译系统
    • 编译出你的第一个内核
    • 内核编译中的小目标
    • 可能是kbuild中最直接的小目标 – help
    • 使用了一个kbuild函数的目标 – cscope
    • 内核中单个.o文件的编译过程
    • 根目录vmlinux的编译过程
    • 启动镜像bzImage的前世今生
    • setup.bin的诞生记
    • 真假vmlinux–由vmlinux.bin揭开的秘密
    • bzImage的全貌
    • kbuild系统浅析
  • 启动时的小秘密
    • INIT_CALLS的秘密
    • 内核参数
  • 内核加载全流程
    • bootloader如何加载bzImage
    • 内核压缩与解压
    • 内核加载的几个阶段
    • 保护模式内核代码赏析
  • 内存管理
    • 内核页表成长记
      • 未解压时的内核页表
      • 内核早期的页表
      • cleanup_highmap之后的页表
      • 映射完整物理地址
      • 启用init_level4_pgt
    • 自底而上话内存
      • e820从硬件获取内存分布
      • 原始内存分配器--memblock
      • 页分配器
        • 寻找页结构体的位置
        • 眼花的页结构体
        • Node-Zone-Page
        • 传说的伙伴系统
        • Compound Page
        • GFP的功效
        • 页分配器的用户们
      • slub分配器
        • slub的理念
        • 图解slub
      • 内存管理的不同粒度
      • 挑战和进化
        • 扩展性的设计和实现
        • 减少竞争 per_cpu_pageset
        • 海量内存
        • 延迟初始化
        • 内存热插拔
        • 连续内存分配器
    • 虚拟内存空间
      • 页表和缺页中断
      • 虚拟地址空间的管家--vma
      • 匿名反向映射的前世今生
      • 图解匿名反向映射
      • THP和mapcount之间的恩恩怨怨
      • 透明大页的玄机
      • NUMA策略
      • numa balance
      • 老版vma
    • 内存的回收再利用
      • 水线
      • Big Picture
      • 手动触发回收
      • Page Fram Reclaim Algorithm
      • swapfile原理使用和演进
    • 内存隔离
      • memcg初始化
      • 限制memcg大小
      • 对memcg记账
    • 通用
      • 常用全局变量
      • 常用转换
    • 测试
      • 功能测试
      • 性能测试
  • 中断和异常
    • 从IDT开始
    • 中断?异常?有什么区别
    • 系统调用的实现
    • 异常向量表的设置
    • 中断向量和中断函数
    • APIC
    • 时钟中断
    • 软中断
    • 中断、软中断、抢占和多处理器
  • 设备模型
    • 总线
    • 驱动
    • 设备
    • 绑定
  • nvdimm初探
    • 使用手册
    • 上帝视角
    • nvdimm_bus
    • nvdimm
    • nd_region
    • nd_namespace_X
    • nd_dax
      • dev_dax
  • KVM
    • 内存虚拟化
      • Qemu内存模型
      • KVM内存管理
  • cgroup
    • 使用cgroup控制进程cpu和内存
    • cgroup文件系统
    • cgroup层次结构
    • cgroup和进程的关联
    • cgroup数据统计
  • 同步机制
    • 内存屏障
    • RCU
  • Trace/Profie/Debug
    • ftrace的使用
    • 探秘ftrace
    • 内核热补丁的黑科技
    • eBPF初探
    • TraceEvent
    • Drgn
  • 内核中的数据结构
    • 双链表
    • 优先级队列
    • 哈希表
    • xarray
    • B树
    • Maple Tree
    • Interval Tree
  • Tools
  • Good To Read
    • 内核自带文档
    • 内存相关
    • 下载社区邮件
Powered by GitBook
On this page
  • 内存模块的层次结构
  • 内存管理的不同粒度
  • 挑战和进化
  • 参考文献

Was this helpful?

  1. 内存管理

自底而上话内存

Previous启用init_level4_pgtNexte820从硬件获取内存分布

Last updated 11 months ago

Was this helpful?

内存模块是内核中一个非常重要的部分。我们现在的计算机都被称作为存储程序计算机,也就是所有待运行的程序和数据都需要加载在内存当中方能被执行。正因为如此,很多朋友都希望学习内存模块的工作机制,但碍于内核代码的庞大以及文档的缺失和稀少,总是感觉无从下手。

经过一段时间的摸索,我终于对内存模块有了一点点的了解。今天整理成文,希望能给想要探究内存模块的朋友一点点借鉴。

内存模块的层次结构

首先内存模块具有一定层次结构的,从物理内存到软件控制的内存经过了几个层次的隔离。

大致我们能看到这么四个层次的内存管理结构。前两者基本在内核启动时使用,而平时大多使用的是后两者。

内存管理的不同粒度

越是学习,越发现内存管理是一个比较大的话题。这么一路走来,我们从最底层的物理信息一直走到了slub分配器,可以说对内存管理有了一定的认知。

此刻请允许我站的远一点来观察整个内存管理架构,也从另一个角度 -- 粒度 来观察内存管理的奥妙。

挑战和进化

内存管理的层次结构已经逐渐清晰,接着发现在内存子系统随着应用场景和硬件环境的变化也会遇到新的挑战,并对此做出自身的进化。

在此仅以一点点的记录来进一步窥探这个神秘的世界。

参考文献

e820从硬件获取内存分布
原始内存分配器--memblock
页分配器
Slub分配器
内存管理的不同粒度
挑战和进化
Understand Linux VM