Revert "新的内存管理模块 (#301)" (#302)

This reverts commit d8ad0a5e77.
This commit is contained in:
LoGin
2023-07-22 16:24:55 +08:00
committed by GitHub
parent d8ad0a5e77
commit bb5f098a86
124 changed files with 5151 additions and 8278 deletions

View File

@ -0,0 +1,15 @@
# 内存分配指南
DragonOS提供了一些用于内存分配的api。您可以使用*kmalloc*来分配小的内存块,也可以使用*alloc_pages*分配连续的2MB大小的内存页面。
## 选择合适的内存分配器
在内核中,最直接、最简单的分配内存的方式就是,使用`kmalloc()`函数进行分配。并且,出于安全起见,除非内存在分配后一定会被覆盖,且您能确保内存中的脏数据一定不会对程序造成影响,在其余情况下,我们建议使用`kzalloc()`进行内存分配,它将会在`kmalloc()`的基础上,把申请到的内存进行清零。
您可以通过`kmalloc()`函数分配得到32bytes到1MBytes之间的内存对象。并且这些内存对象具有以下的性质
- 内存起始地址及大小按照2次幂对齐。比如申请的是80bytes的内存空间那么获得的内存对象大小为128bytes且内存地址按照128bytes对齐
对于需要大量连续内存的分配,可以使用`alloc_pages()`向页面分配器申请连续的内存页。
当内存空间不再被使用时,那么必须释放他们。若您使用的是`kmalloc()`分配的内存,那么您需要使用`kfree()`释放它。若是使用`alloc_pages()`分配的内存,则需要使用`free_pages()`来释放它们。

View File

@ -13,3 +13,16 @@
data_structures
casting
softirq
内存管理
===================
这里快速讲解了如何在DragonOS中分配、使用内存。以便您能快速的了解这个模块。
详细的内存管理模块的文档请参见::ref:`memory_management_module`
.. toctree::
:maxdepth: 1
allocate-memory
mm-api

View File

@ -0,0 +1,267 @@
(_core_mm_api)=
# 内存管理API
## SLAB内存池
SLAB内存池提供小内存对象的分配功能。
### `void *kmalloc(unsigned long size, gfp_t gfp)`
  获取小块的内存。
#### 描述
  kmalloc用于获取那些小于2M内存页大小的内存对象。可分配的内存对象大小为32bytes~1MBytes. 且分配的内存块大小、起始地址按照2的n次幂进行对齐。比如申请的是80bytes的内存空间那么获得的内存对象大小为128bytes且内存地址按照128bytes对齐
##### 参数
**size**
  内存对象的大小
**gfp**
  标志位
### `void *kzalloc(unsigned long size, gfp_t gfp)`
#### 描述
  获取小块的内存并将其清零。其余功能与kmalloc相同。
##### 参数
**size**
  内存对象的大小
**gfp**
  标志位
### `unsigned long kfree(void *address)`
  释放从slab分配的内存。
#### 描述
  该函数用于释放通过kmalloc申请的内存。如果`address`为NULL则函数被调用后无事发生。
  请不要通过这个函数释放那些不是从`kmalloc()``kzalloc()`申请的内存,否则将会导致系统崩溃。
##### 参数
**address**
  指向内存对象的起始地址的指针
## 物理页管理
DragonOS支持对物理页的直接操作
### `struct Page *alloc_pages(unsigned int zone_select, int num, ul flags)`
#### 描述
  从物理页管理单元中申请一段连续的物理页
#### 参数
**zone_select**
  要申请的物理页所位于的内存区域
可选值:
- `ZONE_DMA` DMA映射专用区域
- `ZONE_NORMAL` 正常的物理内存区域,已在页表高地址处映射
- `ZONE_UNMAPPED_IN_PGT` 尚未在页表中映射的区域
**num**
  要申请的连续物理页的数目该值应当小于64
**flags**
  分配的页面要被设置成的属性
可选值:
- `PAGE_PGT_MAPPED` 页面在页表中已被映射
- `PAGE_KERNEL_INIT` 内核初始化所占用的页
- `PAGE_DEVICE` 设备MMIO映射的内存
- `PAGE_KERNEL` 内核层页
- `PAGE_SHARED` 共享页
#### 返回值
##### 成功
  成功申请则返回指向起始页面的Page结构体的指针
##### 失败
  当ZONE错误或内存不足时返回`NULL`
### `void free_pages(struct Page *page, int number)`
#### 描述
  从物理页管理单元中释放一段连续的物理页。
#### 参数
**page**
  要释放的第一个物理页的Page结构体
**number**
  要释放的连续内存页的数量。该值应小于64
## 页表管理
### `int mm_map_phys_addr(ul virt_addr_start, ul phys_addr_start, ul length, ul flags, bool use4k)`
#### 描述
  将一段物理地址映射到当前页表的指定虚拟地址处
#### 参数
**virt_addr_start**
  虚拟地址的起始地址
**phys_addr_start**
  物理地址的起始地址
**length**
  要映射的地址空间的长度
**flags**
  页表项的属性
**use4k**
  使用4级页表将地址区域映射为若干4K页
### `int mm_map_proc_page_table(ul proc_page_table_addr, bool is_phys, ul virt_addr_start, ul phys_addr_start, ul length, ul flags, bool user, bool flush, bool use4k)`
#### 描述
  将一段物理地址映射到指定页表的指定虚拟地址处
#### 参数
**proc_page_table_addr**
  指定的顶层页表的起始地址
**is_phys**
  该顶层页表地址是否为物理地址
**virt_addr_start**
  虚拟地址的起始地址
**phys_addr_start**
  物理地址的起始地址
**length**
  要映射的地址空间的长度
**flags**
  页表项的属性
**user**
  页面是否为用户态可访问
**flush**
  完成映射后是否刷新TLB
**use4k**
  使用4级页表将地址区域映射为若干4K页
#### 返回值
- 映射成功0
- 映射失败:-EFAULT
### `void mm_unmap_proc_table(ul proc_page_table_addr, bool is_phys, ul virt_addr_start, ul length)`
#### 描述
  取消给定页表中的指定地址空间的页表项映射。
#### 参数
**proc_page_table_addr**
  指定的顶层页表的基地址
**is_phys**
  该顶层页表地址是否为物理地址
**virt_addr_start**
  虚拟地址的起始地址
**length**
  要取消映射的地址空间的长度
### `mm_unmap_addr(virt_addr, length)`
#### 描述
  该宏定义用于取消当前进程的页表中的指定地址空间的页表项映射。
#### 参数
**virt_addr**
  虚拟地址的起始地址
**length**
  要取消映射的地址空间的长度
## 内存信息获取
### `struct mm_stat_t mm_stat()`
#### 描述
  获取计算机目前的内存空间使用情况
#### 参数
#### 返回值
  返回值是一个`mm_mstat_t`结构体,该结构体定义于`mm/mm.h`中。其中包含了以下信息(单位均为字节):
| 参数名 | 解释 |
| ---------- | ----------------------- |
| total | 计算机的总内存数量大小 |
| used | 已使用的内存大小 |
| free | 空闲物理页所占的内存大小 |
| shared | 共享的内存大小 |
| cache_used | 位于slab缓冲区中的已使用的内存大小 |
| cache_free | 位于slab缓冲区中的空闲的内存大小 |
| available | 系统总空闲内存大小包括kmalloc缓冲区 |

View File

@ -1,29 +0,0 @@
# 内存分配指南
  本文将讲述如何在内核中进行内存分配。在开始之前请您先了解一个基本点DragonOS的内核使用4KB的页来管理内存并且具有伙伴分配器和slab分配器。并且对用户空间、内核空间均具有特定的管理机制。
## 1. 安全的分配内存
  在默认情况下KernelAllocator被绑定为全局内存分配器它会根据请求分配的内存大小自动选择使用slab还是伙伴分配器。因此在内核中使用Rust原生的
内存分配函数,或者是创建一个`Box`对象等等,都是安全的。
## 2. 手动管理页帧
:::{warning}
**请格外小心!** 手动管理页帧脱离了Rust的内存安全机制因此可能会造成内存泄漏或者是内存错误。
:::
  在某些情况下,我们需要手动分配页帧。例如,我们需要在内核中创建一个新的页表,或者是在内核中创建一个新的地址空间。这时候,我们需要手动分配页帧。使用`LockedFrameAllocator``allocate()`函数能够分配在物理地址上连续的页帧。请注意由于底层使用的是buddy分配器因此页帧数目必须是2的n次幂且最大大小不超过1GB。
  当需要释放页帧的时候,使用`LockedFrameAllocator``deallocate()`函数,或者是`deallocate_page_frames()`函数,能够释放在物理地址上连续的页帧。
  当您需要映射页帧的时候,可使用`KernelMapper::lock()`函数获得一个内核映射器对象然后进行映射。由于KernelMapper是对PageMapper的封装因此您在获取KernelMapper之后可以使用PageMapper相关接口对内核空间的映射进行管理。
:::{warning}
**千万不要** 使用KernelMapper去映射用户地址空间的内存这会使得这部分内存脱离用户地址空间的管理从而导致内存错误。
:::
## 3. 为用户程序分配内存
  在内核中,您可以使用用户地址空间结构体(`AddressSpace`)的`mmap()`,`map_anonymous()`等函数为用户程序分配内存。这些函数会自动将用户程序的内存映射到用户地址空间中并且会自动创建VMA结构体。您可以使用`AddressSpace``munmap()`函数将用户程序的内存从用户地址空间中解除映射并且销毁VMA结构体。调整权限等操作可以使用`AddressSpace``mprotect()`函数。

View File

@ -1,14 +1,14 @@
.. _memory_management_module:
====================================
内存管理
内存管理文档
====================================
这里讲解了内存管理模块的一些设计及实现原理,以及相应的接口
这里讲解了内存管理模块的一些设计及实现原理。
如果你正在寻找使用内存管理模块的方法,请转到::ref:`内存管理API文档 <_core_mm_api>`
.. toctree::
:maxdepth: 1
intro
allocate-memory
mmio

View File

@ -1,20 +0,0 @@
# 内存管理模块简介
## 1. 概述
&emsp;&emsp;DragonOS实现了具有优秀架构设计的内存管理模块对内核空间和用户空间的内存映射、分配、释放、管理等操作进行了封装使得内核开发者可以更加方便地进行内存管理。
&emsp;&emsp;DragonOS的内存管理模块主要由以下类型的组件组成
- **硬件抽象层MemoryManagementArch** - 提供对具体处理器架构的抽象,使得内存管理模块可以在不同的处理器架构上运行
- **页面映射器PageMapper**- 提供对虚拟地址和物理地址的映射以及页表的创建、填写、销毁、权限管理等操作。分为两种类型内核页表映射器KernelMapper和用户页表映射器位于具体的用户地址空间结构中
- **页面刷新器PageFlusher** - 提供对页表的刷新操作(整表刷新、单页刷新、跨核心刷新)
- **页帧分配器FrameAllocator** - 提供对页帧的分配、释放、管理等操作。具体来说包括BumpAllocator、BuddyAllocator
- **小对象分配器** - 提供对小内存对象的分配、释放、管理等操作。指的是内核里面的SlabAllocator SlabAllocator的实现目前还没有完成
- **MMIO空间管理器** - 提供对MMIO地址空间的分配、管理操作。目前这个模块待进一步重构
- **用户地址空间管理机制** - 提供对用户地址空间的管理。
- VMA机制 - 提供对用户地址空间的管理包括VMA的创建、销毁、权限管理等操作
- 用户映射管理 - 与VMA机制共同作用管理用户地址空间的映射
- **系统调用层** - 提供对用户空间的内存管理系统调用包括mmap、munmap、mprotect、mremap等
- **C接口兼容层** - 提供对原有的C代码的接口使得C代码能够正常运行。

View File

@ -5,5 +5,4 @@
:maxdepth: 1
kthread
pcb
load_binary
pcb

View File

@ -1,15 +0,0 @@
# 加载程序
## 1. 二进制程序装载
&emsp;&emsp;在小节你将了解DragonOS的二进制程序加载器的原理。
&emsp;&emsp;DragonOS在装载二进制程序时执行了“探测-装载”的过程。
&emsp;&emsp;在探测阶段DragonOS会读取文件首部然后依次调用各个二进制加载器的探测函数判断该二进制程序是否适用于该加载器。如果适用则使用这个加载器进行装载。
&emsp;&emsp;在装载阶段DragonOS会使用上述加载器进行装载。装载器会将二进制程序的各个段映射到内存中并且得到二进制程序的入口地址。
:::{note}
目前DragonOS不支持动态链接因此所有的二进制程序都是静态链接的。并且暂时支持的只有ELF加载器。
:::