进程管理模块重构完成 (#380)

* 添加新版pcb的数据结构 (#273)

* 将pcb中的内容分类,分别加锁 (#305)

* 进程管理重构:完成fork的主体逻辑 (#309)

1.完成fork的主体逻辑
2.将文件系统接到新的pcb上
3.经过思考,暂时弃用signal机制,待进程管理重构完成后,重写signal机制.原因是原本的signal机制太烂了

* chdir getcwd pid pgid ppid (#310)


---------

Co-authored-by: longjin <longjin@RinGoTek.cn>

* 删除旧的fork以及signal的代码,并调整fork/vfork/execve系统调用 (#325)

1.删除旧的fork
2.删除signal相关代码,等进程管理重构结束之后,再重新写.
3.调整了fork/vfork/execve系统调用

* 实现切换进程的代码 (#331)



* 实现切换进程的代码

* Patch modify preempt (#332)

* 修改设置preempt的代码

* 删除rust的list和refcount

* 为每个核心初始化idle进程 (#333)

* 为每个核心初始化idle进程

* 完成了新的内核线程机制 (#335)

* 调度器的pcb替换为新的Arc<ProcessControlBlock>,把调度器队列锁从 RwSpinLock 替换为了 SpinLock (#336)

* 把调度器的pcb替换为新的Arc<ProcessControlBlock>

* 把调度器队列锁从 RwSpinLock 替换为了 SpinLock ,修改了签名以通过编译

* 修正一些双重加锁、细节问题

---------

Co-authored-by: longjin <longjin@RinGoTek.cn>

* github workflow自动检查代码是否格式化

* cache toolchain yml

* 调整rust版本的waitqueue中的pcb为新版的pcb (#343)

* 解决设置rust workspace带来的“工具链不一致”的问题 (#344)


* 解决设置rust workspace带来的“工具链不一致”的问题

更改workflow

* 调整pcb的sched_info和rwlock,以避免调度器死锁问题 (#341)

* 调整pcb的sched_info和rwlock,以避免调度器死锁问题

* 修改为在 WriterGuard 中维护 Irq_guard

* 修正了 write_irqsave方法

* 优化了代码

* 把 set state 操作从 wakup 移动到 sched_enqueue 中

* 修正为在 wakeup 中设置 running ,以保留 set_state 的私有性

* 移除了 process_wakeup

* 实现进程退出的逻辑 (#340)

实现进程退出的逻辑

* 标志进程sleep

* 修复wakeup的问题

---------

Co-authored-by: longjin <longjin@RinGoTek.cn>

* rust 重构 completion (#350)

* 完成了completion的基本结构,待完善上级调用

* 用SpinLock保护结构体并发安全

* 修改原子变量为u32,修复符号错误

* irq guard

* 修改为具有内部可变性的结构体

* temp fix

* 修复了由于进程持有自旋锁导致的不被调度的问题

* 对 complete 系列方法上锁,保护 done 数据并发安全

* 移除了未使用的依赖

* 重写显示刷新驱动 (#363)

* 重构显示刷新驱动

* Patch refactor process management (#366)

* 维护进程树

* 维护进程树

* 更改代码结构

* 新建进程时,设置cwd

* 调整adopt childern函数,降低开销

---------

Co-authored-by: longjin <longjin@RinGoTek.cn>

* waitqueue兼容C部分 (#351)

* PATH

* safe init

* waitqueue兼容C部分

* waitqueue兼容C部分

* 删除semaphore.c,在ps2_keyboard中使用waitqueue

* 删除semaphore.c,在ps2_keyboard中使用waitqueue

* current_pcb的C兼容

* current_pcb的C兼容

* current_pcb的C兼容

* fmt

* current_pcb的兼容

* 针对修改

* 调整代码

* fmt

* 删除pcb的set flags

* 更改函数名

---------

Co-authored-by: longjin <longjin@RinGoTek.cn>

* merge master

* Patch debug process management refactor (#372)

* 能够调通,执行完textui_init

* 能跑到initial kernel thread

* fmt

* 能够正常初始化所有服务(尚未能切换到用户程序)

* 删除部分无用的extern

* 存在问题:ap处理器启动后,bsp的smp_init函数return之后就出错了,怀疑是栈损坏

* 解决smp启动由于未换栈导致的内存访问错误

* debug

* 1

* 1

* lock no preempt

* 调通

* 优化代码,删除一些调试日志

* fix

* 使用rust重写wait4 (#377)

* 维护进程树

* 维护进程树

* 更改代码结构

* 新建进程时,设置cwd

* 调整adopt childern函数,降低开销

* wait4

* 删除c_sys_wait4

* 使用userbuffer保护裸指针

---------

Co-authored-by: longjin <longjin@RinGoTek.cn>

* 消除warning

* 1. 修正未设置cpu executing的问题

* 修正kthread机制可能存在的内存泄露问题

* 删除pcb文档

* 删除C的tss struct

---------

Co-authored-by: Bullet <93781792+GP-Bullet@users.noreply.github.com>
Co-authored-by: Chiichen <39649411+Chiichen@users.noreply.github.com>
Co-authored-by: hanjiezhou <zhouhanjie@dragonos.org>
Co-authored-by: GnoCiYeH <118462160+GnoCiYeH@users.noreply.github.com>
Co-authored-by: houmkh <1119644616@qq.com>
This commit is contained in:
LoGin
2023-09-15 14:58:19 +08:00
committed by GitHub
parent b087521e07
commit 1496ba7b24
153 changed files with 4895 additions and 8190 deletions

View File

@ -1,356 +1,15 @@
use core::{
ffi::c_void,
mem::ManuallyDrop,
ptr::{null_mut, read_volatile, write_volatile},
};
use alloc::{boxed::Box, sync::Arc};
use crate::{
arch::asm::current::current_pcb,
filesystem::vfs::{
file::{File, FileDescriptorVec, FileMode},
FileType, ROOT_INODE,
file::{File, FileMode},
ROOT_INODE,
},
include::bindings::bindings::{
process_control_block, CLONE_FS, PROC_INTERRUPTIBLE, PROC_RUNNING, PROC_STOPPED,
PROC_UNINTERRUPTIBLE,
},
libs::casting::DowncastArc,
mm::ucontext::AddressSpace,
net::socket::SocketInode,
sched::core::{cpu_executing, sched_enqueue},
smp::core::{smp_get_processor_id, smp_send_reschedule},
process::{Pid, ProcessManager},
syscall::SystemError,
};
use super::preempt::{preempt_disable, preempt_enable};
/// 判断进程是否已经停止
#[no_mangle]
pub extern "C" fn process_is_stopped(pcb: *const process_control_block) -> bool {
let state: u64 = unsafe { read_volatile(&(*pcb).state) } as u64;
if (state & (PROC_STOPPED as u64)) != 0 {
return true;
} else {
return false;
}
}
/// @brief 尝试唤醒指定的进程。
/// 本函数的行为If (@_state & @pcb->state) @pcb->state = TASK_RUNNING.
///
/// @param _pcb 要被唤醒的进程的pcb
/// @param _state 如果pcb的state与_state匹配则唤醒这个进程
/// @param _wake_flags 保留暂未使用请置为0
/// @return true: 成功唤醒
/// false: 不符合唤醒条件,无法唤醒
#[no_mangle]
pub extern "C" fn process_try_to_wake_up(
_pcb: *mut process_control_block,
_state: u64,
_wake_flags: i32,
) -> bool {
preempt_disable();
let mut retval = false;
// 获取对pcb的可变引用
let pcb = unsafe { _pcb.as_mut() }.unwrap();
// 如果要唤醒的就是当前的进程
if current_pcb() as *mut process_control_block as usize == _pcb as usize {
unsafe {
write_volatile(&mut pcb.state, PROC_RUNNING as u64);
}
preempt_enable();
retval = true;
return retval;
}
// todo: 将来调度器引入ttwu队列之后需要修改这里的判断条件
// todo: 为pcb引入pi_lock,然后在这里加锁
if unsafe { read_volatile(&pcb.state) } & _state != 0 {
// 可以wakeup
unsafe {
write_volatile(&mut pcb.state, PROC_RUNNING as u64);
}
sched_enqueue(pcb, true);
retval = true;
}
// todo: 对pcb的pi_lock放锁
preempt_enable();
return retval;
}
/// @brief 当进程,满足 (@state & @pcb->state)时,唤醒进程,并设置: @pcb->state = TASK_RUNNING.
///
/// @return true 唤醒成功
/// @return false 唤醒失败
#[no_mangle]
pub extern "C" fn process_wake_up_state(pcb: *mut process_control_block, state: u64) -> bool {
return process_try_to_wake_up(pcb, state, 0);
}
/// @brief 让一个正在cpu上运行的进程陷入内核
pub fn process_kick(pcb: *mut process_control_block) {
preempt_disable();
let cpu = process_cpu(pcb);
// 如果给定的进程正在别的核心上执行,则立即发送请求,让它陷入内核态,以及时响应信号。
if cpu != smp_get_processor_id() && process_is_executing(pcb) {
smp_send_reschedule(cpu);
}
preempt_enable();
}
/// @brief 获取给定的进程在哪个cpu核心上运行(使用volatile避免编译器优化)
#[inline]
pub fn process_cpu(pcb: *const process_control_block) -> u32 {
unsafe { read_volatile(&(*pcb).cpu_id) }
}
/// @brief 判断给定的进程是否正在处理器上执行
///
/// @param pcb 进程的pcb
#[inline]
pub fn process_is_executing(pcb: *const process_control_block) -> bool {
return cpu_executing(process_cpu(pcb)) as *const process_control_block == pcb;
}
impl process_control_block {
/// @brief 初始化进程PCB的文件描述符数组。
/// 请注意,如果当前进程已经有文件描述符数组,那么本操作将被禁止
pub fn init_files(&mut self) -> Result<(), SystemError> {
if self.fds != null_mut() {
// 这个操作不被允许,否则会产生内存泄露。
// 原因是C的pcb里面文件描述符数组的生命周期是static的如果继续执行会产生内存泄露的问题。
return Err(SystemError::EPERM);
}
let fd_vec: &mut FileDescriptorVec = Box::leak(FileDescriptorVec::new());
self.fds = fd_vec as *mut FileDescriptorVec as usize as *mut c_void;
return Ok(());
}
/// @brief 拷贝进程的文件描述符
///
/// @param clone_flags 进程fork的克隆标志位
/// @param from 源pcb。从它里面拷贝文件描述符
///
/// @return Ok(()) 拷贝成功
/// @return Err(SystemError) 拷贝失败,错误码
pub fn copy_files(
&mut self,
clone_flags: u64,
from: &'static process_control_block,
) -> Result<(), SystemError> {
// 不拷贝父进程的文件描述符
if clone_flags & CLONE_FS as u64 != 0 {
// 由于拷贝pcb的时候直接copy的指针因此这里置为空
self.fds = null_mut();
self.init_files()?;
return Ok(());
}
// 获取源pcb的文件描述符数组的引用
let old_fds: &mut FileDescriptorVec = if let Some(o_fds) = FileDescriptorVec::from_pcb(from)
{
o_fds
} else {
return self.init_files();
};
// 拷贝文件描述符数组
let new_fd_vec: &mut FileDescriptorVec = Box::leak(old_fds.clone());
self.fds = new_fd_vec as *mut FileDescriptorVec as usize as *mut c_void;
return Ok(());
}
/// @brief 释放文件描述符数组。本函数会drop掉整个文件描述符数组并把pcb的fds字段设置为空指针。
pub fn exit_files(&mut self) -> Result<(), SystemError> {
if self.fds.is_null() {
return Ok(());
}
let old_fds: Box<FileDescriptorVec> =
unsafe { Box::from_raw(self.fds as *mut FileDescriptorVec) };
drop(old_fds);
self.fds = null_mut();
return Ok(());
}
/// @brief 申请文件描述符,并把文件对象存入其中。
///
/// @param file 要存放的文件对象
/// @param fd 如果为Some(i32)表示指定要申请这个文件描述符如果这个文件描述符已经被使用那么返回EBADF
///
/// @return Ok(i32) 申请到的文件描述符编号
/// @return Err(SystemError) 申请失败返回错误码并且file对象将被drop掉
pub fn alloc_fd(&mut self, file: File, fd: Option<i32>) -> Result<i32, SystemError> {
// 获取pcb的文件描述符数组的引用
let fds: &mut FileDescriptorVec =
if let Some(f) = FileDescriptorVec::from_pcb(current_pcb()) {
f
} else {
// 如果进程还没有初始化文件描述符数组,那就初始化它
self.init_files().ok();
let r: Option<&mut FileDescriptorVec> = FileDescriptorVec::from_pcb(current_pcb());
if r.is_none() {
drop(file);
// 初始化失败
return Err(SystemError::EFAULT);
}
r.unwrap()
};
if fd.is_some() {
// 指定了要申请的文件描述符编号
let new_fd = fd.unwrap();
let x = &mut fds.fds[new_fd as usize];
if x.is_none() {
*x = Some(Box::new(file));
return Ok(new_fd);
} else {
return Err(SystemError::EBADF);
}
} else {
// 寻找空闲的文件描述符
let mut cnt = 0;
for x in fds.fds.iter_mut() {
if x.is_none() {
*x = Some(Box::new(file));
return Ok(cnt);
}
cnt += 1;
}
return Err(SystemError::ENFILE);
}
}
/// @brief 根据文件描述符序号,获取文件结构体的可变引用
///
/// @param fd 文件描述符序号
///
/// @return Option(&mut File) 文件对象的可变引用
pub fn get_file_mut_by_fd(&self, fd: i32) -> Option<&mut File> {
if !FileDescriptorVec::validate_fd(fd) {
return None;
}
let r: &mut FileDescriptorVec = FileDescriptorVec::from_pcb(current_pcb()).unwrap();
return r.fds[fd as usize].as_deref_mut();
}
/// @brief 根据文件描述符序号,获取文件结构体的不可变引用
///
/// @param fd 文件描述符序号
///
/// @return Option(&File) 文件对象的不可变引用
#[allow(dead_code)]
pub fn get_file_ref_by_fd(&self, fd: i32) -> Option<&File> {
if !FileDescriptorVec::validate_fd(fd) {
return None;
}
let r: &mut FileDescriptorVec = FileDescriptorVec::from_pcb(current_pcb()).unwrap();
return r.fds[fd as usize].as_deref();
}
/// @brief 释放文件描述符,同时关闭文件。
///
/// @param fd 文件描述符序号
pub fn drop_fd(&self, fd: i32) -> Result<(), SystemError> {
// 判断文件描述符的数字是否超过限制
if !FileDescriptorVec::validate_fd(fd) {
return Err(SystemError::EBADF);
}
let r: &mut FileDescriptorVec = FileDescriptorVec::from_pcb(current_pcb()).unwrap();
let f: Option<&File> = r.fds[fd as usize].as_deref();
if f.is_none() {
// 如果文件描述符不存在,报错
return Err(SystemError::EBADF);
}
// 释放文件
drop(f);
// 把文件描述符数组对应位置设置为空
r.fds[fd as usize] = None;
return Ok(());
}
/// @brief 标记当前pcb已经由其他机制进行管理调度器将不会将他加入队列(且进程可以被信号打断)
/// 当我们要把一个进程,交给其他机制管理时,那么就应该调用本函数。
///
/// 由于本函数可能造成进程不再被调度因此标记为unsafe
#[allow(dead_code)]
pub unsafe fn mark_sleep_interruptible(&mut self) {
self.state = PROC_INTERRUPTIBLE as u64;
}
/// @brief 标记当前pcb已经由其他机制进行管理调度器将不会将他加入队列(且进程不可以被信号打断)
/// 当我们要把一个进程,交给其他机制管理时,那么就应该调用本函数
///
/// 由于本函数可能造成进程不再被调度因此标记为unsafe
#[allow(dead_code)]
pub unsafe fn mark_sleep_uninterruptible(&mut self) {
self.state = PROC_UNINTERRUPTIBLE as u64;
}
/// @brief 根据文件描述符序号获取socket对象的可变引用
///
/// @param fd 文件描述符序号
///
/// @return Option(&mut Box<dyn Socket>) socket对象的可变引用. 如果文件描述符不是socket那么返回None
pub fn get_socket(&self, fd: i32) -> Option<Arc<SocketInode>> {
let f = self.get_file_mut_by_fd(fd)?;
if f.file_type() != FileType::Socket {
return None;
}
let socket: Arc<SocketInode> = f
.inode()
.downcast_arc::<SocketInode>()
.expect("Not a socket inode");
return Some(socket);
}
/// 释放pcb中存储的地址空间的指针
pub unsafe fn drop_address_space(&mut self) {
let p = self.address_space as *const AddressSpace;
if p.is_null() {
return;
}
let p: Arc<AddressSpace> = Arc::from_raw(p);
drop(p);
self.address_space = null_mut();
}
/// 设置pcb中存储的地址空间的指针
///
/// ## panic
/// 如果当前pcb已经有地址空间那么panic
pub unsafe fn set_address_space(&mut self, address_space: Arc<AddressSpace>) {
assert!(self.address_space.is_null(), "Address space already set");
self.address_space = Arc::into_raw(address_space) as *mut c_void;
}
/// 获取当前进程的地址空间的指针
pub fn address_space(&self) -> Option<Arc<AddressSpace>> {
let ptr = self.address_space as *const AddressSpace;
if ptr.is_null() {
return None;
}
// 为了防止pcb中的指针被释放这里需要将其包装一下使得Arc的drop不会被调用
let arc_wrapper = ManuallyDrop::new(unsafe { Arc::from_raw(ptr) });
let result = Arc::clone(&arc_wrapper);
return Some(result);
}
}
/// @brief 初始化pid=1的进程的stdio
pub fn init_stdio() -> Result<(), SystemError> {
if current_pcb().pid != 1 {
pub fn stdio_init() -> Result<(), SystemError> {
if ProcessManager::current_pcb().pid() != Pid(1) {
return Err(SystemError::EPERM);
}
let tty_inode = ROOT_INODE()
@ -366,8 +25,29 @@ pub fn init_stdio() -> Result<(), SystemError> {
/*
按照规定进程的文件描述符数组的前三个位置分别是stdin, stdout, stderr
*/
assert_eq!(current_pcb().alloc_fd(stdin, None).unwrap(), 0);
assert_eq!(current_pcb().alloc_fd(stdout, None).unwrap(), 1);
assert_eq!(current_pcb().alloc_fd(stderr, None).unwrap(), 2);
assert_eq!(
ProcessManager::current_pcb()
.fd_table()
.write()
.alloc_fd(stdin, None)
.unwrap(),
0
);
assert_eq!(
ProcessManager::current_pcb()
.fd_table()
.write()
.alloc_fd(stdout, None)
.unwrap(),
1
);
assert_eq!(
ProcessManager::current_pcb()
.fd_table()
.write()
.alloc_fd(stderr, None)
.unwrap(),
2
);
return Ok(());
}