进程、线程
进程是资源分配的最小单位,线程是CPU调度的最小单位
进程(Process)
进程(Process)是计算机中的程序关于某数据集合上的一次运行活动,是系统进行资源分配和调度的基本单位,是操作系统结构的基础;
在早期面向进程设计的计算机结构中,进程是程序的基本执行实体;在当代面向线程设计的计算机结构中,进程是线程的容器;
程序是指令、数据及其组织形式的描述,进程是程序的实体;
线程(Thread)
线程(Thread),有时被称为轻量级进程(Lightweight Process,LWP),是程序执行流的最小单元;一个标准的线程由线程ID,当前指令指针(PC),寄存器集合和堆栈组成; 另外,线程是进程中的一个实体,是被系统独立调度和分派的基本单位,线程自己不拥有系统资源,只拥有一点儿在运行中必不可少的资源,但它可与同属一个进程的其它线程共享进程所拥有的全部资源;
一个线程可以创建和撤消另一个线程,同一进程中的多个线程之间可以并发执行;
由于线程之间的相互制约,致使线程在运行中呈现出间断性;
线程也有就绪、阻塞和运行三种基本状态:
- 就绪状态是指线程具备运行的所有条件,逻辑上可以运行,在等待处理机;
- 运行状态是指线程占有处理机正在运行;
- 阻塞状态是指线程在等待一个事件(如某个信号量),逻辑上不可执行;
每一个程序都至少有一个线程,若程序只有一个线程,那就是程序本身;
线程是程序中一个单一的顺序控制流程,进程内一个相对独立的、可调度的执行单元,是系统独立调度和分派CPU的基本单位指运行中的程序的调度单位;
在单个程序中同时运行多个线程完成不同的工作,称为多线程;
进程和线程的区别
- 地址空间和其它资源(如打开的文件):进程间相互独立,同一进程的各线程间共享;某进程内的线程在其它进程不可见;
- 通信:进程间通信IPC,线程间可以直接读写进程数据段(如全局变量)来进行通信(需要进程同步和互斥手段的辅助,以保证数据的一致性);
- 调度和切换:线程上下文切换比进程上下文切换要快得多;
- 在多线程OS中,进程不是一个可执行的实体;
linux的进程
ps命令来查看当前系统中运行的进程:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
$ ps -eo pid,ppid,comm,cmd | head
PID PPID COMMAND CMD
1 0 systemd /usr/lib/systemd/systemd --switched-root --system --deserialize 21
2 0 kthreadd [kthreadd]
3 2 ksoftirqd/0 [ksoftirqd/0]
5 2 kworker/0:0H [kworker/0:0H]
7 2 migration/0 [migration/0]
8 2 rcu_bh [rcu_bh]
9 2 rcu_sched [rcu_sched]
10 2 watchdog/0 [watchdog/0]
11 2 watchdog/1 [watchdog/1]
$ pstree
systemd─┬─NetworkManager───3*[{NetworkManager}]
├─agetty
├─auditd───{auditd}
├─chronyd
├─crond
├─dbus-daemon
├─irqbalance
├─lvmetad
├─polkitd───5*[{polkitd}]
├─rsyslogd───2*[{rsyslogd}]
├─sshd─┬─sshd───zsh───pstree
│ └─sshd───zsh
├─systemd-journal
├─systemd-logind
├─systemd-udevd
└─tuned───4*[{tuned}]
ps命令中:
pid表示进程的进程ID,ppid表示进程的父进程ID,comm是进程的简称,cmd是进程对应的程序以及运行时的参数
这里重点说一下pid = 1
的进程systemd
:
我使用的Linux发行版是CentOS 7,而CentOS 7最大的变化就是用
systemd
取代了sysvinit
; 在sysvinit
中:init
进程是所有进程的父进程;而在systemd
中,systemd
进程是所有进程的父进程; 为了叙述方便,我们还是用init
这个名,指代pid为1的进程,在sysvinit中是init,在systemd中是systemd;
当Linux启动的时候,init是系统创建的第一个进程,这一进程会一直存在,直到我们关闭计算机;
实际上,在开机的时候,内核(kernel)只建立了一个init进程;
Linux内核并不提供直接建立新进程的系统调用,剩下的所有进程都是init进程通过fork机制建立的;
新的进程要通过老的进程复制自身得到,这就是fork,fork是一个系统调用;
进程存活于内存中,每个进程都在内存中分配有属于自己的一片空间(address space);
当进程调用fork的时候,Linux在内存中开辟出一片新的内存空间给新的进程,并将老的进程空间中的内容复制到新的空间中,此后两个进程同时运行;
老进程成为新进程的父进程(parent process),而相应的,新进程就是老进程的子进程(child process);
一个进程除了有一个PID之外,还会有一个PPID(parent PID)来存储的父进程PID;
如果我们循着PPID不断向上追溯的话,总会发现其源头是init进程,所以说,所有的进程也构成一个以init为根的树状结构
pstree命令可以显示一个以init为根的进程树;
fork通常作为一个函数被调用,这个函数会有两次返回,将子进程的PID返回给父进程,0返回给子进程;
实际上,子进程总可以查询自己的PPID来知道自己的父进程是谁,这样,一对父进程和子进程就可以随时查询对方;
通常在调用fork函数之后,程序会设计一个if分支结构:
当PID等于0时,说明该进程为子进程,那么让它执行某些指令,比如说使用exec库函数(library function)来执行另一个程序;
而当PID为一个正整数时,说明为父进程,则执行另外一些指令;由此,就可以在子进程建立之后,让它执行与父进程不同的功能;
孤儿进程和僵尸进程
当子进程终结时,它会通知父进程,并清空自己所占据的内存,并在内核里留下自己的退出信息(exit code,如果顺利运行,为0;如果有错误或异常状况,为>0的整数);在这个信息里,会解释该进程为什么退出;
父进程在得知子进程终结时,有责任对该子进程使用wait系统调用,这个wait函数能从内核中取出子进程的退出信息,并清空该信息在内核中所占据的空间;
但是,如果父进程早于子进程终结,子进程就会成为一个孤儿(orphand)进程
;
孤儿进程会被过继给init进程,init进程也就成了该进程的父进程;init进程负责该子进程终结时调用wait函数;
当然,一个糟糕的程序也完全可能造成子进程的退出信息滞留在内核中的状况(父进程不对子进程调用wait函数);
这样的情况下,子进程成为僵尸(zombie)进程
;当大量僵尸进程积累时,内存空间会被挤占;
当进程退出,释放大多数资源和它的父进程收集它的返回值、释放剩余资源这两段时间之间,子进程处于一个特殊状态,被称为僵尸进程;
每个进程都会经过一个短暂的僵尸状态,僵尸进程的最大危害就是会占用宝贵的PID资源,如果不及时清理,会导致无法再创建新的进程;
僵尸进程的处理
查看僵尸进程:ps -ef | grep 'defunct' | grep -v 'grep'
僵尸进程的状态为Z
,一般我们很难直接用kill -9
杀死僵尸进程,不过我们可以kill -9
它们的父进程;
严格地来说,僵尸进程并不是问题的根源,罪魁祸首是产生出大量僵尸进程的那个父进程;
因此,当我们寻求如何消灭系统中大量的僵尸进程时,答案就是把产生大 量僵尸进程的那个元凶枪毙掉(也就是通过kill发送SIGTERM或者SIGKILL信号);
枪毙了元凶进程之后,它产生的僵尸进程就变成了孤儿进程,这些孤儿进程会被init进程接管,init进程会wait()这些孤儿进程,释放它们占用的系统进程表中的资源;
这样,这些已经僵死的孤儿进程就能瞑目而去了;
进程的基本操作
fork
pid_t fork(void);
:进程的创建
- 头文件:
unistd.h
- 返回值:执行成功:在父进程中返回子进程的pid,在子进程中返回0;执行失败:返回-1,并设置errno
头文件:unistd.h
pid_t getpid(void);
:获取当前进程的进程IDpid_t getppid(void);
:获取当前进程的父进程IDuid_t getuid(void);
:获取进程的实际用户IDuid_t geteuid(void);
:获取进程的有效用户IDgid_t getgid(void);
:获取进程的实际用户组IDgid_t getegid(void);
:获取进程的有效用户组ID
新进程的创建,首先在内存中为新进程创建一个task_struct
结构,然后将父进程的task_struct
内容复制其中,再修改部分数据:分配新的内核堆栈、新的PID、再将这个task_struct添加到链表中,所谓创建,实际上是“复制”;
子进程刚开始,内核并没有为它分配物理内存,而是以只读的方式共享父进程内存,只有当子进程写时,才复制;即copy-on-write
;fork都是由do_fork实现的;
一般来说,fork之后父、子进程执行顺序是不确定的,这取决于内核调度算法;进程之间实现同步需要进行进程通信;
一个简单的fork演示程序:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <unistd.h>
int main(void){
int n = 0;
printf("before fork: n = %d\n", n);
pid_t fpid = fork();
if(fpid < 0){
perror("fork error");
exit(EXIT_FAILURE);
}else if(fpid == 0){
n++;
printf("child_proc(%d, ppid=%d): n = %d\n", getpid(), getppid(), n);
}else{
n--;
printf("parent_proc(%d): n = %d\n", getpid(), n);
}
printf("quit_proc(%d) ... \n", getpid());
return 0;
}
1
2
3
4
5
6
7
8
$ gcc a.c
$ ./a.out
before fork: n = 0
parent_proc(5159): n = -1
quit_proc(5159) ...
child_proc(5160, ppid=5159): n = 1
quit_proc(5160) ...
fork相关事项
fork出的子进程会继承父进程的终止处理函数、信号处理设置;
但是在调用exec之后,终止处理函数和信号处理设置都会被清空;
fork和vfork
fork创建子进程,把父进程数据空间、堆和栈复制一份;
vfork创建子进程,与父进程内存数据共享;
vfork先保证子进程先执行,当子进程调用exit()或者exec后,父进程才往下执行;
为什么需要vfork?
因为用vfork时,一般都是紧接着调用exec,所以不会访问父进程数据空间,也就不需要在数据复制上花费时间了,因此vfork就是”为了exec而生“的;
但是后来的fork也学聪明了,不是一开始调用fork就复制数据,而是只有在子进程要修改数据的时候,才进行复制,即copy-on-write
;
所以我们现在也很少去用vfork,因为vfork的优势已经不复存在了;
wait、waitpid
pid_t wait(int *status);
:等待任意子进程退出,并捕获退出状态
- 头文件:
sys/wait.h
、sys/types.h
status
:输出参数,保存退出状态,可设置为NULL- 返回值:返回捕获到的子进程ID,失败返回-1,并设置errno
pid_t waitpid(pid_t pid, int *status, int options);
:等待子进程退出,并捕获退出状态
- 头文件:
sys/wait.h
、sys/types.h
pid
:输入参数,等待什么子进程:>0
:等待指定pid的子进程;0
:等待与当前进程同一组ID下的任意子进程;-1
:等待任意子进程;同wait();<-1
:等待组ID为pid绝对值的任意子进程;status
:输出参数,保存退出状态,可设置为NULLoptions
:输入参数,等待子进程的选项,可以为0、宏或宏的组合(使用按位或|
运算符):WNOHANG
:如果没有子进程终止就立即返回,返回值为0;WUNTRACED
:如果一个子进程stoped且没有被traced,那么立即返回;WCONTINUED
:如果stoped的子进程通过SIGCONT复苏,那么立即返回;- 返回值:成功返回捕获到的子进程ID,WNOHANG选项下若没捕获到子进程退出则返回0,失败返回-1,并设置errno
status
退出状态的相关宏:
WIFEXITED(status)
:如果子进程正常退出返回真WEXITSTATUS(status)
:返回子进程的退出码,当且仅当WIFEXITED为真时有效WIFSIGNALED(status)
:如果子进程被一个信号终止时返回真WTERMSIG(status)
:返回终止子进程的信号编号,当且仅当WIFSIGNALED为真时有效WCOREDUMP(status)
:如果子进程导致了”核心已转储”则返回真,当且仅当WIFSIGNALED为真时有效WIFSTOPPED(status)
:如果子进程被一个信号暂停时返回真,当且仅当调用进程使用WUNTRACED或子进程正在traced时有效WSTOPSIG(status)
:返回引起子进程暂停的信号编号,当且仅当WIFSTOPPED为真时有效WIFCONTINUED(status)
:如果子进程收到SIGCONT而复苏时返回真
处理子进程的退出有以下两种方式:
第一种:通过信号处理函数signal()
,如可以忽略子进程的SIGCHLD
信号来防止僵尸进程的产生:signal(SIGCHLD, SIG_IGN);
第二种:通过调用wait()
、waitpid()
函数,来回收子进程,防止产生僵尸进程,占用PID等宝贵的系统资源;
wait实例
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <unistd.h>
#include <sys/types.h>
#include <wait.h>
int main(void){
pid_t fpid = fork(), pid;
if(fpid < 0){
perror("fork error");
exit(EXIT_FAILURE);
}else if(fpid == 0){
sleep(5);
exit(5);
}else{
int stat;
for(;;){
pid = waitpid(fpid, &stat, WNOHANG);
if(pid > 0){
break;
}else{
printf("wait_child_proc ... \n");
sleep(1);
}
}
if(WIFEXITED(stat)){
printf("child_proc(%d): exit_code: %d\n", pid, WEXITSTATUS(stat));
}
}
return 0;
}
1
2
3
4
5
6
7
8
9
$ gcc a.c
$ ./a.out
wait_child_proc ...
wait_child_proc ...
wait_child_proc ...
wait_child_proc ...
wait_child_proc ...
child_proc(5716): exit_code: 5
exec系列函数
exec系统调用是以新的进程空间替换现在的进程空间,但是pid不变,还是原来的pid,相当于换了个身体,但是名字不变;
调用exec后,系统会申请一块新的进程空间来存放被调用的程序,然后当前进程会携带pid跳转到新的进程空间,并从main函数开始执行,旧的进程空间被回收;
exec是一个函数族,由6个函数组成:
头文件:unistd.h
int execl(const char *path, const char *arg, ...);
int execlp(const char *file, const char *arg, ...);
int execle(const char *path, const char *arg, ..., char *const envp[]);
int execv(const char *path, char *const argv[]);
int execvp(const char *file, char *const argv[]);
int execve(const char *path, char *const argv[], char *const envp[]);
先来看一下我们熟悉的main函数:
int main(int argc, char *argv[], char *envp[]);
argc
:命令行参数的个数,一个整数;argv
:命令行参数,一个字符串数组,数组最后一个元素为NULL;envp
:环境变量,一个字符串数组,数组最后一个元素为NULL;
再来看execve()
函数,其他的函数都是此函数的不同包装而已:
int execve(const char *path, char *const argv[], char *const envp[]);
有没有发现和main函数是如此的相似,第一个参数是目标程序的绝对路径,第二个参数是命令行参数,第三个参数是环境变量;
命令行参数和环境变量都是一个以NULL结尾的字符串数组,和main函数一样;
exec系列主要分为两大类:
- 以
execv
开头:argv参数是一个字符串数组的形式; - 以
execl
开头:argv参数是一个可变参数列表的形式;
细分又有三类:
- 不带后缀
e
:表示新进程继承旧进程的环境变量; - 带后缀
e
:表示新进程不继承旧进程的环境变量,环境变量由envp参数指定; - 带后缀
p
:表示第一个参数可以是一个程序名,该程序名可以在环境变量PATH中找到;
命令行参数argv的第0个元素是执行的文件名;
环境变量envp的每个元素都是KEY=VALUE
的形式,KEY
是变量名,VALUE
是变量的值;
返回值:执行成功没有返回值,因为原来的进程空间都没了,执行失败则返回-1,并设置errno
一个简单的例子:execlp("echo", "echo", "www.zfl9.com", NULL);
将执行命令echo www.zfl9.com
exit系列函数
正常终止:
- 从
main()
返回 - 调用
exit()
、_exit()
、_Exit()
- 最后一个线程从其启动例程返回
- 最后一个线程调用
pthread_exit()
异常终止:
- 调用
abort()
- 接到一个
信号
并终止 - 最后一个线程对取消请求作出响应
退出状态exit status
是我们传入到exit()
、_exit()
、_Exit()
函数的参数;
进程正常终止的情况下,内核将退出状态转变为终止状态以供父进程使用wait()
、waitpid()
等函数获取;
终止状态termination status
除了上述正常终止进程的情况外,还包括异常终止的情况;
如果进程异常终止,那么内核也会用一个指示其异常终止原因的终止状态来表示进程,当然,这种终止状态也可以由父进程的wait()
、waitpid()
进程捕获;
头文件:stdlib.h
void exit(int status);
void _Exit(int status);
头文件:unistd.h
void _exit(int status);
exit和_exit/_Exit的区别
exit是系统调用级别的,用于进程运行的过程中,随时结束进程;
return是语言级别的,用于调用堆栈的返回,返回上一层调用;
exit会调用终止处理程序和用户空间的标准I/O清理程序(如fclose),而_exit和_Exit不调用而直接由内核接管进行清理;
在main函数中调用exit(0)
等价于return 0
;
_exit()
函数的作用最为简单:直接使进程停止运行,清除其使用的内存空间,并销毁其在内核中的各种数据结构;
exit()
函数则在这些基础上作了一些包装,在执行退出之前加了若干道工序;
exit()
函数与_exit()
函数最大的区别就在于exit()
要检查文件的打开情况,把文件缓冲区中的内容写回文件,就是”清理I/O缓冲”;
atexit
按照ANSI C的规定,一个进程可以登记至多32个函数,这些函数将由exit自动调用;
我们称这些函数为终止处理程序(exit handler)
,并用atexit
函数来登记这些函数;
int atexit(void (*func)(void));
:登记终止处理函数
- 头文件:
stdlib.h
void (*func)(void)
:函数指针,该函数不接受任何参数,也不返回任何值;- 返回值:成功返回0,失败返回-1,并设置errno
exit以登记这些函数的相反顺序调用它们,同一函数如若登记多次,则也被调用多次;
根据ANSI C和POSIX.1,exit首先调用各终止处理程序,然后按需多次调用fclose,关闭所有打开的流;
exit例子
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <unistd.h>
#include <sys/types.h>
#include <sys/wait.h>
#include <signal.h>
void func1(void){
printf("<atexit> func1\n");
}
void func2(void){
printf("<atexit> func2\n");
}
void func3(void){
printf("<atexit> func3\n");
}
void func(int status, void *str){
printf("<on_exit> exit_code: %d, arg: %s\n", status, (char *)str);
}
int main(void){
signal(SIGCHLD, SIG_IGN);
on_exit(func, "on_exit3");
on_exit(func, "on_exit2");
on_exit(func, "on_exit1");
atexit(func3);
atexit(func2);
atexit(func1);
pid_t pid;
pid = fork();
if(pid < 0){
perror("fork error");
exit(EXIT_FAILURE);
}else if(pid == 0){
exit(0);
}else{
sleep(3);
}
return 0;
}
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
$ gcc a.c
$ ./a.out
<atexit> func1
<atexit> func2
<atexit> func3
<on_exit> exit_code: 0, arg: on_exit1
<on_exit> exit_code: 0, arg: on_exit2
<on_exit> exit_code: 0, arg: on_exit3
<atexit> func1
<atexit> func2
<atexit> func3
<on_exit> exit_code: 0, arg: on_exit1
<on_exit> exit_code: 0, arg: on_exit2
<on_exit> exit_code: 0, arg: on_exit3
daemon守护进程
Linux Daemon(守护进程)是运行在后台的一种特殊进程;
它独立于控制终端并且周期性地执行某种任务或等待处理某些发生的事件,它不需要用户输入就能运行而且提供某种服务,不是对整个系统就是对某个用户程序提供服务;
Linux系统的大多数服务器就是通过守护进程实现的,常见的守护进程包括系统日志进程syslogd、web服务器httpd、邮件服务器sendmail和数据库服务器mysqld等;
守护进程一般在系统启动时开始运行,除非强行终止,否则直到系统关机都保持运行,守护进程经常以超级用户(root)权限运行,因为它们要使用特殊的端口(1-1024)或访问某些特殊的资源;
一个守护进程的父进程是init进程,因为它真正的父进程在fork出子进程后就先于子进程exit退出了,所以它是一个由init继承的孤儿进程;
守护进程是非交互式程序,没有控制终端,所以任何输出,无论是向标准输出设备stdout还是标准出错设备stderr的输出都需要特殊处理;
守护进程的名称通常以d结尾,比如sshd、xinetd、crond等;
创建守护进程的一般步骤
- 在父进程中执行fork并exit退出;
- 在子进程中调用setsid函数创建新的会话;
- 在子进程中调用chdir函数,让根目录 ”/” 成为子进程的工作目录;
- 在子进程中调用umask函数,设置进程的umask为0;
- 在子进程中关闭任何不需要的文件描述符
其实我们完全可以用库函数daemon()
来创建守护进程:
头文件:unistd.h
int daemon(int nochdir, int noclose);
nochdir
:输入参数,当该参数为0时,改变进程的工作目录为根目录,否则不改变工作目录;noclose
:输入参数,当该参数为0时,stdin、stdout、stderr均重定向至/dev/null,否则不变;- 返回值:成功返回0,失败返回-1,并设置errno
daemon例子
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <unistd.h>
int main(void){
printf("before daemon ... \n");
if(daemon(0, 0) < 0){
perror("daemon error");
exit(EXIT_FAILURE);
}
printf("after daemon ... \n");
FILE *fp = fopen("/root/test.log", "a");
if(fp == NULL){
perror("fopen error");
exit(EXIT_FAILURE);
}
for(;;){
fprintf(fp, "A");
fflush(fp);
sleep(2);
}
return 0;
}
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
$ gcc a.c
$ ./a.out
before daemon ...
$ ps -ef | grep a.out
root 6538 1 0 09:26 ? 00:00:00 ./a.out
root 6545 1005 0 09:26 pts/0 00:00:00 grep --color=auto --exclude-dir=.bzr --exclude-dir=CVS --exclude-dir=.git --exclude-dir=.hg --exclude-dir=.svn a.out
$ pstree
systemd─┬─NetworkManager───2*[{NetworkManager}]
├─a.out
├─agetty
├─auditd───{auditd}
├─chronyd
├─crond
├─dbus-daemon
├─irqbalance
├─lvmetad
├─polkitd───5*[{polkitd}]
├─rsyslogd───2*[{rsyslogd}]
├─sshd─┬─sshd───zsh───pstree
│ └─sshd───zsh
├─systemd-journal
├─systemd-logind
├─systemd-udevd
└─tuned───4*[{tuned}]
$ cat /root/test.log
AAAAAAAAAAAAAAAAAA#
system()
头文件:stdlib.h
int system(const char *command);
:执行shell命令
system()函数调用/bin/sh来执行参数指定的命令,/bin/sh一般是一个软连接,指向某个具体的shell,比如bash;
-c选项是告诉shell从字符串command中读取并执行命令;
在该command执行期间,SIGCHLD是被阻塞的,好比在说:”hi,内核,这会不要给我发送SIGCHLD信号,等我忙完再说”;
在该command执行期间,SIGINT和SIGQUIT是被忽略的,意思是进程收到这两个信号后没有任何动作;
实际上system()函数执行了三步操作:
- fork一个子进程;
- 在子进程中调用exec函数去执行command;
- 在父进程中调用wait去等待子进程结束;
但是system的返回值太过复杂,一般我都会选择使用popen函数,popen函数随后介绍;
而且,对于system(),并不能获取命令执行的输出结果,只能得到执行的返回值;
system函数的例子:system("cat /etc/sysctl.conf");
;
popen()
标准I/O函数库提供了popen函数,它启动另外一个进程去执行一个shell命令行;
这里我们称调用popen的进程为父进程,由popen启动的进程称为子进程;
popen函数还创建一个管道用于父子进程间通信;父进程要么从管道读信息,要么向管道写信息,至于是读还是写取决于父进程调用popen时传递的参数;
下在给出popen、pclose的定义:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
#include <stdio.h>
FILE *popen(const char *command, const char *type);
/*
函数功能:popen()会调用fork()产生子进程,然后从子进程中调用/bin/sh -c来执行参数command的指令;
参数type可使用"r"代表读取,"w"代表写入;
依照此type值,popen()会建立管道连到子进程的标准输出设备或标准输入设备,然后返回一个文件指针;
随后进程便可利用此文件指针来读取子进程的输出设备或是写入到子进程的标准输入设备中;
返回值:若成功则返回文件指针,否则返回NULL,错误原因存于errno中
*/
int pclose(FILE *stream);
/*
函数功能:pclose()用来关闭由popen所建立的管道及文件指针;参数stream为先前由popen()所返回的文件指针;
返回值:若成功则返回shell的终止状态(也即子进程的终止状态),若出错返回-1,错误原因存于errno中;
*/
例子:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
int main(int argc, char *argv[]){
if(argc < 2){
fprintf(stderr, "usage: %s <cmd>\n", argv[0]);
exit(EXIT_FAILURE);
}
char output[1024+1];
FILE *pp = popen(argv[1], "r");
if(pp == NULL){
perror("popen error");
exit(EXIT_FAILURE);
}
int nread = fread(output, 1, 1024, pp);
int status = pclose(pp);
if(status < 0){
perror("pclose error");
exit(EXIT_FAILURE);
}
output[nread] = 0;
if(WIFEXITED(status)){
printf("status: %d\n%s", WEXITSTATUS(status), output);
}
return 0;
}
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
$ gcc a.c
$ ./a.out
usage: ./a.out <cmd>
$ ./a.out 'll 2>&1'
status: 127
sh: ll: command not found
$ ./a.out 'ls 2>&1'
status: 0
a.c
a.out
code
fproxy
include
lib
tmp
work
signal信号
信号(signal)是一种软中断,信号机制是进程间通信的一种方式,采用异步通信方式
Linux系统共定义了64种信号,分为两大类:可靠信号与不可靠信号,前32种信号为不可靠信号,后32种为可靠信号;
- 不可靠信号:也称为非实时信号,不支持排队,信号可能会丢失,比如发送多次相同的信号,进程只能收到一次;信号值取值区间为1~31;
- 可靠信号:也称为实时信号,支持排队,信号不会丢失,发多少次,就可以收到多少次;信号值取值区间为32~64;
在终端,可通过kill -l
查看所有的signal信号:
取值 | 名称 | 解释 | 补充 |
---|---|---|---|
1 | SIGHUP | 挂起 | – |
2 | SIGINT | 中断 | – |
3 | SIGQUIT | 退出 | – |
4 | SIGILL | 非法指令 | – |
5 | SIGTRAP | 断点或陷阱指令 | – |
6 | SIGABRT | abort发出的信号 | – |
7 | SIGBUS | 非法内存访问 | – |
8 | SIGFPE | 浮点异常 | – |
9 | SIGKILL | kill信号 | 不能被忽略、处理和阻塞 |
10 | SIGUSR1 | 用户信号1 | – |
11 | SIGSEGV | 无效内存访问 | – |
12 | SIGUSR2 | 用户信号2 | – |
13 | SIGPIPE | 管道破损,没有读端的管道写数据 | – |
14 | SIGALRM | alarm发出的信号 | – |
15 | SIGTERM | 终止信号 | – |
16 | SIGSTKFLT | 栈溢出 | – |
17 | SIGCHLD | 子进程退出 | 默认忽略 |
18 | SIGCONT | 进程继续 | – |
19 | SIGSTOP | 进程停止 | 不能被忽略、处理和阻塞 |
20 | SIGTSTP | 进程停止 | – |
21 | SIGTTIN | 进程停止,后台进程从终端读数据时 | – |
22 | SIGTTOU | 进程停止,后台进程想终端写数据时 | – |
23 | SIGURG | I/O有紧急数据到达当前进程 | 默认忽略– |
24 | SIGXCPU | 进程的CPU时间片到期 | – |
25 | SIGXFSZ | 文件大小的超出上限 | – |
26 | SIGVTALRM | 虚拟时钟超时 | – |
27 | SIGPROF | profile时钟超时 | – |
28 | SIGWINCH | 窗口大小改变 | 默认忽略 |
29 | SIGIO | I/O相关 | – |
30 | SIGPWR | 关机 | 默认忽略 |
31 | SIGSYS | 系统调用异常 | – |
对于signal信号,绝大部分的默认处理都是终止进程或停止进程,或dump内核映像转储;
上述的31的信号为非实时信号,其他的信号32-64 都是实时信号;
信号来源分为硬件类和软件类:
- 硬件方式
- 用户输入:比如在终端上按下组合键ctrl+c,产生SIGINT信号;
- 硬件异常:CPU检测到内存非法访问等异常,通知内核生成相应信号,并发送给发生事件的进程;
- 软件方式
- 通过系统调用,发送signal信号:kill()、raise()、sigqueue()、alarm()、setitimer()、abort();
- kernel,使用 kill_proc_info() 等;
- native,使用 kill() 或者 raise() 等;
- java,使用 Procees.sendSignal() 等;
进程对信号的处理方式有3种:
- 默认:接收到信号后按默认的行为处理该信号;这是多数应用采取的处理方式;
- 自定义:用自定义的信号处理函数来执行特定的动作;
- 忽略:接收到信号后不做任何反应;
进程处理某个信号前,需要先在进程中安装此信号;安装过程主要是建立信号值和进程对相应信息值的动作;
signal():不支持信号传递信息,主要用于非实时信号安装;
sigaction():支持信号传递信息,可用于所有信号安装;
signal()
头文件:signal.h
void (*signal(int signum, void (*handler)(int)))(int);
如果该函数原型不容易理解的话,可以参考下面的分解方式来理解:
typedef void (*sighandler_t)(int);
sighandler_t signal(int signum, sighandler_t handler);
第一个参数指定信号的值,可参照上表;
第二个参数指定对应的信号处理函数:
SIG_IGN
:忽略该信号;SIG_DFL
:采用系统默认方式处理信号;void (*func)(int)
:自定义的信号处理函数;
如果signal()调用成功,返回最后一次为安装信号signum而调用signal()时的handler值;失败则返回SIG_ERR;
signal例子
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <signal.h>
#include <unistd.h>
void handle_signal(int signum){
printf("received signal: %d\n", signum);
exit(0);
}
int main(void){
signal(SIGINT, handle_signal);
for(;;){
printf("running ... \n");
sleep(1);
}
return 0;
}
1
2
3
4
5
6
7
8
$ gcc a.c
$ ./a.out
running ...
running ...
running ...
running ...
^Creceived signal: 2
sigaction()
int sigaction(int signum, const struct sigaction *act, struct sigaction *oldact);
:安装信号处理函数
signum
:输入参数,要处理的信号值;act
:输入参数,新的处理方式,可为NULL;oldact
:输出参数,旧的处理方式,可为NULL;- 返回值:成功返回0,失败返回-1,并设置errno
struct sigaction
结构体:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
/* Structure describing the action to be taken when a signal arrives. */
struct sigaction
{
/* Signal handler. */
#ifdef __USE_POSIX199309
union
{
/* Used if SA_SIGINFO is not set. */
__sighandler_t sa_handler;
/* Used if SA_SIGINFO is set. */
void (*sa_sigaction) (int, siginfo_t *, void *);
}
__sigaction_handler;
# define sa_handler __sigaction_handler.sa_handler
# define sa_sigaction __sigaction_handler.sa_sigaction
#else
__sighandler_t sa_handler;
#endif
/* Additional set of signals to be blocked. */
__sigset_t sa_mask;
/* Special flags. */
int sa_flags;
/* Restore handler. */
void (*sa_restorer) (void);
};
主要看这三个成员:sa_handler
、sa_mask
、sa_flags
:
sa_handler
:函数指针,同signal()的第二个参数;sa_mask
:指定信号处理程序执行过程中需要阻塞的信号;sa_flags
:标示位,多个flag可用按位或|
连接,当使用sa_handler
时,通常将此参数置为0:SA_RESTART
:使被信号打断的syscall重新发起;SA_NOCLDSTOP
:使父进程在它的子进程暂停或继续运行时不会收到SIGCHLD
信号;SA_NOCLDWAIT
:使父进程在它的子进程退出时不会收到SIGCHLD
信号,这时子进程如果退出也不会成为僵尸进程;SA_NODEFER
:使对信号的屏蔽无效,即在信号处理函数执行期间仍能发出这个信号;SA_RESETHAND
:信号处理之后重新设置为默认的处理方式;SA_SIGINFO
:使用sa_sigaction成员而不是sa_handler作为信号处理函数;
信号集函数
sigemptyset(sigset_t *set)
:信号集全部清0;sigfillset(sigset_t *set)
:信号集全部置1,则信号集包含linux支持的64种信号;sigaddset(sigset_t *set, int signum)
:向信号集中加入signum信号;sigdelset(sigset_t *set, int signum)
:向信号集中删除signum信号;sigismember(const sigset_t *set, int signum)
:判定信号signum是否存在信号集中;
信号的发送
kill()
:用于向进程或进程组发送信号;sigqueue()
:只能向一个进程发送信号,不能像进程组发送信号;主要针对实时信号提出,与sigaction()组合使用,当然也支持非实时信号的发送;alarm()
:用于调用进程指定时间后发出SIGALARM
信号;setitimer()
:设置定时器,计时达到后给进程发送SIGALRM
信号,功能比alarm更强大;abort()
:向进程发送SIGABORT
信号,默认进程会异常退出;raise()
:用于向进程自身发送信号;
sigaction例子
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
#include <signal.h>
void handle_sig(int signo){
printf("got signal: %d\n", signo);
exit(0);
}
int main(void){
struct sigaction act;
act.sa_handler = handle_sig;
sigemptyset(&act.sa_mask);
act.sa_flags = 0;
sigaction(SIGINT, &act, NULL);
while(1){
printf("running ... \n");
sleep(1);
}
return 0;
}