Linux：文件描述符详解

相关阅读

Linuxicon-default.png?t=O83Ahttps://blog.csdn.net/weixin_45791458/category_12234591.html?spm=1001.2014.3001.5482

        Linux中的所有进程，都拥有自己的文件描述符(File Descriptor, FD)，它是操作系统在管理进程和文件时的一种抽象概念。每个文件描述符由一个非负整数表示，用来标识进程已打开的文件、输入输出流、网络套接字等资源。一个进程可以打开的文件描述符是有上限的，可以通过ulimit命令查询，如例1所示。

# 例1
zhangchen@test:~$ ulimit -n # 查询当每个进程的文件描述符数量上限
1048576

        每个正在运行的进程，都会在虚拟文件系统的目录/proc下用一个子目录表示，目录名为进程的id号。当一个进程创建时，操作系统会为其分配一个未使用的id号并在目录/proc下创建相应的目录；当一个进程执行完毕退出时，操作系统会删除相应的目录并回收id号。

        在目录/proc/pid/fd(pid指具体的进程id号)中，可以找到名为0、1、2...的链接文件，它们指向了相应的文件描述符代表的资源，例2展示了如何查看当前Bash进程的文件描述符。

# 例2
zhangchen@test:~$ ps   # 查询Bash进程的id号PID TTY          TIME CMD
2556994 pts/3    00:00:00 bash
2557252 pts/3    00:00:00 ps
zhangchen@test:~$ ls -al /proc/2556994/fd   # 显示虚拟文件系统中bash进程的文件描述符目录
lrwx------ 1 zhangchen test 64  9月 20 13:53 0 -> /dev/pts/3
lrwx------ 1 zhangchen test 64  9月 20 13:53 1 -> /dev/pts/3
lrwx------ 1 zhangchen test 64  9月 20 13:53 2 -> /dev/pts/3
lrwx------ 1 zhangchen test 64  9月 20 13:53 255 -> /dev/pts/3

        其中文件描述符0、1、2尤为重要，它们是所有进程在创建时就默认拥有的文件描述符，分别表示标准输入(stdin)、标准输出(stdout)和标准错误输出(stderr)。从例2中可以看出它们都指向了/dev/pts/0这个伪终端设备(Pseudo-Terminal Slave)，这是因为该终端是从GUI界面启动的（ssh远程连接的终端也是如此），如果是利用Ctrl+Alt+F*启动的终端，则会显示是/dev/tty*之类的设备。

        在目录/dev下可以找到三个链接文件stdin、stdout和stderr，它们指向了当前进程的文件描述符0、1、2，如例3所示。

# 例3
zhangchen@test:~$ ls -al /dev/std* # 查询标准输入、输出、错误设备
lrwxrwxrwx 1 root root 15  7月 12 17:37 /dev/stderr -> /proc/self/fd/2
lrwxrwxrwx 1 root root 15  7月 12 17:37 /dev/stdin -> /proc/self/fd/0
lrwxrwxrwx 1 root root 15  7月 12 17:37 /dev/stdout -> /proc/self/fd/1

        其中/proc/self是一个链接文件，指向了当前进程的目录，也就是说如果使用ls /proc命令，则显示其指向的是进程ls的目录，如例4所示。

# 例4
zhangchen@test:~$ ls -al /proc/self  # 查询当前进程(即ls)的信息
lrwxrwxrwx 1 root root 0  7月 12 17:37 /proc/self -> 2557940 # 指向了/proc/2557940zhangchen@test:~$ ls -al /proc/self  # 查询当前进程(即ls)的信息
lrwxrwxrwx 1 root root 0  7月 12 17:37 /proc/self -> 2557972 # 指向了/proc/2557972zhangchen@test:~$ ls -al /proc/self  # 查询当前进程(即ls)的信息
lrwxrwxrwx 1 root root 0  7月 12 17:37 /proc/self -> 2557975 # 指向了/proc/2557975

        从例4中可以看出 ，连续三次使用ls命令得到的结果是不同的，这是因为每次执行ls命令都会创建一个新的进程并分配给一个未使用的id号（它们可能相等，因为执行完毕后id号会被回收，但在该例中不相等）。
        有些偏题了，我们回到文件描述符，当创建了一个新的终端并查询其文件描述符时，会发现文件描述符0、1、2指向了另一个伪终端设备/dev/pts/8，如例5所示。

# 例5
zhangchen@test:~$ ps   # 查询Bash进程的id号PID TTY          TIME CMD
2559706 pts/3    00:00:00 bash
2559728 pts/3    00:00:00 ps
zhangchen@test:~$ ls -al /proc/2559706/fd   # 显示虚拟文件系统中Bash进程的文件描述符目录
lrwx------ 1 zhangchen test 64  9月 20 13:54 0 -> /dev/pts/8
lrwx------ 1 zhangchen test 64  9月 20 13:54 1 -> /dev/pts/8
lrwx------ 1 zhangchen test 64  9月 20 13:54 2 -> /dev/pts/8
lrwx------ 1 zhangchen test 64  9月 20 13:54 255 -> /dev/pts/8

        默认情况下，子进程被创建并替换后会继承父进程的文件描述符（可以通过设置FD_CLOEXEC标志改变替换后是否继承文件描述符），为了进行验证，首先介绍一个命令exec。exec命令可以用于进程替换，也可用于操作Bash进程的文件描述符，如例6所示。在此基础上如果使用sleep 100 &命令，查询其文件描述符会发现与Bash进程的相同，如例7所示。

# 例6
zhangchen@test:~$ exec 3> output.txt   # 在当前Bash进程以写方式打开output.txt文件，分配文件描述符3
zhangchen@test:~$ ps   # 查询Bash进程的id号PID TTY          TIME CMD
2559706 pts/3    00:00:00 bash
2559947 pts/3    00:00:00 ps
zhangchen@test:~$ ls -al /proc/2559706/fd   # 显示虚拟文件系统中Bash进程的文件描述符目录
lrwx------ 1 zhangchen test 64  9月 20 13:54 0 -> /dev/pts/8
lrwx------ 1 zhangchen test 64  9月 20 13:54 1 -> /dev/pts/8
lrwx------ 1 zhangchen test 64  9月 20 13:54 2 -> /dev/pts/8
lrwx------ 1 zhangchen test 64  9月 20 13:54 255 -> /dev/pts/8
l-wx------ 1 zhangchen test 64  9月 20 17:02 3 -> /home/zhangchen/output.txt
# 例7
zhangchen@test:~$ sleep 100 & # 一个后台执行的测试命令
[1] 2560074
zhangchen@test:~$ ls -al /proc/2560074/fd   # 显示虚拟文件系统中sleep进程的文件描述符目录
lrwx------ 1 zhangchen test 64  9月 20 17:03 0 -> /dev/pts/8
lrwx------ 1 zhangchen test 64  9月 20 17:03 1 -> /dev/pts/8
lrwx------ 1 zhangchen test 64  9月 20 17:03 2 -> /dev/pts/8
lrwx------ 1 zhangchen test 64  9月 20 17:03 255 -> /dev/pts/8
l-wx------ 1 zhangchen test 64  9月 20 17:03 3 -> /home/zhangchen/output.txt

        例8展示了在Python中打开一个文件，并显示其文件描述符。

# 例8
# 文件：test.pyimport time
file = open('example.txt', 'w') # 打开文件
fd = file.fileno() # 获取文件描述符
print("File descriptor assigned: {}".format(fd)) # 输出文件描述符
time.sleep(60) # 等待60秒
file.close() # 关闭文件zhangchen@test:~$ python test.py & # 一个后台执行的Python进程
[2] 11491
File descriptor assigned: 3
zhangchen@test:~$ ls -al /proc/11491/fd   # 显示虚拟文件系统中python进程的文件描述符目录
lrwx------ 1 zhangchen test 64  9月 20 17:06 0 -> /dev/pts/0
lrwx------ 1 zhangchen test 64  9月 20 17:06 1 -> /dev/pts/0
lrwx------ 1 zhangchen test 64  9月 20 17:06 2 -> /dev/pts/0
l-wx------ 1 zhangchen test 64  9月 20 17:06 3 -> /home/zhangchen/example.txt

        看起来像是Linux会选择优先当前未使用最小的文件描述符，这是对的！但是否Python进程只打开过example.txt一个文件？答案是否定的（显然，Python进程肯定还打开了test.py文件）。

        一个命令的执行可能牵涉到多次打开文件、关闭文件的过程，例9使用了strace命令观察了cat命令执行的过程。

# 例9
zhangchen@test:~$ strace cat tt
execve("/usr/bin/cat", ["cat", "tt"], 0x7fff10389408 /* 67 vars */) = 0
brk(NULL)                               = 0x1472000
mmap(NULL, 4096, PROT_READ|PROT_WRITE, MAP_PRIVATE|MAP_ANONYMOUS, -1, 0) = 0x7f8c9f2f0000
access("/etc/ld.so.preload", R_OK)      = -1 ENOENT (No such file or directory)
open("/opt/Synopsys/LC2018/lc/O-2018.06-SP1/linux64/lc/shlib/tls/x86_64/libc.so.6", O_RDONLY|O_CLOEXEC) = -1 ENOENT (No such file or directory)
stat("/opt/Synopsys/LC2018/lc/O-2018.06-SP1/linux64/lc/shlib/tls/x86_64", 0x7ffe8d6e3750) = -1 ENOENT (No such file or directory)
open("/opt/Synopsys/LC2018/lc/O-2018.06-SP1/linux64/lc/shlib/tls/libc.so.6", O_RDONLY|O_CLOEXEC) = -1 ENOENT (No such file or directory)
stat("/opt/Synopsys/LC2018/lc/O-2018.06-SP1/linux64/lc/shlib/tls", 0x7ffe8d6e3750) = -1 ENOENT (No such file or directory)
open("/opt/Synopsys/LC2018/lc/O-2018.06-SP1/linux64/lc/shlib/x86_64/libc.so.6", O_RDONLY|O_CLOEXEC) = -1 ENOENT (No such file or directory)
stat("/opt/Synopsys/LC2018/lc/O-2018.06-SP1/linux64/lc/shlib/x86_64", 0x7ffe8d6e3750) = -1 ENOENT (No such file or directory)
open("/opt/Synopsys/LC2018/lc/O-2018.06-SP1/linux64/lc/shlib/libc.so.6", O_RDONLY|O_CLOEXEC) = -1 ENOENT (No such file or directory)
stat("/opt/Synopsys/LC2018/lc/O-2018.06-SP1/linux64/lc/shlib", {st_mode=S_IFDIR|0777, st_size=4096, ...}) = 0
open("/etc/ld.so.cache", O_RDONLY|O_CLOEXEC) = 3
fstat(3, {st_mode=S_IFREG|0644, st_size=126574, ...}) = 0
mmap(NULL, 126574, PROT_READ, MAP_PRIVATE, 3, 0) = 0x7f8c9f2d1000
close(3)                                = 0
open("/lib64/libc.so.6", O_RDONLY|O_CLOEXEC) = 3
read(3, "\177ELF\2\1\1\3\0\0\0\0\0\0\0\0\3\0>\0\1\0\0\0`&\2\0\0\0\0\0"..., 832) = 832
fstat(3, {st_mode=S_IFREG|0755, st_size=2156240, ...}) = 0
mmap(NULL, 3985920, PROT_READ|PROT_EXEC, MAP_PRIVATE|MAP_DENYWRITE, 3, 0) = 0x7f8c9ed02000
mprotect(0x7f8c9eec5000, 2097152, PROT_NONE) = 0
mmap(0x7f8c9f0c5000, 24576, PROT_READ|PROT_WRITE, MAP_PRIVATE|MAP_FIXED|MAP_DENYWRITE, 3, 0x1c3000) = 0x7f8c9f0c5000
mmap(0x7f8c9f0cb000, 16896, PROT_READ|PROT_WRITE, MAP_PRIVATE|MAP_FIXED|MAP_ANONYMOUS, -1, 0) = 0x7f8c9f0cb000
close(3)                                = 0
mmap(NULL, 4096, PROT_READ|PROT_WRITE, MAP_PRIVATE|MAP_ANONYMOUS, -1, 0) = 0x7f8c9f2d0000
mmap(NULL, 8192, PROT_READ|PROT_WRITE, MAP_PRIVATE|MAP_ANONYMOUS, -1, 0) = 0x7f8c9f2ce000
arch_prctl(ARCH_SET_FS, 0x7f8c9f2ce740) = 0
mprotect(0x7f8c9f0c5000, 16384, PROT_READ) = 0
mprotect(0x60b000, 4096, PROT_READ)     = 0
mprotect(0x7f8c9f2f1000, 4096, PROT_READ) = 0
munmap(0x7f8c9f2d1000, 126574)          = 0
brk(NULL)                               = 0x1472000
brk(0x1493000)                          = 0x1493000
brk(NULL)                               = 0x1493000
open("/usr/lib/locale/locale-archive", O_RDONLY|O_CLOEXEC) = 3
fstat(3, {st_mode=S_IFREG|0644, st_size=106172832, ...}) = 0
mmap(NULL, 106172832, PROT_READ, MAP_PRIVATE, 3, 0) = 0x7f8c987c0000
close(3)                                = 0
fstat(1, {st_mode=S_IFCHR|0620, st_rdev=makedev(136, 0), ...}) = 0
open("tt", O_RDONLY)                    = 3
fstat(3, {st_mode=S_IFREG|0664, st_size=6, ...}) = 0
fadvise64(3, 0, 0, POSIX_FADV_SEQUENTIAL) = 0
read(3, "test\n\n", 65536)              = 6
write(1, "test\n\n", 6test)                 = 6
read(3, "", 65536)                      = 0
close(3)                                = 0
close(1)                                = 0
close(2)                                = 0
exit_group(0)                           = ?
+++ exited with 0 +++

        可以看出，cat命令在执行时，打开过三类文件（标准输入、输出和错误不用打开，因为它们继承自父进程），而且文件描述符的值其实就是系统调用open函数的返回值。

# 动态链接相关的文件
open("/etc/ld.so.cache", O_RDONLY|O_CLOEXEC) = 3 # 分配文件描述符3
*****
close(3) # 关闭文件描述符3
open("/lib64/libc.so.6", O_RDONLY|O_CLOEXEC) = 3 # 分配文件描述符3
*****
close(3) # 关闭文件描述符3# 本地语言环境文件
open("/usr/lib/locale/locale-archive", O_RDONLY|O_CLOEXEC) = 3 # 分配文件描述符3
*****
close(3) # 关闭文件描述符3# 目标文件(tt)
open("tt", O_RDONLY) = 3 # 分配文件描述符3
*****
close(3) # 关闭文件描述符3

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/430781.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Error when custom data is added to Azure OpenAI Service Deployment

Error when custom data is added to Azure OpenAI Service Deployment

题意：在向 Azure OpenAI 服务部署添加自定义数据时出现错误。 问题背景： I receive the following error when adding my custom data which is a .txt file (it doesnt matter whether I add it via Azure Cognitive Search, Azure Blob Storage, or F…
阅读更多...
网络安全等级保护 | 规范企业网络系统安全使用 | 天锐股份助力等保制度落地

网络安全等级保护 | 规范企业网络系统安全使用 | 天锐股份助力等保制度落地

在当今数字化高速发展的时代，网络安全对于企业的重要性日益凸显。而近年来，数据泄露、网络攻击等安全事件频发，给企业和个人带来了前所未有的挑战。在这一背景下，网络安全等级保护制度（简称“等保”）作为国…
阅读更多...
安卓13删除下拉栏中的设置按钮 android13删除设置按钮

安卓13删除下拉栏中的设置按钮 android13删除设置按钮

总纲 android13 rom 开发总纲说明 文章目录 1.前言2.问题分析3.代码分析4.代码修改5.编译6.彩蛋1.前言 顶部导航栏下拉可以看到，底部这里有个设置按钮，点击可以进入设备的设置页面，这里我们将更改为删除，不同用户通过这个地方进入设置。也就是下面这个按钮。 2.问题分析…
阅读更多...
Java面试题大全（全网最全，持续更新）中级（3）

Java面试题大全（全网最全，持续更新）中级（3）

1. 集合框架 1.1. ConcurrentHashMap 和 HashMap 有什么区别？ HashMap：线程不安全，适用于单线程环境。ConcurrentHashMap：线程安全，适用于多线程环境，使用分段锁机制来提高并发性能。 1.2. TreeSet 如何实…
阅读更多...
【C++掌中宝】走进C++引用的世界：从基础到应用

【C++掌中宝】走进C++引用的世界：从基础到应用

文章目录 引言1. 基础概念2. 引用与指针的区别3. 引用的应用场景3.1 引用作为函数参数3.2 引用作为函数返回值3.3 常引用（const引用）的使用3.4 引用与多态 4. C 引用的优缺点5. 引用的注意事项与常见陷阱6. 总结结语 引言 C 引用是编写高效、简洁代码的…
阅读更多...
新品亮相｜美格智能SLM530/SLM530P智能模组，助力金融新零售智慧升级

新品亮相｜美格智能SLM530/SLM530P智能模组，助力金融新零售智慧升级

随着金融支付产业数字化与智能化不断推进，泛支付场景一体化解决方案成为行业发展的新趋势，从手持POS机到智能收款机，金融支付领域需要更快速、更精准、更安全的解决方案，加快推进数字化升级进程。 近期，美格智能正式发…
阅读更多...
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-18

计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-18

计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-18 1. The Application of Large Language Models in Primary Healthcare Services and the Challenges W YAN, J HU, H ZENG, M LIU, W LIANG - Chinese General Practice, 2024 人工智能大语言模型在基层医疗…
阅读更多...
基于深度学习的文本情感原因提取研究综述——论文阅读

基于深度学习的文本情感原因提取研究综述——论文阅读

前言 既然要学习情感分析，那么肯定还要了解情感原因对抽取的发展历程，所以我又搜了一篇研究综述，虽然是2023年发表的，但是里面提及到的历程仅停留到2022年。这篇综述发布在TASLP期刊，是音频、声学、语言信号处理的顶级…
阅读更多...
静态路由和默认路由（实验）

静态路由和默认路由（实验）

目录 一、实验设备和环境 1、实验设备 2、实验环境 （1）实验拓扑图 （2）实验命令列表 二、实验记录 1、直连路由与路由表查看 步骤1:建立物理连接并运行超级终端。 步骤2:在路由器上查看路由表。 2、静态路由配置 步骤1:配…
阅读更多...
哈希表与离散化

哈希表与离散化

一、字符串哈希 1. 什么是哈希 哈希算法是：通过哈希函数将字符串、较大的数等转换为能够用变量表示的或者是直接作为数组下标的数，通过哈希算法转换到的值，称之为哈希值。哈希值可以实现快速查找和匹配。 比如：用数组下标计数法&…
阅读更多...
QT widgets 窗口缩放，自适应窗口大小进行布局

QT widgets 窗口缩放，自适应窗口大小进行布局

1. 窗口布局 2. 尺寸策略：扩展 Fixed (固定): 行为：控件的大小是固定的，不会随着窗口大小的变化而改变。它的大小由控件的 sizeHint() 返回的值决定。 适用场景：当你希望控件的大小保持不变，不随布局调整时使用&#x…
阅读更多...
Windows下利用MSYS2和VS的nmake编译nginx源码

Windows下利用MSYS2和VS的nmake编译nginx源码

目录 一、使用说明 二、安装软件 2.1 下载依赖库 2.3 下载并安装 StrawberryPerl 2.4 下载并安装 MSYS 2 2.5 nginx源代码下载 三、编译配置 3.1 设置NGX_MSVC_VER 3.2 配置 Makefile 3.3 编译代码 3.4 整理Nginx发布环境 四、错误处理 一、使用说明 本文章主要记…
阅读更多...
spring boot启动报错：so that it conforms to the canonical names requirements

spring boot启动报错：so that it conforms to the canonical names requirements

springboot 2.x的版本中对配置文件中的命名规范有了强制性的要求，如下图所示中的dataSource属性属于驼峰格式，但是在springboot 2.x中不允许使用驼峰形式。 根据错误提示可知将其使用 - 来分割即可 错误信息的含义：“Canonical names should…
阅读更多...
MySQL的msi版本9.0在安装过程总结和需要注意的地方

MySQL的msi版本9.0在安装过程总结和需要注意的地方

下载 参考文档 [官方包快速下载]（https://dev.mysql.com/downloads/mysql/） 使用zip文件安装可参考，这种直接把zip安装包解压到想要放的地方，并安装其中的方式一步步修改数据地址等配置即可。 个人使用了msi的安装文件 msi版本…
阅读更多...
Kafka 3.0.0集群部署教程

Kafka 3.0.0集群部署教程

1、集群规划 主机名 ip地址 node.id process.roles kafka1 192.168.0.29 1 broker,controller Kafka2 192.168.0.30 2 broker,controller Kafka3 192.168.0.31 3 broker,controller 2、将kafka包上传以上节点/app目录下 mkdir /app 3、解压kafka包 所有节点 …
阅读更多...
JavaWeb--纯小白笔记06：使用Idea创建Web项目，Servlet生命周期，注解，中文乱码解决

JavaWeb--纯小白笔记06：使用Idea创建Web项目，Servlet生命周期，注解，中文乱码解决

使用Idea创建一个web项目----详细步骤配置，传送门：http://t.csdnimg.cn/RsOs7 src：放class文件 web：放html文件 out：运行过后产生的文件 一创建一个新的web项目(配置好了后)： 在src创建一个文件…
阅读更多...
NVIDIA发布端到端自动驾驶框架Hydra-MDP

NVIDIA发布端到端自动驾驶框架Hydra-MDP

自动驾驶是目前人工智能领域的一个主要分支，目前特斯拉的FSD确实是为数不多的大模型框架。与其说特斯拉是一个造车公司，不如说是一个人工智能大数据公司。特斯拉每天靠行驶在道路上的汽车搜集的道路数据不胜其数，而拥有海量的数据是人工智能领…
阅读更多...
001.从0开始实现线性回归(pytorch)

001.从0开始实现线性回归(pytorch)

000动手从0实现线性回归 0. 背景介绍 我们构造一个简单的人工训练数据集，它可以使我们能够直观比较学到的参数和真实的模型参数的区别。 设训练数据集样本数为1000，输入个数（特征数）为2。给定随机生成的批量样本特征 X∈R10002 …
阅读更多...
第十四届蓝桥杯嵌入式国赛

第十四届蓝桥杯嵌入式国赛

一. 前言 本篇博客主要讲述十四届蓝桥杯嵌入式的国赛题目，包括STM32CubeMx的相关配置以及相关功能实现代码以及我在做题过程中所遇到的一些问题和总结收获。如果有兴趣的伙伴还可以去做做其它届的真题，可去 蓝桥云课 上搜索历届真题即可。 二. 题目概述 …
阅读更多...
论文阅读与分析：Few-Shot Graph Learning for Molecular Property Prediction

论文阅读与分析：Few-Shot Graph Learning for Molecular Property Prediction

论文阅读与分析：Few-Shot Graph Learning for Molecular Property Prediction 论文地址和代码地址1 摘要2 主要贡献3 基础知识Meta Learning1 介绍2 学习算法Step 1: What is learnable in a learning algorithm?Step 2：Define loss function for learn…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023

友情链接： 我的编程经验分享 一条长河网 尧图网站开发