[Linux]文件系统

[Linux]文件系统

文件系统是操作系统的一部分,负责组织、存储和管理存储在外部设备上的文件和目录,也就是操作系统管理外设中的文件的策略。本文讲解的是Ext2文件系统。Linux操作系统使用的就是Ext系列的文件系统。

文章目录

  • [Linux]文件系统
    • 了解磁盘结构
      • 磁盘的物理结构
      • 磁盘存储结构
      • 磁盘逻辑结构
    • EXT2文件系统的存储方案
      • inode的具体应用
      • 补充细节
    • 软硬链接
      • 创建软硬链接
      • 软硬链接的区别
      • 软硬链接的使用场景
    • 文件的三个时间

了解磁盘结构

磁盘的物理结构

磁盘是计算机上的唯一的机械设备,作为外设用于存储大量的数据,磁盘内部的物理结构示意图如下:

image-20230714161627226

  • 磁盘(如上图的银色圆盘)-- 由多个盘片组成,每个盘片的每个面都能够存储数据
  • 磁头 – 每个盘片的每个面都有一个磁头,磁头能够在对应的盘面中读写数据

磁盘存储数据的原理: 计算机中的数据本质就是0和1的区别,因此磁盘只需要利用磁性来代表数据的0和1。

磁盘存储结构

image-20230905144406099

磁盘的每个盘片的盘面被划分成多个部分:

  • 磁道: 磁盘表面被分为许多同心圆,每个同心圆称为一个磁道,每个磁道都有一个编号,最外面的是0磁道。
  • 扇区: 每个磁道被划分成若干个扇区,每个扇区的存储容量为512字节,每个扇区都有一个编号。

磁盘以扇区为单位进行数据的存储,一个磁盘文件会占据一个或多个扇区的位置来存储,要想加载磁盘文件到内存中,需要定位到磁盘文件所在的一个或多个扇区。

image-20230714163115337

定位扇区的方法:

  • 定位数据所在的是哪一个盘面 – 也就是选择哪一个对应的磁头。
  • 定位数据在所在盘面的哪一个的磁道。
  • 定位数据在所在磁道中的哪一个扇区。

磁头(Heads)、柱面(Cylinder)(等价于磁道)、扇区(Sector)对应的编号。即可在磁盘上定位所要访问的扇区。这种磁盘数据定位方式叫做 CHS 。

磁盘逻辑结构

磁盘需要抽象成逻辑结构的原因:

  • OS是软件,磁盘是硬件,磁盘作为外设是可能被改变的,为了防止由于外设的改变而导致物理结构寻址方式的失败,OS采用逻辑地址,将逻辑与物理的转换交给中间软件层驱动程序,实现OS与外设的解耦
  • 磁盘存储的基本单位是512字节,OS为了减少IO次数,提高效率,一次IO操作的基本单位是4KB(可调整大小),OS将一次IO的基本单位看作为块,因此需要一套块级别地址进行访问

image-20230905154453166

磁盘的逻辑结构就类似于拉开的磁带,将一个盘片抽象成被拉开的磁带,一圈磁带就类似于一个磁道。逻辑结构示意图如下:

image-20230905194551006

扇区的大小是512字节,而OS一次IO操作的基本单位是4KB,因此OS将一次IO操作的数据抽象成数据块。逻辑结构示意图如下:

image-20230905194510903

OS将整个磁盘最终抽象成了多个连续的数据块,也就是将物理结构转换成了线性逻辑结构,因此OS能够将磁盘看作是有对应下标的数组结构,每个下标指向的是一个数据块,每一个下标也被称作逻辑块地址,简称LBA。OS将磁盘看作是数组结构后,每次IO操作就是找到数据块的首地址,然后从该地址开始读取对应个数的扇区。

EXT2文件系统的存储方案

OS将磁盘看作是由数组结构组织起来的数据块,由于数据块的数量众多,OS将该数组结构划分成多个分区。逻辑结构示意图如下:

image-20230905194607220

将磁盘进行分区后,OS为了更方便的管理,还将每个分区划分成多个分组。逻辑结构示意图如下:

image-20230905195029269

  • 磁盘众多分区中,一般第一个分区存在一个Boot Block区域,该区域存储着OS的开启相关信息,计算机进行开机操作时,会加载磁盘数据,并使用该区域的数据完成开机操作。

将磁盘划分为若干个分组后,OS将一个分组的管理策略运用到每个分组中,实现对整个磁盘的管理。OS的具体管理策略如下:

image-20230905195437760

  • Super Block: 记录该分区文件系统的重要信息,使得操作系统能够正确地使用和管理文件系统。

    • Linux系统采用Ext系列的文件系统。
    • Super Block在各个分组都可能存在,并且统一更新,是为了防止其损坏后,导致整个文件系统无法使用。
  • Group Descriptor Table: 记录改组的详细属性信息。

  • Block Bitmap: 每个bit表示一个Data Blocks中的数据块是否空闲可用,每个bit对应中的一个Data Blocks中的数据块。

  • inode Bitmap: 每个bit表示一个inode是否空闲可用,每个bit对应inode table中的一个inode。

  • inode Table: 记录该组所有文件的索引节点。

    • inode内部的记录的是对应的一个文件的所有属性,由于文件属性的可预见性,一个inode大小为128字节。
    • 每一个inode都有自己的inode编号,inode编号也数据对应文件的属性编号。
    • inode内部记录了对应文件内容存储的数据块编号。
  • Data blocks: 记录了文件的内容。

    • Data blocks区域内部被划分成了若干个大小为4KB的数据块。
    • 一个的文件的内容会根据大小使用若干个数据块。

分组中的以上每个区域都可能会使用若干个数据块。

inode的具体应用

  • Linux操作系统是通过文件的inode编号来区分文件的,inode节点中不记录文件名。

  • 目录作为文件也有自己的inode节点。

  • 目录文件中记录的是该目录下的文件的inode编号和文件名的映射关系。

  • Linux操作系统查询文件的过程:

    1. 在文件的对应目录下,找到对应文件的inode编号。
    2. 在对应目录所在的分区下找到对应inode编号所在的分组,结合inode table,找到文件的inode节点。
    3. 通过inode节点找到对应的数据块。
  • Linux操作系统删除文件的过程:

    1. 在文件的对应目录下,找到对应文件的inode编号。
    2. 在对应目录所在的分区下找到对应inode编号所在的分组,结合inode table,找到文件的inode节点。
    3. 将inode节点中记录的数据块对应在Block Bitmap中的位图置为0。
    4. 将inode节点对应在inode Bitmap中位图置为0。
  • Linux操作系统添加文件的过程:

    1. 在要创建文件所在的目录所在的分组中查询inode bitmap,找到未被使用inode。
    2. 将文件的属性写入新创建的inode。
    3. 将文件名和inode编号的映射关系追加到所处目录的文件数据块中。
  • Linux操作系统修改文件的过程:

    1. 在文件的对应目录下,找到对应文件的inode编号。
    2. 在对应目录所在的分区下找到对应inode编号所在的分组,结合inode table,找到文件的inode节点。如果是空文件会根据写入数据的大小分配相应的数据块,并将数据块对应位图置为1,将数据块信息写入inode。
    3. 将修改后的数据刷新写入到对应的数据块中。
  • Linux使用ls指令时带-i选项就可以查看到文件对应的inode编号:

image-20230906185210904

补充细节

文件的恢复

如果文件被误删后,首先要避免文件操作,以防被删除的文件数据被覆盖,然后通过日志记录等技术,找到被删除的文件对应的inode编号将inode编号对应位图置为1,对应数据块置为1,从而完成文件的恢复。

inode编号寻找对应分组的策略

在一个分区中,每个分组所使用的inode编号是有范围的,通过inode编号所在范围能够快速确定inode所在的分组。

分区和分组的完成

在安装操作系统时,会根据用户指定的各分区大小进行分区的设置,然后对会对每个分区进行格式化,格式化就是操作系统向分区写入文件系统管理信息的。

inode记录对应数据块的策略

inode节点中采用数组记录对应数据块,以至于inode节点的大小得以确定,但是如果数组中的一个数据只能对应一个数据块那么,一个inode节点能指向的数据块是有限的,因此inode节点采用三级索引的策略来映射对应的数据块,将该数组划分成三个部分,每个部分采用不同的索引方式。

  • 直接索引: 数组记录的数据块编号对应的数据块中就是文件内容。

image-20230906194729795

  • 二级索引: 数组记录的编号对应的数据块中记录的是其他数据块的编号,这些被记录在数据块中的数据块编号对应的数据块中存储的是文件内容。

image-20230906200755543

  • 三级索引: 数组记录的编号对应的数据块中记录的是其他数据块的编号,这些被记录在数据块中的数据块编号对应的数据块中存储的也是其他数据块的编号并且这些编号指向存储文件内容的数据块。

image-20230906200729829

inode映射的存在的问题

EXT2存储方案存在一个分组,数据块用完、inode没用完或者inode用完、数据块没用完的问题并且如果出现这种情况是无法解决的。

软硬链接

创建软硬链接

  • 创建软链接: 在Linux系统下ln -s 被链接的文件名 软链接名字指令能够创建软连接。

image-20230906204649180

  • 创建硬链接: 在Linux系统下ln 被链接的文件名 硬链接名字指令能够创建硬连接。

image-20230906204755632

软硬链接的区别

  • 软链接:

    • 软链接有自己的inode编号,是一个独立的文件
    • 软链接中存储的是链接文件的路径信息

    image-20230906205521110

  • 硬链接:

    • 硬链接和链接的文件共用同一个inode编号,硬链接和链接文件使用同一个inode
    • 硬链接创建的本质是在目录下添加一组inode编号和文件名的映射,并且在对应的inode中的引用计数进行+1操作
    • 当inode中引用计数为0代表该文件没有文件名和其inode编号映射,将删除该文件

image-20230906205541812

软硬链接的使用场景

  • 软链接适用于某一文件所在路径比较繁琐,可以不用进入路径或打出路径就可以访问文件,功能类似于Windows系统中的快捷方式。

image-20230906210227330

  • 硬链接使得Linux系统能够使用相对路径进行操作。

image-20230907101923784

实际上每个目录中的.就是一个硬链接,链接是当前目录,.硬链接实现了以相对路径访问当前目录文件的功能。

image-20230907102632778

在目录下创建一个新目录后,Linux系统会为新目录创建一个..硬链接,链接的就是上级目录,..硬链接实现了以相对路径访问上级目录文件的功能。

可以看出一个目录的硬链接数(目录中的..) = 目录下的目录数量 + 2(目录本身和目录中的.):

image-20230907103328715

注意: 用户不能给目录创建硬链接,避免出现路径环路问题,系统自己维护目录硬链接。

文件的三个时间

  • Access 最后访问时间
  • Modify 文件内容最后修改时间
  • Change 属性最后修改时间

stat 文件名查看文件信息,其中就有文件的这三个时间:

image-20230907104607935

访问文件时 ,Access时间就会进行更新:

image-20230907104658713

注意: 在最新的Linux版本中,为了节省IO操作造成的时间浪费,如果只是单纯的查看数据不一定会立刻修改Access时间。

修改文件内容时 ,Modify和Change时间都会进行更新:

image-20230907105102128

修改文件属性时 ,Change时间会进行更新:

image-20230907105256043

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/127949.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【C++杂货铺】探索stack和queue的底层实现

文章目录 一、stack的介绍和使用1.1 stack的介绍1.2 stack的使用1.2.1 最小栈1.2.2 栈的压入、弹出序列1.2.3 逆波兰表达式求值1.2.4 用栈实现队列 二、queue的介绍和使用2.1 queue的介绍2.2 queue的使用2.2.1 二叉树的层序遍历 三、模拟实现3.1 stack模拟实现3.2 queue模拟实现…

Spine2D骨骼动画播放器 - 微信小程序版

Spine2D骨骼动画播放器 - 微信小程序版 简介平台支持 界面预览使用说明演示视频 版本笨笨的小目标(废话)参考资料测试文件百度盘分享 相关文档 简介 本播放器是SpinePlayer的微信小程序版。由于官方并没有提供现成的运行库,只能自己改造。 设…

Jobs Portal求职招聘系统源码v3.5版本

Jobs Portal求职招聘系统 是为求职者和公司发布职位而开发的交互式求职招聘源码。它使求职者能够发布简历、搜索工作、查看个人工作列表。 它将提供各种公司在网站上放置他们的职位空缺资料,并且还可以选择搜索候选人简历。 除此之外,还有一个管理模块供…

JAVASE---抽象类和接口

抽象类 抽象类的概念 在面向对象的概念中,所有的对象都是通过类来描绘的,但是反过来,并不是所有的类都是用来描绘对象的,如果一个类中没有包含足够的信息来描绘一个具体的对象,这样的类就是抽象类。 抽象类语法 在…

振弦采集仪应用地铁隧道安全监测详细解决方案

振弦采集仪应用地铁隧道安全监测详细解决方案 随着城市化进程的不断加快,地铁作为一种高效、便捷、环保的交通方式已经成为现代城市不可或缺的一部分。因此,对地铁的安全性也越来越重视,一般二三线以上的城市在不断发展中,地铁做…

MIT的智慧,利用深度学习来解决了交通堵塞

导读大家都对交通阻塞深恶痛绝。除了让人头疼和错过约会之外,交通拥堵让美国的司机每年多花3000亿美元。 研究人员建议大家使用自动驾驶汽车,即使数量占比并不大,但也能大大改善交通拥堵情况。 Lex Fridman和他的MIT团队开发了一款模拟游戏来…

【大数据实训】用Hbase模拟电影搜索引擎(四)

博主介绍:✌全网粉丝6W,csdn特邀作者、博客专家、Java领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于大数据技术领域和毕业项目实战✌ 🍅文末获取项目联系🍅 《云计算与大数据处理》课程大作业评分表 项目考核内…

centos 端口被占用的快速排查方式

问题笔记 centos 端口被占用的快速排查方式 centos 端口被占用的快速排查方式 这里说一个我刚刚遇到的问题,解决步骤用来记录,方便以后自己查询。 nginx配置完index.html测试文件,发现一直显示的404页面。 我跑到服务器上想重启一下nginx …

使用Maven创建父子工程

📚目录 创建父工程创建子模块创建子模块示例创建认证模块(auth) 结束 创建父工程 选择空项目: 设置:项目名称,组件名称,版本号等 创建完成后的工程 因为我们需要设置这个工程为父工程所以不需要src下的所有文件 在pom…

认识JVM的内存模型

从上一节了解到整个JVM大的内存区域,分为线程共享的heap(堆),MethodArea(方法区),和线程独享的 The pc Register(程序计数器)、Java Virtual Machine Stacks(…

编程语言排行榜

以下是2023年的编程语言排行榜(按照流行度排序): Python:Python一直以来都是非常受欢迎的编程语言,它简洁、易读且功能强大。在数据科学、机器学习、人工智能等领域有广泛应用。 JavaScript:作为前端开发…

Lua03——开发环境搭建

1 安装开发插件 在 idea 或 vscode 中安装 lua 的开发插件 EmmyLua 2 创建工程 在 idea 中创建一个新的工程 工程的类型选择 lua 输入工程名及目标目录 在工程结构的SDK中设置lua在本地安装目录 在工程结构的modules中选择 lua 3 编写第一个lua程序 在工程下添加程序包&#…

Redis总结(一)

目录 Redis简介 为什么使用Redis作为MySQL的缓存? 高性能 高并发 Redis数据结构及其使用场景分别是什么? String(字符串) 内部实现 常用命令 普通字符串基本操作 批量设置 计数器(字符串内容为整数时使用&a…

[学习笔记]Node2Vec图神经网络论文精读

参考资料:https://www.bilibili.com/video/BV1BS4y1E7tf/?p12&spm_id_frompageDriver Node2vec简述 DeepWalk的缺点 用完全随机游走,训练节点嵌入向量,仅能反应相邻节点的社群相似信息,无法反映节点的功能角色相似信息。 …

集创北方ICN6202 MIPIDSI转LVDS转换芯片

集创北方ICN6202 1.描述: ICN6201是一个接收MIPIDSI输入和发送LVDS输出的桥接芯片。MIPIDSI最多支持4个车道,每个车道的最大运行频率为1Gbps;总最大输入带宽为4Gbps;并且还支持MIPI定义的ULPS(超低功耗状态&#xff…

c++通过tensorRT调用模型进行推理

模型来源: 算法工程师训练得到的onnx模型 c对模型的转换: 拿到onnx模型后,通过tensorRT将onnx模型转换为对应的engine模型,注意:训练用的tensorRT版本和c调用的tensorRT版本必须一致。 如何转换: 算法工…

机器人制作开源方案 | 桌面级机械臂--应用设计

本节内容将基于机器视觉带着大家进行应用实训。机器视觉是人工智能正在快速发展的一个分支,简单说来机器视觉就是用机器代替人眼来做测量和判断。机器视觉系统是通过机器视觉产品(即图像摄取装置,分CMOS和CCD两种)将被摄取目标转换…

Android学习之路(14) Context详解

一. 简介 在 Android 开发中、亦或是面试中都离不开四大组件的身影,而在创建或启动这些组件时,并不能直接通过 new 关键字后跟类名来创建实例对象,而是需要有它们各自的上下文环境,也就是本篇文章要讨论的 Context。 1.1 Contex…

ComPtr源码分析

ComPtr源码分析 ComPtr是微软提供的用来管理COM组件的智能指针。DirectX的API是由一系列的COM组件来管理的,形如ID3D12Device,IDXGISwapChain等的接口类最终都继承自IUnknown接口类,这个接口类包含AddRef和Release两个方法,分别用…

Qt6中使用Qt Charts

官方文档:Qt Charts 6.5.2 如果你是使用 CMake 构建的,则应在 CMakeLists.txt 中添加如下两行代码: find_package(Qt6 REQUIRED COMPONENTS Charts)target_link_libraries(mytarget PRIVATE Qt6::Charts) 其中 mytarget 为你的项目名称。一共…