Linux文件缓冲区

在这里插入图片描述

文章目录

    • 1. 缓冲区现象
    • 2. 用户级和系统级缓冲区
    • 3. 缓冲区刷新
    • 4. 为什么要有缓冲区
    • 5. 文件打印的全缓冲
    • 6. 模拟实现C语言文件标准库

本章gitee代码仓库:重定向、模拟C语言文件标准库

1. 缓冲区现象

image-20231112144810498

我们这里分别调用了4个差不多的函数,但是结果是有一定差别的,这些其实就是因为有缓冲区的存在,导致了现象的不同。

2. 用户级和系统级缓冲区

C语言提供访问文件的接口,本质上都是对系统提供的接口进行封装。上面的func3函数,我们将一号文件描述符关闭之后,C接口的内容都没有在显示器上显示,而系统接口write不受影响,正常显示。

这个就能说明,C语言提供的缓冲区,并不是系统级别的缓冲区。例如printffprintffwrite这些库函数,都是先将数据写入到C语言提供的缓冲区当中,然后再到合适的时候,通过write将内容刷新带内核的缓冲区当中。

image-20231112153809575

所以这里close(1)将一号文件描述符关闭之后,再想让write写入,那就写不进去了,而在此之前write自己的内容,是直接写入系统缓冲区的,所以我们就能看到通过系统调用write写的内容不受影响,而C库函数的内容全部都没有被刷新出来。

3. 缓冲区刷新

缓冲区刷新分为三种:

  1. 无缓冲:直接刷新

  2. 行缓冲:遇到换行符(\n)刷新

    一般向显示器打印采用行刷新

  3. 全缓冲:缓冲区满了之后再刷新

    向文件写入一般采用全缓冲

上面的func4,因为我们字符串后面都跟上了\n,采用的行刷新,和func3不一样,遇到\n就刷新缓冲区,所以内容能够全部刷新出来。

当然,在进程退出的时候,也会再刷新一次缓冲区

4. 为什么要有缓冲区

我们现在有很多快递驿站,这些驿站就可以理解为缓冲区,有了驿站的存在,我们寄快递的时候,直接将快递放到驿站,填好地址信息,我们就可以走了,就不需要我们自己亲自去将这个东西给对方;而拿快递的时候也是,有了驿站的存在,我们可以选择在自己有空的时候去拿,而不是说快递一到,我们就得立马去,这样就能极大的提高我们的效率。

缓冲区也是如此,我们的库函数将内容交给我们的缓冲区后,然后再由缓冲区将内容在合适的时候,调用系统接口,把内容刷新到系统。这样就能够提高用户的效率,让C语言函数的接口更快。

fprintfprintfscanf这些,都是叫格式化输入输出接口,我们向显示器打印整数1024,在我们看来是一个整数,其实本质上是字符。先将我们的内容作为一个整体,格式化刷新到C的缓冲区,然后统一刷到内核当中。

image-20231112161619783

所以,有缓冲区的存在,也能更好地配合我们的格式化输入输出。

在C语言的文件操作里面,是绕不开这个struct FILE结构体的,所以里面也封装了缓冲区字段。

例如我们在C语言当中一次性打开了5个文件,那么就会有5个对应的缓冲区。

这个FILE是语言层面的,语言层面都是属于用户的,所以这个缓冲区是属于用户层的

5. 文件打印的全缓冲

有了这些知识,我们再来看上面的func2,我们在程序退出之前fork创建子进程,在显示器上输出的是正常的,但是如果我们将内容重定向到文件当中,我们发现C库函数的接口都输出了2次。

这是因为向文件打印时,刷新方案变成了全缓冲

当变为全缓冲之后,遇到\n就不再刷新。而这里fork创建子进程,子进程会将父进程的代码和数据拷贝一份,当然这里缓冲区的数据也会拷贝。因为是全缓冲,这里的缓冲区里面是有数据的。

我们先来验证一下这个,不创建子进程,向文件打印:

void func2()
{const char *fstr="hello fwrite\n";const char *str="hello write\n";printf("hello\n");sleep(1);fprintf(stdout,"hello fpf\n");sleep(1);fwrite(fstr,strlen(fstr),1,stdout);sleep(1);write(1,str,strlen(str));sleep(3);//fork();
}

GIF 2023-11-12 16-48-24

可以看到,这里向文件打印,虽然加了\n但并没有刷新,而是采用的全缓冲,等进程结束之后,全部刷新了。

所以这里拷贝的缓冲区进行写时拷贝,父进程退出刷新一次,子进程退出刷新一次,所以我们就能看到C接口的信息会被刷新2次。而我们输出到显示的时候,因为是行缓冲,每次直接刷新了,到子进程的时候,缓冲区里面没有数据了,所以就输出一次。

6. 模拟实现C语言文件标准库

简易实现:

#include"Mystdio.h"
#include<sys/types.h>
#include<sys/stat.h>
#include<fcntl.h>
#include<unistd.h>
#include<stdlib.h>
#include<string.h>
#include<assert.h>#define FILE_MODE 0666_FILE * _fopen(const char*filename,const char*flag)
{assert(filename);assert(flag);int f = 0;int fd = -1;if(strcmp(flag,"w") == 0){f = (O_CREAT|O_WRONLY|O_TRUNC);fd = open(filename,f,FILE_MODE);}else if(strcmp(flag,"a") == 0){f = (O_CREAT|O_WRONLY|O_APPEND);  fd = open(filename,f,FILE_MODE);}else if(strcmp(flag,"r") == 0){f = O_RDONLY;fd = open(filename,f);}elsereturn NULL;if(fd == -1)  return NULL;_FILE*fp = (_FILE*)malloc(sizeof(_FILE));fp->fileon = fd;fp->flag = FLUSH_ALL;  fp->out_pos = 0;  //初始缓冲区没有内容return fp;
}
int _fwrite(_FILE*fp,const char*s,int len)
{memcpy(&fp->outbuffer[fp->out_pos],s,len);fp->out_pos+=len;if(fp->flag & FLUSH_NOW){write(fp->fileon,fp->outbuffer,fp->out_pos);fp->out_pos = 0;}else if(fp->flag&FLUSH_LINE){if(fp->outbuffer[fp->out_pos-1] == '\n'){write(fp->fileon,fp->outbuffer,fp->out_pos);fp->out_pos = 0;}}else if(fp->flag&FLUSH_ALL){if(fp->out_pos == SIZE){write(fp->fileon,fp->outbuffer,fp->out_pos);fp->out_pos = 0;} }return len;
}void _fflush(_FILE*fp)
{if(fp->out_pos>0){write(fp->fileon,fp->outbuffer,fp->out_pos);fp->out_pos = 0;}
}void _fclose(_FILE*fp)
{if(fp == NULL)  return;_fflush(fp);close(fp->fileon);free(fp);
}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/189279.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Spring面试题:(五)Spring注解开发@Component,@Autowired,@Bean,@Configuration

Bean基本注解 spring提供注解的版本 Component注解替代bean标签 bean其它属性的相关注解&#xff1a; scope 替代scopelazy 替代lazy-initPostConstruct 替代init-methodPreDestroy 替代destroy-method 使用Component注解的前提是开启注解扫描 衍生注解Repository,Servi…

水果音乐编曲软件 FL Studio v21.1.1.3750 中文免费破解版下载(附中文设置教程)

FL studio21中文别名水果编曲软件&#xff0c;是一款全能的音乐制作软件&#xff0c;包括编曲、录音、剪辑和混音等诸多功能&#xff0c;让你的电脑编程一个全能的录音室&#xff0c;它为您提供了一个集成的开发环境&#xff0c;使用起来非常简单有效&#xff0c;您的工作会变得…

Nginx:不同域名访问同一台机器的不同项目

Nginx很简单就可以解决同一台机器同时跑两个或者多个项目&#xff0c;而且都通过域名从80端口走。 以Windows环境下nginx服务为例&#xff0c;配置文件nginx.conf中&#xff0c;http中加上 include /setup/nginx-1.20.1/conf/conf.d/*.conf;删除server部分&#xff0c;完整如…

Nginx:如何实现一个域名访问多个项目

1. 背景介绍 最近在多个项目部署中遇到这样一个问题&#xff0c;一个域名如何实现多个项目的访问。因为不想自己单独去申请域名证书和域名配置&#xff0c;便想到了这个方案&#xff0c;结合Nginx的location功能实现了自己的需求&#xff0c;便记录下来。示例中是以项目演示&a…

Unity中Shader雾效的原理

文章目录 前言一、我们先看一下现实中的雾二、雾效的混合公式最终的颜色 lerp(雾效颜色&#xff0c;物体颜色&#xff0c;雾效混合因子) 三、雾效的衰减1、FOG_LINEAR&#xff08;线性雾衰减&#xff09;2、FOG_EXP(指数雾衰减1)3、FOG_EXP(指数雾衰减2) 前言 Unity中Shader雾…

Leetcode100128. 高访问员工

Every day a Leetcode 题目来源&#xff1a;100128. 高访问员工 解法1&#xff1a;模拟 把名字相同的员工对应的访问时间&#xff08;转成分钟数&#xff09;分到同一组中。 对于每一组的访问时间 accessTime&#xff0c;排序后&#xff0c;判断是否有 accessTime[i] - ac…

时间序列预测实战(十四)Transformer模型实现长期预测并可视化结果(附代码+数据集+原理介绍)

论文地址->Transformer官方论文地址 官方代码地址->暂时还没有找到有官方的Transformer用于时间序列预测的代码地址 个人修改地址-> Transformer模型下载地址CSDN免费 一、本文介绍 这篇文章给大家带来是Transformer在时间序列预测上的应用&#xff0c;这种模型最…

高效简洁的文档翻译网站

一款简单而强大的文档翻译网站 一款文字/文件翻译的网站,支持多个领域的翻译&#xff0c;支持常见的语言翻译(韩/日/法/英/俄/德…),最大百分比的保持原文排版(及个别除外基本100%还原)。 新用户注册就有100页的免费额度&#xff0c;每月系统还会随机赠送翻译额度&#xff0c;…

【Go入门】struct类型

【Go入门】struct类型 struct Go语言中&#xff0c;也和C或者其他语言一样&#xff0c;我们可以声明新的类型&#xff0c;作为其它类型的属性或字段的容器。例如&#xff0c;我们可以创建一个自定义类型person代表一个人的实体。这个实体拥有属性&#xff1a;姓名和年龄。这样…

Django配置文件,request,链接mysql方法,Orm简介

三板斧问题(views.py) HttpResponse # 返回的是字符串render # 渲染一个HTML静态文件&#xff0c;模板文件redirect # 重定向的 在视图文件中得视图函数必须要接收一个形参request&#xff0c;并且&#xff0c;视图函数也要有返回值&#xff…

【VS2019 Qt5 VTK9.2】临时解决配置相关问题的简单方法

配置报错 编译报错提示&#xff08;LNK2019或LNK2001&#xff09; 严重性 代码 说明 项目 文件 行 禁止显示状态 错误 LNK2019 无法解析的外部符号 “__declspec(dllimport) public: __cdecl QVTKOpenGLNativeWidget::QVTKOpenGLNativeWidget(class QWidget *,class QFlags)(_i…

AI 绘画 | Stable Diffusion 涂鸦功能与局部重绘

在 StableDiffusion图生图的面板里&#xff0c;除了图生图&#xff08;img2img&#xff09;选卡外&#xff0c;还有局部重绘(Inpaint)&#xff0c;涂鸦(Sketch)&#xff0c;涂鸦重绘(Inpaint Sketch),上传重绘蒙版&#xff08;Inpaint Uplaod&#xff09;、批量处理&#xff08…

【Linux基础IO篇】用户缓冲区、文件系统、以及软硬链接

【Linux基础IO篇】用户缓冲区、文件系统、以及软硬链接 目录 【Linux基础IO篇】用户缓冲区、文件系统、以及软硬链接深入理解用户缓冲区缓冲区刷新问题缓冲区存在的意义 File模拟实现C语言中文件标准库 文件系统认识磁盘对目录的理解 软硬链接软硬链接的删除文件的三个时间 作者…

Leetcode—680.验证回文串II【简单】

2023每日刷题&#xff08;二十七&#xff09; Leetcode—680.验证回文串II 实现代码 class Solution { public:bool judgeFunc(string s, int left, int right) {while(left < right) {if(s[left] ! s[right]) {return false;}left;right--;}return true;}bool validPalin…

windows下QZipReader和QZipWriter解压缩zip格式文件(只针对纯文件,递归目前暂不处理)

# 运行效果 ui设计文件 采用了网格布局,组件跟随窗口最大化最小化 # .pro项目文件 这段代码是一个项目文件(.pro文件)中的内容,用于配置一个Qt项目的构建和部署规则。它包含了一些指令和设置,用于指定项目中需要编译的源代码文件、头文件、UI表单文件以及项目所依赖的Qt…

API 集成测试工具Hitchhiker 0.1.1 正式发布

Hitchhiker 是一款开源的 Restful Api 集成测试工具&#xff0c;你可以在轻松部署到本地&#xff0c;和你的 team 成员一起管理 Api。 能做什么 * Team 协作开发 Api * Api 历史修改记录及支持 diff 展示 * 支持多环境变量及运行时变量 * 支持 Schedule 及批量 run * 不同…

什么是 CASB,在网络安全中的作用

数字化转型正在稳步攀升&#xff0c;组织现在越来越关注在线生产力系统和协作平台&#xff0c;各行各业的企业都采用了不同的云基础设施服务模式。云基础架构提供按需服务&#xff0c;可提高易用性、访问控制、内容协作和减少内部存储资源&#xff0c;以及许多其他好处。迁移到…

Android---动态权限适配问题

在 Android6.0&#xff0c;即 API 23 之前&#xff0c;App 需要的权限都会在安装阶段向用户展示&#xff0c;而在 App 运行期间不需要动态判断权限是否已申请。从 6.0 之后的版本开始&#xff0c;Android 系统做了一次大的改动。对于部分权限&#xff0c;App 需要在代码中动态申…

OpenAI开源全新解码器,极大提升Stable Diffusion性能

在11月7日OpenAI的首届开发者大会上&#xff0c;除了推出一系列重磅产品之外&#xff0c;还开源了两款产品&#xff0c;全新解码器Consistency Decoder&#xff08;一致性解码器&#xff09;和最新语音识别模型Whisper v3。 据悉&#xff0c;Consistency Decoder可以替代Stabl…