Linux读写文件

前言

学习了文件系统，就能理解为什么说Linux下一切皆文件。

语言层面的操作

在c语言的学习中我们可以使用fopen()函数对文件进行操作。

image-20240414193759510

int main()
{//FILE * fp = fopen("./log.txt", "w");//FILE * fp = fopen("./log.txt", "r");FILE * fp = fopen("./log.txt", "a");if(NULL == fp){perror("fopen");return 1;}//测试wint count = 5;while(count--){const char * msg = "hello world\n";fputs(msg ,fp);}//测试rchar buffer[32];while(fgets(buffer, sizeof(buffer), fp)){printf("%s", buffer);}//测试aint count = 5;while(count--){const char * msg = "hello world\n";fputs(msg ,fp);}fclose(fp);return 0;
}

FILE在c语言上是一个结构体，包含了文件操作的基本属性，对文件的操作都要通过这个结构的指针来进行。

文件操作常用的函数

  • fopen() 打开流
  • fclose() 关闭流
  • fputc() 写一个字符到流中
  • fgetc() 从流中读一个字符
  • fputs() 写字符串到流
  • fgets() 从流中读一行或指定个字符
  • fprintf() 按格式输出到流
  • fscanf() 从流中按格式读取

上面提到的这些函数都是库函数，而像open()、close（）、read()、write()都是属于系统提供的接口。

它们之间有什么联系呢？

可以看到fopen()的类型是一个FILE*类型的指针，而FILE是一个结构体，结构体中包含着文件名、文件状态和文件当前位置等信息,里面有一个我们需要的fd，有了fd系统就能找到相应的文件进行读写。

系统调用接口

open（）

image-20240414200335275
mode能帮我们设置权限信息，我们在创建一个新的文件的话必须告诉系统权限是什么。

image-20240414201619541

flags

  • O_RDONLY: 只读打开
  • O_WRONLY: 只写打开
  • O_RDWR : 读，写打开 这三个常量，必须指定一个且只能指定一个
  • O_CREAT : 若文件不存在，则创建它。需要使用mode选项，来指明新文件的访问权限
  • O_APPEND: 追加写

read（）

//读取文件内容
int main()
{size_t fd = open("./log.txt", O_RDONLY);char buffer[1024];ssize_t s = read(fd, buffer, sizeof(buffer) - 1);if(s > 0){buffer[s] = 0; printf("%s\n", buffer);}return 0;
}

文件描述符fd

fd分配规则，找最小的未分配的描述符给fd

int main()
{int fd = open("./log.txt", O_WRONLY | O_CREAT, 0644);int fd1 = open("./log1.txt", O_WRONLY | O_CREAT, 0644);int fd2 = open("./log2.txt", O_WRONLY | O_CREAT, 0644);printf("%d\n", fd); //3printf("%d\n", fd1);//4printf("%d\n", fd2);//5close(fd);
}

当程序运行起来之后，OS会自动帮我们打开3个标准输入输出。因为我们的进程都是bash调用fork()创建出来的，bash默认打开了这3个，所以子进程继承了下去同样打开了这3个标准输入输出。

image-20240416175939494

inode

磁盘读写的最小单位是扇区，扇区的大小一般只有 512B 大小，文件系统把多个扇区组成了一个逻辑块，每次读写的最小单位就是逻辑块（数据块），Linux 中的逻辑块大小为 4KB，也就是一次性读写 8 个扇区，这将大大提高了磁盘的读写的效率。

Linux 文件系统会为每个文件分配两个数据结构：索引节点（index node）和目录项（directory entry），它们主要用来记录文件的元信息和目录层次结构。目录也是文件，也是用索引节点唯一标识，和普通文件不同的是，普通文件在磁盘里面保存的是文件数据，而目录文件在磁盘里面保存子目录或文件。

  • 索引节点，也就是 inode，用来记录文件的元信息，比如 inode 编号、文件大小、访问权限、创建时间、修改时间、数据在磁盘的位置等等。索引节点是文件的唯一标识，它们之间一一对应，也同样都会被存储在硬盘中，所以索引节点同样占用磁盘空间。
  • 目录项，也就是 dentry，用来记录文件的名字、索引节点指针以及与其他目录项的层级关联关系。多个目录项关联起来，就会形成目录结构，但它与索引节点不同的是，目录项是由内核维护的一个数据结构，不存放于磁盘，而是缓存在内存。

由于索引节点唯一标识一个文件，而目录项记录着文件的名，所以目录项和索引节点的关系是多对一，也就是说，一个文件可以有多个别字。比如，硬链接的实现就是多个目录项中的索引节点指向同一个文件。

image-20240417105059387

inode 与目录项的关系

image-20240417105201278

要想找到文件（普通文件或目录文件）的数据块，必须找到文件的inode，inode之所以被引用（找到），是因为在文件名所在的目录项中有记录它的编号，但是目录项是在目录文件的数据块中，而数据块必须通过 inode 才能找到…我们需要固定一个目录，就是根目录，根目录是所有目录的父目录，每个分区都有自己的根目录，创建文件系统之后它的位置就是固定不变的，也就是说，在文件系统的设计中，根目录所在数据块的地址是被“写
死”的，查找任意文件时，都直接到根目录的数据块中找相关的目录项，然后递归查找，最终可以找到任意子目录中的文件。

inode总结

  1. 每个文件都有自己单独的 inode,inode 是文件实体数据块在文件系统上的元信息。
  2. 所有文件的 inode 集中管理，形成 inode 数组，每个 inode 的编号就是在该 inode 数组中的下标。inode 中的前 12 个直接数据块指针和后 3 个间接块索引表用于指向文件的数据块实体。
  3. 文件系统中并不存在具体称为“目录”的数据结构，同样也没有称为“普通文件”的数据结构，统一用同一种 inode 表示。inode 表示的文件是普通文件，还是目录文件，取决于 inode 所指向数据块中的实际内容是什么，即数据块中的内容要么是普通文件本身的数据，要么是目录中的目录工页。
  4. 目录项仅存在于 inode 指向的数据块中，有目录项的数据块就是目录，目录项所属的 inode 指向的所有数据块便是目录。目录项中记录的是文件名、文件 inode 的编号和文件类型，目录项起到的作用有两个，一是粘合文件名及 inode，使文件名和 inode 关联绑定，二是标识此inode 所指向的数据块中的数据类型（比如是普通文件，还是目录，当然还有更多的类型）。
  5. inode 是文件的“实质”，但它并不能直接引用，必须通过文件名找到文件名所在的目录项，然后从该目录项中获得 inode 的编号，然后用此编号到 inode 数组中去找相关的 inode，最终找到文件的数据块。

文件系统

image-20240417111226315

磁盘是典型的块设备，硬盘分区被划分为一个个的block。一个block的大小是由格式化的时候确定的，并且不可以更改。例如mke2fs的-b选项可以设定block大小为1024、2048或4096字节。而上图中启动块（Boot Block）的大小是确定的）

  • Block Group：ext2文件系统会根据分区的大小划分为数个Block Group。而每个Block Group都有着相

    同的结构组成。

  • 超级块（Super Block）：存放文件系统本身的结构信息。记录的信息主要有：bolck 和 inode的总量，

    未使用的block和inode的数量，一个block和inode的大小，最近一次挂载的时间，最近一次写入数据的时间，最近一次检验磁盘的时间等其他文件系统的相关信息。Super Block的信息被破坏，可以说整个文件系统结构就被破坏了

  • GDT，Group Descriptor Table：块组描述符，描述块组属性信息

  • 块位图（Block Bitmap）：Block Bitmap中记录着Data Block中哪个数据块已经被占用，哪个数据块没

    有被占用

  • inode位图（inode Bitmap）：每个bit表示一个inode是否空闲可用。

  • i节点表:存放文件属性 如 文件大小，所有者，最近修改时间等

  • 数据区：存放文件内容

三个时间

gcc/ Makefile 会根据源文件和可执行程序的时间来判断谁更新,从而指导系统哪些源文件要重新编译。

[jiantao@VM-8-16-centos 4.18]$ stat test.cFile: ‘test.c’Size: 0         	Blocks: 0          IO Block: 4096   regular empty file
Device: fd01h/64769d	Inode: 1442506     Links: 1
Access: (0664/-rw-rw-r--)  Uid: ( 1001/ jiantao)   Gid: ( 1001/ jiantao)
//文件最近被访问的时间,不会立即刷新，有一定的时间间隔os才会自动刷新
Access: 2024-04-18 09:45:22.453858883 +0800
//最近一次修改文件内容的时间，当我们修改文件内容的时候，有可能修改文件的属性	
Modify: 2024-04-18 09:45:22.453858883 +0800
//最近一次修改文件属性的时间
Change: 2024-04-18 09:45:22.453858883 +0800

重定向

调用write往1里面写东西是会显示到屏幕上面，为什么呢？

printf函数是向显示器上打印出东西，向显示器打印东西对应的是标准输出，标准输出的文件描述符fd是1，在操作系统看来只要是1对应内容就是要往显示器上打印，而不管1对应的是什么。

除了采用关闭0,1,2号描述符重新分配fd这种方式，还可以调用dup2实现重定向。

int dup2(int oldfd, int newfd);
dup2()  makes  newfd be the copy of oldfd, closing newfd first if necessaryint  main()
{//我这里的log.text已近是存在的int fd = open("./log.txt", O_WRONLY | O_CREAT); //清空内容dup2(fd,  1);//下面三个函数都是往1里面输出，经过dup2都输出到log.textprintf("hello printf\n");fprintf(stdout, "hello fprintf\n");fputs("hello fputs\n", stdout);
}

只是把标准输出重定向到log.txt中， >是输出重定向,如果标准输入输出都重定向到log中执行[./test > log.txt 2>&1 ]，就可以。

image-20240417081049264

缓冲区

image-20240417103811830

在语言中，当我们调用printf()函数向显示器打印的时候，是有一个刷新策略叫行缓冲，当遇到’\n’的时候就会刷新缓冲区。假如我先调用close（1）,后创建一个新文件分配的fd为1,调用printf()后调用close(fd)，然后使用重定向>到log.txt中，当我们去cat log.txt内容的时候，会发送里面没有东西，而调用系统接口的话能重定向成功。

测试代码

int main()
{close(1);int fd = open("./log.txt",O_CREAT | O_WRONLY, 0644);  printf("hello\n");const char* msg = "hellow\n";write(1, msg, strlen(msg));close(fd);
}

image-20240417103112845

因为我们在调用printf()的时候，内容是放到用户缓冲区中的，由于发生了重定向到普通文件，刷新策略发生了改变，由行缓冲变成全缓冲(缓冲区满了才刷新),所以并没有刷新。如果在close(fd)之前调用fflush()就能刷新成功。

image-20240417102556550

可以看到fflush()能帮我们把用户缓冲区的数据刷到内存缓冲区中，进程退出的时候，也会自动刷新FILE内部的数据到OS缓冲区。

用户缓冲区到OS刷新策略

1.立即刷新

2.行刷新 显示器打印

3缓冲区满了才刷新 全缓冲，往磁盘文件中写入

软硬链接

软连接特别像在Window的快捷方式，软链接有独立的inode，是一个独立的文件，有自己的数据块，数据块指向链接文件所在的路径和文件名。

拥有者前面的数字代表是硬链接数，硬链接是和连接文件拥有相同的inode和数据块，我们在创建一个目录的时候默认的链接数是2，是因为在当前目录下有一个隐藏目录. 。

image-20240417100446942

动静态库

静态库（.a）：程序在编译链接的时候把库的代码链接到可执行文件中。程序运行的时候将不再需要静态库。

动态库（.so）：程序在运行的时候才去链接动态库的代码，多个程序共享使用库的代码。

动态链接

一个与动态库链接的可执行文件仅仅包含它用到的函数入口地址的一个表，而不是外部函数所在目标文件的整个机器码。在可执行文件开始运行以前，外部函数的机器码由操作系统从磁盘上的该动态库中复制到内存中，这个
过程称为动态链接（dynamic linking）。

动态库可以在多个程序间共享，所以动态链接使得可执行文件更小，节省了磁盘空间。操作系统采用虚拟内存机制允许物理内存中的一份动态库被要用到该库的所有进程共用，节省了内存和磁盘空间

显示可执行程序依赖的库

image-20240418095953745

image-20240418101016063

image-20240418100310165

真实名字去掉lib，去掉 .a 或.so-(包含后缀)剩下的就是库文件名称，这里lib64/libc-2.17.so 的真实库名字是c-2.17。

静态连接

gcc默认是动态链接，想要静态链接要加上-static

image-20240418101150320

制作静态库

库的本身是二进制的，需要头文件才知道里面实现了什么函数，把所有的.o文件打包起来就是静态库

libmath.a:add.oar -rc $@ $^
%.o:%.cgcc -c $<.PHONY:clean
clean:rm -rf *.o libmath output libmath.a.PHONY:output
output:mkdir outputcp -rf *.h outputcp libmath.a output

[%.o:%.c gcc -c $<]生成.o文件，用[ar -rc]生成静态库，ar是gnu归档工具，rc表示(replace and create)。

使用静态库

gcc  test.c -I./lib -L./lib -lmath
-I./lib 指明头文件搜索路径
-L./lib 指明库文件搜索路径
lmath 指明链接哪一个库

制作动态库

libmath.so:add.ogcc -shared -o $@ $^
#产生.o目标文件, 程序内部地址与位置无关，可以在任何地方加载
%.o:%.cgcc -fPIC -c $<
.PHONY:clean
clean:rm -f libmath.so *.o.PHONY:output
output:mkdir libsharedcp *.h libsharedcp libmath.so libshared

shared: 表示生成共享库格式，fPIC：产生位置无关码(position independent code)。

动态库使用

[jiantaomy_lib]$ gcc test.c -I./libshared -L./libshared -lmath

image-20240418115110083

可以看到链接不上，需要拷贝.so文件到系统共享库路径下, 一般指/usr/lib,更改 LD_LIBRARY_PATH 或者在/etc/ld.so.conf.d/路径下增加一个my.conf里面填入库要链接动态库所在的路径，再ldconfig更新。

就能运行成功。

image-20240418115304125

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/pingmian/3271.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

TablePlus for Mac/Win：开启高效数据开发新纪元

TablePlus for Mac/Win：开启高效数据开发新纪元

在当今数字化时代&#xff0c;数据的重要性日益凸显。无论是企业还是个人&#xff0c;都需要一款强大而实用的本地原生数据开发软件来提升工作效率。而 TablePlus for Mac/Win 正是这样一款卓越的工具&#xff0c;它为用户带来了全新的体验&#xff0c;让数据开发变得更加轻松、…
阅读更多...
第1次作业

第1次作业

目录 重点内容提要一、误差度量二、浮点数系统三、误差传播四、数值稳定性 作业解析 重点内容提要 一、误差度量 二、浮点数系统 三、误差传播 四、数值稳定性 作业解析
阅读更多...
快速部署 Garnet

快速部署 Garnet

快速部署 Garnet Garnet 是 Microsoft Research 推出的一种新型远程缓存存储&#xff0c;其设计速度极快、可扩展且延迟低。 Garnet 在单个节点内是线程可扩展的。它还支持分片集群执行、复制、检查点、故障转移和事务。它可以在主内存以及分层存储&#xff08;例如 SSD 和 Az…
阅读更多...
GRASSHOPPER电池Expression

GRASSHOPPER电池Expression

Grasshopper中如果要实现简单的条件if语句的效果&#xff0c;可以使用电池Expression。 举例&#xff1a;获取两个数的差值&#xff0c;永远用大数减去小数
阅读更多...
OpenUI在windows下部署使用

OpenUI在windows下部署使用

OpenUI OpenUI是一个基于Python的AI对话平台&#xff0c;支持接入多种AI模型。 通过聊天的方式来进行UI设计&#xff0c;你可以通过文字来描述你想要的UI界面&#xff0c;OpenUI可以帮你实时进行渲染出效果 安装OpenUI 这里预设你的电脑上已安装git、Python和pip&#xff0…
阅读更多...
OSI网络七层协议＜随手笔记＞

OSI网络七层协议＜随手笔记＞

1.OSI OSI&#xff08;Open System Interconnect&#xff09;&#xff0c;即开放式系统互连。 一般都叫OSI参考模型&#xff0c;是ISO组织在1985年研究的网络互连模型。该体系结构标准定义了网络互连的七层框架&#xff08;物理层、数据链路层、网络层、传输层、会话层、表示层…
阅读更多...
账号安全及应用

账号安全及应用

一、账号安全控制 1.1系统账号清理 将用户设置为无法登陆 锁定账户 删除账户 设定账户密码&#xff0c;本质锁定 锁定配置文件-chattr&#xff1a; -a 让文件或目录仅供附加用途。只能追加 -i 不得任意更动文件或目录。 1.2密码安全控制 chage 1.3历史命令 history&am…
阅读更多...
Clickhouse离线安装教程

Clickhouse离线安装教程

https://blog.51cto.com/u_15060531/4174350 1. 前置 1.1 检查服务器架构 服务器&#xff1a;Centos7.X 需要确保是否x86_64处理器构架、Linux并且支持SSE 4.2指令集 grep -q sse4_2 /proc/cpuinfo && echo "SSE 4.2 supported" || echo "SSE 4.2 …
阅读更多...
怡宝母公司冲刺上市：产能未满仍要募资扩产，突击分红25亿元

怡宝母公司冲刺上市：产能未满仍要募资扩产，突击分红25亿元

又一家瓶装水企业冲刺上市。 近日&#xff0c;怡宝母公司华润饮料&#xff08;控股&#xff09;有限公司&#xff08;下称“华润饮料”&#xff09;递交招股书&#xff0c;准备在港交所主板上市&#xff0c;BofA securities&#xff08;美银证券&#xff09;、中银国际、中信证…
阅读更多...
C++初阶学习第三弹——类与对象（上）——初始类与对象

C++初阶学习第三弹——类与对象（上）——初始类与对象

前言&#xff1a; 在前面&#xff0c;我们已经初步学习了C的一些基本语法&#xff0c;比如内敛函数、函数重载、缺省参数、引用等等&#xff0c;接下来我们就将正式步入C的神圣殿堂&#xff0c;首先&#xff0c;先给你找个对象 目录 一、类与对象是什么&#xff1f; 二、类的各…
阅读更多...
Git 工作原理

Git 工作原理

Git 工作原理 | CoderMast编程桅杆https://www.codermast.com/dev-tools/git/git-workspace-index-repo.html Workspace&#xff1a;工作区Index / Stage&#xff1a;暂存区Repository&#xff1a;仓库区&#xff08;或本地仓库&#xff09;Remote&#xff1a;远程仓库 Git 一…
阅读更多...
T1级，生产环境事故—Shell脚本一键备份K8s的YAML文件

T1级，生产环境事故—Shell脚本一键备份K8s的YAML文件

大家好&#xff0c;我叫秋意零。 最近对公司进行日常运维工作时&#xff0c;出现了一个 T1 级别事故。导致公司的“酒云网”APP的无法使用。我和我领导一起搞了一个多小时&#xff0c;业务也停了一个多小时。 起因是&#xff1a;我的部门直系领导&#xff0c;叫我**删除一个 …
阅读更多...
数据结构练习-线性表的顺序存储

数据结构练习-线性表的顺序存储

----------------------------------------------------------------------------------------------------------------------------- 1. 具有n个元素的线性表采用顺序存储结构&#xff0c;在其第i个位置插入一个新元素的算法间复杂度为 ( )(1≤i≤n1) 。 …
阅读更多...
干货：一篇文章让你掌握用户运营 沈阳新媒体运营培训

干货：一篇文章让你掌握用户运营 沈阳新媒体运营培训

用户对于产品的重要性不言而喻&#xff0c;而用户运营作为最接近用户的一环&#xff0c;自然而然受到了各大互联网公司的重视。想要掌握用户运营&#xff0c;必须得先知道其市场需求和主要技能&#xff0c;本文从这两个方面对用户运营展开了分析拆解&#xff0c;梳理用户运营的…
阅读更多...
实现printf功能代码效果

实现printf功能代码效果

1、使用 vsnprintf 模拟 printf 功能 非宏定义情境下&#xff0c;可以用作开启通讯口调试功能 实际上是通过 vsnprintf 将接收到的 format格式化后解析到缓存区&#xff0c;这里存在缓存区大小限制&#xff0c;以及代码大小区别 #include <stdarg.h> #include "std…
阅读更多...
不墨迹，向媒体投稿不讲攻略，直接上方法

不墨迹，向媒体投稿不讲攻略，直接上方法

作为一名单位信息宣传员,我曾深陷于向媒体投稿的泥沼之中,饱尝了费时费力、审核严苛、出稿缓慢的苦涩,承受着领导急切期盼与自我压力交织的煎熬。然而,当我有幸接触到智慧软文发布系统,这一切困境如同阴霾散去,取而代之的是便捷流畅的投稿流程,以及领导满意、团队轻松的工作氛围…
阅读更多...
parallels desktop 19密钥分享 附PD虚拟机安装教程 支持M/intel

parallels desktop 19密钥分享 附PD虚拟机安装教程 支持M/intel

PD19虚拟机安装破解教程 Parallels Desktop 百度网盘下载&#xff1a;https://pan.baidu.com/s/1ezQmJAjIx796NEr9WZbcOg 提取码: 8w61 &#xff08;地址容易失效&#xff0c;来之不易&#xff0c;务必点赞和收藏&#xff0c;如果失效了请到评论区留言反馈&#xff09; 注意&…
阅读更多...
VPP 源码学习总结

VPP 源码学习总结

当我们在VPP/plugins目录下注册了自己的node后&#xff0c; 肯定有一个node.func(), 那这个函数是如何执行到的呢&#xff1a; 1. 首先我们要看一下这个插件注册的时候做了什么&#xff0c; 假设node 如下&#xff1a; 编译成功后&#xff0c; 我们可以从函数vlib_plugin_earl…
阅读更多...
Telegram mini app 登录小部件 | 自定义登录按钮 或 静默登录

Telegram mini app 登录小部件 | 自定义登录按钮 或 静默登录

先说我遇到的问题&#xff0c;我按照流程接入了 telegram 登录小部件&#xff0c;在 PC 或者 H5 可以拿到数据&#xff08;不管是选择回调函数还是回调地址的形式都可以&#xff09;&#xff0c;但是在 telegram mini app 中登录拿不到数据&#xff0c;在 telegram 中 我点击登…
阅读更多...
RabbitMQ笔记（基础篇）

RabbitMQ笔记（基础篇）

视频&#xff1a; MQ基础-01.RabbitMQ课程介绍_哔哩哔哩_bilibilihttps://www.bilibili.com/video/BV1mN4y1Z7t9?p1&vd_sourced0ea58f1127eed138a4ba5421c577eb1 一、RabbitMQ简介 1.同步调用 优势&#xff1a;时效性强&#xff0c;等待结果后才返回 劣势&#xff1…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023