首页 > 系统相关 >【Linux】理解Linux中一切皆文件、缓冲区、ext2文件系统、软硬链接

【Linux】理解Linux中一切皆文件、缓冲区、ext2文件系统、软硬链接

时间:2025-01-23 18:57:28浏览次数:3  
标签:文件 ext2 stream 刷新 Linux 缓冲区 include inode

头像
⭐️个人主页:@小羊
⭐️所属专栏:Linux
很荣幸您能阅读我的文章,诚请评论指点,欢迎欢迎 ~

动图描述

目录


1、如何理解在Linux中一切皆文件?

1.1 概述

在windows中是文件的东西,在linux中也是文件;其次一些在windows中不是文件的东西,比如进程、磁盘、显示器、键盘这样硬件设备也被抽象成了文件,你可以使用访问文件的方法访问它们获得信息;甚至管道,也是文件;将来我们要学习网络编程中的socket(套接字)这样的东西,使用的接口跟文件接口也是一致的。


1.2 文件类型

  1. 普通文件:这是最常见的文件类型,如文本文件、二进制文件、图像文件等。它们存储着数据或程序代码。
  2. 目录文件:目录在Linux中也被视为一种特殊的文件,它包含了目录内各个文件的文件名和指向这些文件的指针。通过访问目录文件,可以浏览和管理目录内的文件。
  3. 设备文件:设备文件代表了系统中的硬件设备,如硬盘、打印机、网络接口等。通过对设备文件的读写操作,可以实现对硬件设备的控制。设备文件通常位于/dev目录下。
  4. 套接字(Socket):套接字是一种特殊的文件,用于网络通信。在Linux中,每个套接字都有一个对应的文件描述符,通过读写这个文件描述符可以实现网络通信。
  5. 管道(Pipe):管道也是一种特殊的文件,用于进程间通信。它将一个进程的输出作为另一个进程的输入,实现了进程间的数据传递。

1.3 优势

  1. 统一接口:“一切皆文件”使得Linux系统提供了一个统一的接口来访问和管理所有资源。这降低了系统的复杂性,并提高了系统的可扩展性。
  2. 简化编程:程序员只需要熟悉文件系统的接口,就可以实现对系统资源的操作和管理。这降低了编程难度,提高了开发效率。
  3. 资源抽象:通过将所有资源都抽象为文件的形式,Linux系统实现了对资源的统一管理和访问。这有助于实现资源的共享和保护,提高了系统的安全性和可靠性。

这样做最明显的好处是,开发者仅需要使用一套API和开发工具,即可调取Linux系统中绝大部分的资源。举个简单的例子,Linux中几乎所有读(读文件,读系统状态,读PIPE)的操作都可以用read函数来进行;几乎所有更改(更改文件,更改系统参数,写PIPE)的操作都可以用write函数来进行。

在这里插入图片描述


2、缓冲区

2.1 为什么要引入缓冲区?

缓冲区是内存空间的一部分。也就是说,在内存空间中预留了一定的存储空间,这些存储空间用来缓冲输入或输出的数据,这部分预留的空间就叫做缓冲区。缓冲区根据其对应的是输入设备还是输出设备,分为输入缓冲区和输出缓冲区。

  • 引入缓冲区是为了减少磁盘的读写次数,再加上计算机对缓冲区的操作大大快于对磁盘的操作,故应用缓冲区可大大提高计算机的运行速度。

  • 调用系统调用,是有成本的,所以有个用户级缓冲区。

  • 内核级缓冲区何时刷新是由OS自主决定的,如果我们想要自己控制也是有办法的,有系统调用fsync,强制刷新。

  • 当一个进程在退出的时候,会自动刷新自己的缓冲区,fclose关闭文件的时候也会自动刷新。

  • 我们用printf等函数,首先写入到用户级缓冲区中,可以通过fflush刷新到内核级缓冲区。用户级缓冲区的作用是减少系统调用次数,内核级缓冲区的作用是减少IO次数。


2.2 缓冲类型

标准I/O提供了3种类型的缓冲区。

  • 全缓冲区:这种缓冲方式要求填满整个缓冲区后才进行IO系统调用操作。对于磁盘文件的操作通常使用全缓冲的方式访问。
  • 行缓冲区:在行缓冲情况下,当在输入和输出中遇到换行符时,标准I/O库函数将会执行系统调用操作。当所操作的流涉及一个终端时(例如标准输入和标准出),使用行缓冲方式。因为标准I/O库每行的缓冲区长度是固定的,所以只要填满了缓冲区,即使还没有遇到换行符,也会执行I/O系统调用操作,默认行缓冲区的大小为1024
  • 无缓冲区:无缓冲区是指标准I/O库不对字符进行缓存,直接调用系统调用。标准出错流stderr通常是不带缓冲区的,这使得出错信息能够尽快地显示出来。

除了上述列举的默认刷新方式,下列特殊情况也会引发缓冲区的刷新:

  1. 缓冲区满时;
  2. 执行flush语句;

通过下面这个例子来理解一下缓冲区的刷新:

#include <stdio.h>
#include <unistd.h>
#include <string.h>

int main()
{
	//c库函数
	printf("hell printf\n");
	fprintf(stdout, "hello fprintf\n");
	const char *str = "hello fwrite\n";
	fwrite(str, 1, strlen(str), stdout);

	//系统调用
	const char *w = "hello write\n";
	write(1, w, strlen(w));

	return 0;
}

在这里插入图片描述
当我们往显示器上写入时是行刷新,打印顺序和我们代码一致,如果将往显示器上写入重定向到往文件中写入,就不是行刷新了,而是缓冲区满了才刷新,所以最后先刷新了系统调用write,最后进程结束的时候再自动刷新的用户级缓冲区

#include <stdio.h>
#include <unistd.h>
#include <string.h>

int main()
{
	//c库函数
	printf("hell printf\n");
	fprintf(stdout, "hello fprintf\n");
	const char *str = "hello fwrite\n";
	fwrite(str, 1, strlen(str), stdout);

	//系统调用
	const char *w = "hello write\n";
	write(1, w, strlen(w));

	//子进程
	fork();
	
	return 0;
}

在这里插入图片描述
如果我们在最后创建一个子进程,对于往显示器上写入时的行刷新不影响,不过将往显示器上写入重定向到往文件中写入时就和上面不一样了,因为C库函数先将字符串写入到用户级缓冲区中,最后父子进程各自把它们的缓冲区刷新了一遍,所以就有了两份数据,而系统调用write写入到用户级缓冲区后自己就将数据拷贝到内核级缓冲区了,不等到进程结束再刷新。

我们自己封装一个简单的stdio.h,来深刻理解一下数据写入的过程:

#pragma once 

#include <stdio.h>
#include <unistd.h>
#include <string.h>
#include <unistd.h>
#include <sys/types.h>
#include <fcntl.h>
#include <stdlib.h>

#define SIZE 1024

#define FLUSH_NONE 0
#define FLUSH_LINE 1
#define FLUSH_FULL 2

struct IO_FILE
{
	int flag; // 刷新方式
	int fileno; //文件描述符
	char outbuffer[SIZE];
	int size;
	int capacity;
};

typedef struct IO_FILE mFILE;

mFILE *mfopen(const char *filename, const char *mode);
int mfwrite(const void *ptr, int num, mFILE *stream);
void mfflush(mFILE *stream);
void mfclose(mFILE *stream);
#include "mystdio.h"

mFILE *mfopen(const char *filename, const char *mode)
{
    int fd = -1;
	if (strcmp(mode, "r") == 0)
	{
		fd = open(filename, O_RDONLY);
	}
	else if (strcmp(mode, "w") == 0)
	{
		fd = open(filename, O_CREAT | O_WRONLY | O_TRUNC, 0666);
	}
	else if (strcmp(mode, "a") == 0)
	{
		fd = open(filename, O_CREAT | O_WRONLY | O_APPEND, 0666);
	}
	if (fd < 0)
	{
		return NULL;
	}
	mFILE *mf = (mFILE*)malloc(sizeof(mFILE));
	if (mf == NULL)
	{
		close(fd);
		return NULL;
	}

	mf->flag = FLUSH_LINE;
	mf->fileno = fd;
	mf->size = 0;
	mf->capacity = SIZE;

	return mf;
}

void mfflush(mFILE *stream)
{
	if (stream->size > 0)
	{
		//刷新的本质
		write(stream->fileno, stream->outbuffer, stream->size);
		stream->size = 0;
	}
}

int mfwrite(const void *ptr, int num, mFILE *stream)
{
	//1、库函数写方法:将数据拷贝到缓冲区
	memcpy(stream->outbuffer+stream->size, ptr, num);
	stream->size += num;

	//2、检测是否刷新
	if (stream->flag == FLUSH_LINE && stream->size > 0 && stream->outbuffer[stream->size - 1] == '\n')
	{
		mfflush(stream);
	}
	return num;
}

void mfclose(mFILE *stream)
{
	if (stream->size > 0)
	{
		mfflush(stream);
	}
	close(stream->fileno);
}

3、Ext系列文件系统

文件有被打开的文件未打开的文件,前面我们介绍的都是被打开的文件,其实对于文件来说未打开的文件是占多数的,未打开的文件在磁盘上。
文件存在就要被访问,访问文件的前提是要打开文件,打开文件的前提是先要找到这个文件,那么对于未打开的文件我们如何找到它,就是文件管理系统需要做的工作。不管是内存中已打开的文件还是磁盘中未打开的文件,都要被文件系统管理起来。整个过程可以类比快递的管理系统。

我们需要讨论下面两个问题:

  1. 文件系统是怎么管理磁盘中未打开的文件的?
  2. 如何理解文件的路径?

扇区是磁盘存储数据的基本单位,通常是512KB,所以磁盘也叫块设备。磁盘就是一个元素为扇区的一维数组,数组的下标就是每一个扇区的LBA地址,OS使用磁盘,就可以用一个数字访问磁盘扇区。

在这里插入图片描述

  • 每个文件都有自己的inode,就像进程都有自己的PCB一样,inode是文件属性数据的集合,是一个结构体,特殊的是文件名属性不在inode中保存。Linux中,文件内容和文件属性是分开存储的。

  • 找一个文件,是通过inode编号找的。删除一个文件,只需要把inode BitmapBlock Bitmap中对应的比特位由1置0即可,所以删除一个文件后也是可以恢复的。

  • 文件系统以分区为单位,不同的分区可以是不同的文件系统。对于Super Block,一个分区内的多个组中一般只有几个组中存在,且都是一样的,这样做的目的为了备份,防止一整个分区都挂掉。

  • 格式化的本质是:向一个分区中写入文件系统。

  • 为了稳定,一个组里面inode个数,block个数都是固定的。inode以分区为单位,一个分区一套inodeinode分配的时候,只需要确定每个组的起始inodeblock也是统一编号的,和inode类似。

inodeblock是怎么映射的?

目录和普通文件类似,也有inodedatablock,其内容是文件名和inode的映射关系

文件的三个时间:

  • Access:文件最后访问时间
  • Modify:文件内容最后修改时间
  • Change:文件属性最后修改时间

4、软硬链接

ln -s file.txt file-soft.link:给对应的文件建立软链接。
在这里插入图片描述

1、如何理解软硬链接?

  • 软链接有独立的inode,软链接内容保存的是目标文件的路径,就像Windows中的快捷方式。
  • 硬链接不是独立的文件,没有独立的inode,硬链接本质上就是一组文件名和已经存在的文件的映射关系。
  • Linux不允许对目录新建硬链接。

2、为什么要有软硬链接?

  • 软链接最大的作用就是以最简单的方式,快速定位一个文件或目录。
  • 硬链接可以做文件备份。
  • ...就是硬链接。

unlink删除软链接。


本篇文章的分享就到这里了,如果您觉得在本文有所收获,还请留下您的三连支持哦~

头像**博客之星2024年度总评选—主题文章创作要求:**

1、文章创作方向主要以总结盘点、技术总结或技术洞察三个方向为主( 3 选 1 ),具体如下:

  • 总结盘点类:个人成长与突破盘点、年度创作历程回顾、个人生活与博客事业的融合与平衡等;
  • 技术总结类:特定技术领域的年度深度总结、技术工具与平台的年度使用心得、技术项目实战经验与成果展示等;
  • 技术洞察类:前沿技术趋势洞察与分析、跨领域技术融合与创新实践、技术对社会与人文的影响深度思考等。

2、文章必须为公开且原创,严禁抄袭、洗稿、引流等违规行为;
3、投稿内容需积极向上,字数不低于 800 字(不包含代码);
4、未在规定时间内完成创作和未按照要求的创作均视为无效参与。

提醒:在发布作品前,请将不需要的内容删除。

标签:文件,ext2,stream,刷新,Linux,缓冲区,include,inode
From: https://blog.csdn.net/2301_78843337/article/details/145328090

相关文章

  • Linux 进程环境变量:深入理解与实践指南
      ......
  • Linux捣鼓记录:使用 Preload 加快应用程序启动
    简介Preload是由BehdadEsfahbod编写的程序,它作为一个守护进程运行,并使用马尔可夫链统计程序的使用情况;在计算机空闲时,使用频率较高的程序的文件会加载到内存中。这会加快程序的启动时间,因为需要从磁盘读取的数据更少。安装终端执行以下命令安装Preload:sudoaptinstallpr......
  • 【发现一个问题】go test的时候,在macos arm64 下不明原因的发生异常,但是在linux下完全
    作者:张富春(ahfuzhang),转载时请注明作者和引用链接,谢谢!cnblogs博客zhihuGithub公众号:一本正经的瞎扯这只是一个简单的队列,在单个协程中运行,莫名其妙就panic了,而且堆栈信息中找不到有用信息。同样的程序在linux中执行又是对的。暂时想不明白是为什么。Runningt......
  • RockyLinux docker方式安装 rocket.chat
    主要参考官方文档https://docs.rocket.chat/docs/deploy-with-docker-docker-compose没有比这更好的了,本文能做的实际上也就是翻译翻译其中的内容。建议可以直接看原文如果需要使用移动端APP前提域名ssl整数安装Docker略:我自己都忘记自己当时怎么装的了...安装Docker......
  • Linux下printf函数的输出问题
    Linux下printf函数的输出问题        向屏幕输出,C语言中可以使用printf函数,实际上,printf不是直接把数据输出到屏幕上的,首先把输出的内容写到缓冲区中,当缓冲区放满以后,它会把缓冲区的内容输出到屏幕上。        为什么这样做呢?        有一个效率的......
  • 【Linux日志】syslog协议的Linux系统日志服务程序使用
    一、什么是syslog协议syslog协议为网络设备间传输日志信息提供了标准化解决方案。借助该协议,服务器、路由器、防火墙等各类设备能够将日志消息发送至中央日志服务器,实现日志的集中管理与分析。下面为您详细介绍syslog协议的关键概念和组成部分:1.协议版本RFC3164:早期的s......
  • 腾讯云Linux安装 Ubuntu Desktop GUI图形化桌面
    我的系统版本是ubuntu20.04运行以下命令,更新软件源。sudoapt-getupdate运行以下命令,安装图形化桌面。sudoapt-getinstallubuntu-desktop运行以下命令,设置默认启动为图形化桌面。您可以执行systemctlset-defaultmulti-user.target,即可取消图形化界面登录。sudosystemctls......
  • linux mint 22安装新的dock停靠栏
    一,PLANK,安装成功,但是运行后和系统有冲突,无法使用。二,LATTE-DOCK,安装不成功,始终提示缺少依赖文件。三,CAIRO-DOCK,安装成功,安装新的主题后正常使用。下面附安装方法:sudoaptinstallcairo-dock四,安装主题的方法:要下载和安装Cairo-Dock的主题包,可以按照以下步骤操作:1.......
  • Linux下卸载Oracle 11g
    第一种方法:使用oracle自带的runInstaller卸载123[oracle@VM_0_14_centosdeinstall]$cd$ORACLE_HOME[oracle@VM_0_14_centos 11.2.0]$cddeinstall/[oracle@VM_0_14_centosdeinstall]$./deinstall第二种方法:通过删除文件的方式卸载;(即:删除Oracl......
  • linux文本内容和文件操作常用命令
     写在前面:正则表达式用来在文件中匹配符合条件的字符串,正则是包含匹配。grep、awk、sed等命令可以支持正则表达式。(操作字符串的)通配符用来匹配符合条件的文件名,通配符是完全匹配。ls、find、cp这些命令不支持正则表达式,所以只能使用shell自己的通配符来进行匹配了。(操作文......