Linux学习记录--文件IO操作相关系统编程文件IO操作相关系统编程

这里主要说两套IO操作接口，分别是：

POSIX标准

read|write接口，函数定义在#include<unistd.h>

ISO C标准

fread|fwrite接口，函数定义在#include<stdio.h>

有书上说POSIX标准与ISO C标准的区别在于文件读写是否带缓冲区，我则不是很认同，因此POSIX标准下的IO操作也是带缓冲区的，至于这两个标准下的IO性能谁更加好则不一定，因为这和缓冲区的大小，以及用户逻辑有很大关系。

ssize_t read (int __fd, void *__buf, size_t __nbytes)

ssize_t write (int __fd, constvoid *__buf, size_t __n)

读规则：

如预读字节数>文件总字节数，则全部读入文件字节数，返回值为文件字节数

如预读字节数<文件总字节数,则读满__buf（以__nbytes为准）后返回，下回读取会将继续读

如读到文件末尾，则返回值为0

比如：文件长度是100，buf长度是70，那么第一个读取70，读2此会读取剩下的30 ，第三次由于文件游标已经处于文件末尾，则返回0

写操作

<code>#include <unistd.h></code>

<code>#include <fcntl.h></code>

<code>#include<stdio.h></code>

<code>#define BUFFER_SIZE 200</code>

<code> </code><code>if</code> <code>(access(</code><code>"/tmp/iofile"</code><code>, F_OK)) {</code>

<code> </code><code>fd = creat(</code><code>"/tmp/iofile"</code><code>, 0777);</code>

<code> </code><code>fd = open(</code><code>"/tmp/iofile"</code><code>, O_WRONLY | O_APPEND);</code>

<code> </code><code>perror</code><code>(</code><code>"文件打开错误！"</code><code>);</code>

<code> </code><code>return</code> <code>-1;</code>

<code> </code><code>char</code> <code>buf[BUFFER_SIZE];</code>

<code> </code><code>val = read(0, buf, BUFFER_SIZE);</code>

<code> </code><code>write(fd, buf, BUFFER_SIZE);</code>

<code> </code><code>break</code><code>;</code>

<code> </code><code>} </code><code>while</code> <code>(1);</code>

<code> </code><code>printf</code><code>(</code><code>"写入数据总长度是：%d\n"</code><code>, sum);</code>

<code> </code><code>return</code> <code>1;</code>

读操作

<code>#define BUFFER_SIZE 400</code>

<code> </code><code>int</code> <code>fd = open(</code><code>"/tmp/iofile"</code><code>, O_RDONLY);</code>

<code> </code><code>val = read(fd, buf, BUFFER_SIZE);</code>

<code> </code><code>printf</code><code>(</code><code>"读入数据长度是：%d\n"</code><code>, val);</code>

<code> </code><code>write(1, buf, BUFFER_SIZE);</code>

<code> </code><code>printf</code><code>(</code><code>"\n"</code><code>);</code>

<code> </code><code>sleep(1);</code>

执行顺序

1.执行写操作：

tkf@tkf:~/workspace/FileIOWrite/Debug$./FileIOWrite </etc/mtab

写入数据总长度是：990

2.在另外命令行（进程）执行读操作

tkf@tkf:~/workspace/FiloIORead/Debug$./FiloIORead

读入数据长度是：400

读入数据长度是：200

读入数据长度是：0

……..

è由于此时文件游标已经处于文件末端因此，长度是0

3.再次执行写操作

此时读端进程输出

è因为再次有数据写入，所以可以读到数据，当数据再次读取完毕，则返回0

当然对于第三步骤，我们也可以通过更改读进程游标的位置（lseek）使其能读到数据

根据书上效率对比试验，当缓冲区大小（buf）等于文件系统块大小时，性能是最佳的。

文件系统块大小struct stat –>st_blksize 查看

对于IO操作主要步骤可以理解为：

1.内核与系统缓冲区的数据拷贝

2.系统缓冲区与用户缓冲区的拷贝

举例，用户BUF是10字节，系统缓冲区时4096字节，那么到我们写端将用户BUF数据拷贝被系统缓冲区中，由于系统缓冲区没有填满，因此不会执行IO操作，直到写满或者执行同步操作。对于读来说，文件系统会将数据先都预读到系统缓冲区，每次我们请求读都是从系统缓冲区拷贝到用户缓冲器。因此在数据存在缓冲区并没有写到磁盘时如果系统出现故障可能数据会丢失。

标准IO是围绕流的，他与POSIX标准相比可以使用户不用关注分配缓冲区的大小，他会选择适当缓冲区以优化执行IO

对于标准IO来说，冲洗就是讲缓冲区的数据写入磁盘

对于标准IO库提供了三种类型的缓冲

全缓冲：在填满标准IO缓冲区后才进行实际的IO操作

行缓冲：当输入和输出遇到换行符时才执行实际的IO操作

不带缓冲：每次一个都进行实际的IO操作

void setbuf(FILE *__restrict __stream, char *__restrict __buf) ;

int setvbuf (FILE *__restrict __stream, char *__restrict __buf,

int __modes, size_t __n) ;

参数：

__n：缓冲区长度

__buf：缓冲区指针

__stream文件流

__modes：缓冲模式

_IOFBF0：全缓冲

_IOLBF 1：行缓冲

_IONBF 2：无缓冲

函数

mode

buf

缓冲区长度

缓冲类型

setbuf

非空

长度为BUFSIZ的BUF

全缓冲，行缓冲

NULL

无缓冲区

不带缓冲

setvbuf

IOFBF

长度为size的buf

全缓冲

合适长度的系统缓冲区

IOLBF

行缓冲

IONBF

<code>#include <stdio.h></code>

<code>#include <stddef.h></code>

<code>#include <string.h></code>

<code> </code><code>FILE</code> <code>* iostream = </code><code>fopen</code><code>(</code><code>"fopenfile"</code><code>, </code><code>"w+"</code><code>);</code>

<code> </code><code>if</code> <code>(iostream == NULL) {</code>

<code> </code><code>perror</code><code>(</code><code>"流打開錯誤"</code><code>);</code>

<code> </code><code>setvbuf</code><code>(iostream, NULL, _IOFBF, BUFSIZ); </code><code>//1</code>

<code> </code><code>char</code> <code>*buf = </code><code>"abcde"</code><code>; </code><code>//2</code>

<code> </code><code>int</code> <code>size = </code><code>fwrite</code><code>(buf, </code><code>sizeof</code><code>(</code><code>char</code><code>), </code><code>strlen</code><code>(buf)+1 ,iostream);</code>

<code> </code><code>printf</code><code>(</code><code>"寫入的數據是：%s"</code><code>, buf);</code>

<code> </code><code>fflush</code><code>(iostream); </code><code>//3</code>

<code> </code><code>sleep(-1);</code>

针对上述代码做如下分析：

将3处进行注释，并执行

fopenfile文件无任何内容,因此现在数据都在缓冲区，由于进程SLEEP流未关闭，并且缓冲区也没有写满，因此不会执行IO操作

不注释任何内容，并执行

fopenfile文件内容为abcde,由于fflush冲洗将缓冲区数据写入文件

将1处缓冲模式改为_IOLBF,注释3处，并执行

fopenfile文件无任何内容，虽然指定了行缓冲但是没有行结束符，因此数据在缓冲区内，没有进行IO操作

将1处缓冲模式改为_IOLBF,注释3处，并将2处数据改为buf=”abcde\n” ,执行

fopenfile文件内容为abcde,由于设置行行缓冲，并且存在结束符，因此进行了IO操作

将1处缓冲模式改为_IONBF,注释3处，并执行

fopenfile文件内容为abcde,由于设置无缓冲，因此每次写入都会进行IO操作

打开一个指定的文件

FILE *fopen (constchar *__restrict __filename,

constchar *__restrict __modes)

通过文件描述符打开一个指定的文件

FILE *fdopen (int __fd, constchar *__modes)

modes：打开模式

R或rb

为读而打开

W或wb

把文件截断为0长，或为写而创建

A或ab

添加；在文件尾为写而打开，或为写而创建

R+

为读和写而打开

W+

把文件截断为0长，或为为读和写而打开

A+

为在文件尾为写而打开或创建

关闭文件流

intfclose (FILE *__stream);

读函数

int fgetc (FILE *__stream);

int getc (FILE *__stream);

int getchar (void);

fgetc是一个函数，getc可实现为宏，getchar为从标准输出流中获取一个字符，相当于getc(stdin)

返回值：若成功则返回读取到的字符，若失败或读到文件尾则返回-1

由于无论失败或者读到文件尾都返回-1，为了区分哪种原因返回的-1。提供下面2个函数

以读到文件结尾返回

int feof (FILE *__stream)

以产生错误返回返回

int ferror (FILE *__stream)

返回值：条件为真返回非0.条件为假返回0

写函数

int fputc(int __c, FILE *__stream);

int putc (int __c, FILE *__stream);

int putchar (int __c);

返回值：成功返回c,失败返回EOF

举例：

<code> </code><code>FILE</code> <code>* iostream = </code><code>fopen</code><code>(</code><code>"fopenfile"</code><code>, </code><code>"r"</code><code>);</code>

<code> </code><code>while</code> <code>((c = </code><code>getc</code><code>(iostream)) != -1) {</code>

<code> </code><code>printf</code><code>(</code><code>"读取的字符是:"</code><code>);</code>

<code> </code><code>putchar</code><code>(c);</code>

<code> </code><code>printf</code><code>(</code><code>"\n"</code><code>);</code>

<code> </code><code>if</code> <code>(</code><code>feof</code><code>(iostream)) {</code>

<code> </code><code>printf</code><code>(</code><code>"读取到文件末尾结束\n"</code><code>);</code>

<code> </code><code>if</code> <code>(</code><code>ferror</code><code>(iostream)) {</code>

<code> </code><code>printf</code><code>(</code><code>"读取出现异常结束\n"</code><code>);</code>

读取的字符是:a

读取的字符是:b

读取的字符是:c

读取的字符是:d

读取的字符是:e

读取的字符是:

读取到文件末尾结束

int fputs (constchar *__restrict __s, FILE *__restrict __stream);

int puts (constchar *__s);

返回值：成功返回非负值，错误返回EOF

char *fgets (char *__restrict __s, int __n, FILE *__restrict __stream)

char *gets (char *__s)

返回值：成功返回buf, 失败或达到文件结尾返回NULL

<code> </code><code>FILE</code> <code>*iostream = </code><code>fopen</code><code>(</code><code>"fopenfile"</code><code>, </code><code>"r+"</code><code>);</code>

<code> </code><code>int</code> <code>reval = </code><code>fputs</code><code>(</code><code>"hello world\n"</code><code>, iostream);</code>

<code> </code><code>if</code> <code>(reval == -1) {</code>

<code> </code><code>perror</code><code>(</code><code>"文件写入失败！"</code><code>);</code>

<code> </code><code>fflush</code><code>(iostream);</code>

<code> </code><code>fclose</code><code>(iostream);</code>

<code> </code><code>iostream = </code><code>fopen</code><code>(</code><code>"fopenfile"</code><code>, </code><code>"r+"</code><code>);</code>

<code> </code><code>memset</code><code>(buf, </code><code>‘\0‘</code><code>, 1000);</code>

<code> </code><code>char</code> <code>*getval = </code><code>fgets</code><code>(buf, 1000, iostream);</code>

<code> </code><code>printf</code><code>(</code><code>"读入一行数据是：%s"</code><code>, buf);</code>

前面说到的单字节以及整行读写，如果要写一个结构则需要每一个结构项的读写很麻烦，这就需要用到2进制IO

size_t read (void *__restrict __ptr, size_t __size,

size_t __n, FILE *__restrict __stream)

__pt：结构体（数据）指针

__size：单个结构体大小

__n：结构体数量

__stream：文件流

返回值：读或写的对象数

size_t fwrite (constvoid *__restrict __ptr, size_t __size,

size_t __n, FILE *__restrict __s);

<code>typedef</code> <code>struct</code> <code>{</code>

<code> </code><code>if</code> <code>(0 == </code><code>strcmp</code><code>(argv[1], </code><code>"read"</code><code>)) {</code>

<code> </code><code>FILE</code> <code>*ios = </code><code>fopen</code><code>(</code><code>"binaryfile"</code><code>, </code><code>"r"</code><code>);</code>

<code> </code><code>fread</code><code>(&info, </code><code>sizeof</code><code>(Info), 1, ios);</code>

<code> </code><code>printf</code><code>(</code><code>"no=%d\n"</code><code>, info.no);</code>

<code> </code><code>printf</code><code>(</code><code>"name=%s\n"</code><code>, info.name);</code>

<code> </code><code>printf</code><code>(</code><code>"tel=%ld\n"</code><code>, info.tel);</code>

<code> </code><code>printf</code><code>(</code><code>"读取到文件末尾结束\n"</code><code>);</code>

<code> </code><code>if</code> <code>(</code><code>ferror</code><code>(ios)) {</code>

<code> </code><code>printf</code><code>(</code><code>"读取出现异常结束\n"</code><code>);</code>

<code> </code><code>} </code><code>else</code> <code>if</code> <code>(0 == </code><code>strcmp</code><code>(argv[1], </code><code>"write"</code><code>)) {</code>

<code> </code><code>FILE</code> <code>*ios = </code><code>fopen</code><code>(</code><code>"binaryfile"</code><code>, </code><code>"w"</code><code>);</code>

<code> </code><code>char</code> <code>*name = </code><code>"hello"</code><code>;</code>

<code> </code><code>memcpy</code><code>(info.name, name, </code><code>strlen</code><code>(name) + 1);</code>

<code> </code><code>fwrite</code><code>(&info, </code><code>sizeof</code><code>(Info), 1, ios);</code>

执行结果：

no=1

name=hello

tel=1234567

说明：

1.生成的文件为2进制文件，如打开看到的会是乱码

2.最后需要在此尝试读入一个字符，那么流才会结束，才会使用feof等判断

可以设置文件位置指示器来影响一个文件读取，用法和一致

获取当前文件位置指示器

long int ftell (FILE *__stream)

返回值：当前文件位置指示器

int fgetpos (FILE *__restrict __stream, fpos_t *__restrict __pos);

返回值：成功返回0，失败返回非0值

当前文件位置指示器

int fseek (FILE *__stream, longint __off, int __whence);

int fsetpos (FILE *__stream, constfpos_t *__pos);

重定位文件位置指示器

void rewind (FILE *__stream);

相当于(void)fseek(stream, 0L,SEEK_SET)

char *tmpnam (char *__s)

char *tempnam (constchar *__dir, constchar *__pfx)

FILE *tmpfile (void) __wur;

int mkstemp (char *__template)

<code> </code><code>char</code> <code>*reval = </code><code>tmpnam</code><code>(name);</code>

<code> </code><code>printf</code><code>(</code><code>"允许最大随机文件名个数：%d\n"</code><code>, TMP_MAX);</code>

<code> </code><code>printf</code><code>(</code><code>"文件名：%s\n"</code><code>, reval);</code>

<code> </code><code>char</code> <code>*newname = tempnam(</code><code>"/home/tkf/"</code><code>,</code><code>"SDF"</code><code>);</code>

<code> </code><code>printf</code><code>(</code><code>"扩展文件名：%s\n"</code><code>, newname);</code>

<code> </code><code>FILE</code> <code>*ios=</code><code>tmpfile</code><code>();</code>

<code> </code><code>sleep(10);</code>

<code> </code><code>fclose</code><code>(ios);</code>

<code> </code><code>printf</code><code>(</code><code>"临时文件删除成功！\n"</code><code>);</code>

Linux学习记录--文件IO操作相关系统编程文件IO操作相关系统编程

继续阅读

Apache (You don't have permission to access / on this server.）

debian9升级4.9.0内核到4.19.2内核过程

centOS7 配置 vsftpd 虚拟用户及权限Vsftpd配置虚拟用户及权限

linux-svn卸载与安装

vsftp虚拟多用户多权限一键部署脚本

Ubuntu14.04 LTS下安装mongodb

Nginx服务优化（1）——隐藏版本号、修改用户与组、网页缓存时间、日志切割、连接超时一、隐藏版本号二、修改用户与组三、配置Nginx网页缓存时间四、实现Nginx日志分割五、配置Nginx实现连接超时六、补充关于时间日期的命令

httpd服务的部署、启动、配置和简单优化一、部署二、启动三、配置文件

配置网页内容访问

手动安装Intel network I217-LM网卡的Linux驱动

禁止ubuntu系统弹出报错界面

Ubuntu Linux下Apache的配置文件

samba服务器的功能

【Linux】UDP广播报文接收速率问题

Linux设备模型（中）之上层容器

PowerPC平台 Linux移植三