问题遇到的现象和发生背景
C++ /C大文件读入、写出、用什么方法最快,写出文件为1G5G,读取文件也是1G5G,同时支持Windows和Linux
0 Copy吗?
C++ /C大文件读入、写出、用什么方法最快,写出文件为1G5G,读取文件也是1G5G,同时支持Windows和Linux
0 Copy吗?
在 C/C++ 中,用 fread 和 fwrite 函数读写大文件是最快的方法。它们采用了缓存机制,能够最大限度地减少系统调用次数。在读写大文件时,应该每次读写大量数据,而不是一次读写一个字节。在 Windows 和 Linux 平台上都支持 fread 和 fwrite 函数。
如果文件较大,需要使用操作系统提供的内存映射文件 (memory-mapped file) 技术,即 mmap 在 Linux 和 CreateFileMapping/MapViewOfFile 在 Windows。使用这种方法可以把文件映射到进程的虚拟内存中,直接访问文件内容。
采用0 Copy 方式读写大文件,指的是避免使用操作系统提供的文件拷贝机制来实现读写操作,在Linux中可以使用sendfile()实现0 Copy, 在Windows中可以使用TransmitFile()函数实现.