c++怎么实现大文件的分块读写_c++ 文件指针seekp与seekg偏移控制【方法】
技术百科
尼克
发布时间:2026-01-01
浏览: 次 大文件分块读写需用binary模式、64KB~1MB块大小、std::vector缓冲区,通过seekg/seekp按字节偏移定位,用gcount()校验实际读取量,避免内存溢出与文本模式陷阱。
大文件分块读写的典型做法
直接用 std::ifstream::read() 一次性读整个 GB 级文件会触发内存溢出或系统拒绝分配,必须分块。核心是控制每次读取的字节数,并用 seekg() 定位起始位置。
关键点:块大小不是越大越好——通常设为 64KB~1MB(65536 或 1048576),兼顾 I/O 效率与内存安全;避免用 std::string 存原始二进制块,改用 std::vector 或裸 char* 缓冲区。
- 用
file.seekg(offset, std::ios::beg)跳转到指定字节偏移(注意:offset是std::streamoff类型,别用int) - 读完一块后,
offset += chunk_size,继续下一轮 - 最后一次读可能不足整块,需检查
file.gcount()获取实际读取字节数 - 写入时同理,用
ofstream.seekp(offset, std::ios::beg)定位,再write()
seekg/seekp 的偏移单位和常见错误
seekg() 和 seekp() 的偏移量单位始终是「字节」,不是字符数、行号或记录数。对文本文件用 std::ios::ate 或 std::ios::end 获取文件大小时,结果也以字节为单位,但要注意:
- Windows 下若文件以文本模式打开(默认),
\r\n会被当成一个字符处理,seekg()行为不可靠——必须用std::ios::binary模式 -
seekg(0, std::ios::end)后调tellg()才能得到总字节数,但此时文件指针在末尾,后续读需先seekg(0)回开头 -
std::streamoff在 32 位平台可能只有 4 字节,无法表示 >2GB 文件的偏移——编译时确保定义了_FILE_OFFSET_BITS=64(Linux)或使用支持大文件的 CRT(MSVC 需 /D "_CRT_SECURE_NO_WARNINGS" + 正确链接)
二进制大文件分块拷贝的最小可行示例
下面代码实现从 src.bin 分块拷贝到 dst.bin,每块 1MB,显式控制偏移:
#include#include int main() { std::ifstream src("src.bin", std::ios::binary); std::ofstream dst("dst.bin", std::ios::binary);
const size_t chunk_size = 1048576; std::vectorbuf(chunk_size); src.seekg(0, std::ios::end); std::streamoff total = src.tellg(); src.seekg(0); std::streamoff offset = 0; while (offset zuojiankuohaophpcn total) { size_t to_read = std::min(chunk_size, static_castzuojiankuohaophpcnsize_tyoujiankuohaophpcn(total - offset)); src.read(buf.data(), to_read); size_t actual = static_castzuojiankuohaophpcnsize_tyoujiankuohaophpcn(src.gcount()); dst.write(buf.data(), actual); offset += actual; } return 0; }
注意:
src.gcount()必须在每次read()后立即获取,它反映上一次读操作真实字节数;不能依赖to_read,因为文件可能被并发修改或到达 EOF 边界。seekp 写入时覆盖 vs 追加的陷阱
用
seekp()定位后调write(),行为取决于文件打开方式:
- 用
std::ios::binary打开但没加std::ios::trunc:写入会覆盖对应位置,文件长度不变(除非写到末尾之后,会扩展)- 用
std::ios::app时,seekp()无效——所有写入强制追加到末尾- 想“随机写入”某块数据(如更新 ZIP 中某个文件),必须确保目标文件已存在且足够长(可用
seek预扩展)p(file_size-1); write("\0", 1)
大文件场景下,
seekp()后写入比反复打开/关闭快得多,但务必确认磁盘空间充足——写入失败时不会自动回滚,容易产生半截损坏文件。
# ai # 越好 # 但要 # windows # 越大 # 文本文件 # app # 设为 # win # linux # 并发 # c++ # String # int # 字节 # 指针 # stream # 行号 # char # ios # 大文件 # EOF # 写到 # ofstream # ifstream # 也以 # 但没
相关栏目: <?muma $count = M('archives')->where(['typeid'=>$field['id']])->count(); ?> 【 AI推广<?muma echo $count; ?> 】 <?muma $count = M('archives')->where(['typeid'=>$field['id']])->count(); ?> 【 SEO优化<?muma echo $count; ?> 】 <?muma $count = M('archives')->where(['typeid'=>$field['id']])->count(); ?> 【 技术百科<?muma echo $count; ?> 】 <?muma $count = M('archives')->where(['typeid'=>$field['id']])->count(); ?> 【 谷歌推广<?muma echo $count; ?> 】 <?muma $count = M('archives')->where(['typeid'=>$field['id']])->count(); ?> 【 百度推广<?muma echo $count; ?> 】 <?muma $count = M('archives')->where(['typeid'=>$field['id']])->count(); ?> 【 网络营销<?muma echo $count; ?> 】 <?muma $count = M('archives')->where(['typeid'=>$field['id']])->count(); ?> 【 案例网站<?muma echo $count; ?> 】 <?muma $count = M('archives')->where(['typeid'=>$field['id']])->count(); ?> 【 精选文章<?muma echo $count; ?> 】
相关推荐
- 作用域操作符会影响性能吗_php静态调用性能分析【
- Win11局域网共享怎么设置 Win11文件夹网络
- php删除数据怎么加限制_带where条件删除避免
- Mac如何解压zip和rar文件?(推荐免费工具)
- Win10系统怎么查看显卡温度_Win10任务管理
- Win11怎么开启HDR模式_Windows 11
- 如何使用Golang反射创建map对象_动态生成键
- Win11怎么关闭透明效果_Windows11辅助
- 如何在Golang中实现自定义Benchmark_
- Windows10如何删除Windows.old_
- Python字符串操作教程_切片拼接与格式化详解
- 如何使用Golang实现容器自动化运维_Golan
- Windows10如何更改日期格式_Win10区域
- Win11怎么设置虚拟键盘_打开Win11屏幕键盘
- PHP 中 require() 语句返回值的用法详
- Win11怎么关闭任务栏小图标_Windows11
- c++ namespace命名空间用法_c++避免
- php下载安装后swoole扩展怎么安装_异步框架
- windows 10应用商店区域怎么改_windo
- Win11怎么设置屏保_Windows 11屏幕保
- Windows的便笺功能如何使用?(桌面备忘技巧)
- Windows10如何更改鼠标图标_Win10鼠标
- Windows怎样关闭桌面弹窗广告_Windows
- Windows10电脑怎么连接蓝牙设备_Win10
- Win11怎么修改DNS服务器 Win11设置DN
- Python技术债务管理_长期维护解析【教程】
- Win11怎么关闭键盘按键音_Win11禁用打字声
- Win10怎么卸载迅雷_Win10彻底卸载迅雷方法
- Win11怎么设置闹钟_Windows 11时钟应
- Windows10系统服务优化指南_Win10禁用
- Win11怎么关闭防火墙通知_屏蔽Win11安全中
- php中::能用于接口静态方法吗_接口静态方法调用
- Win10怎么关闭自动更新错误弹窗_Win10策略
- Win11怎么设置右键刷新选项_Windows11
- Win11搜索不到蓝牙耳机怎么办 Win11蓝牙驱
- 如何用正则表达式精确匹配“start”到“end”
- 如何在 Go 开发中正确处理本地包导入与远程模块路
- 如何减少Golang内存碎片化_Golang内存分
- mac怎么安装字体_MAC添加第三方字体与字体册管
- C#怎么创建控制台应用 C# Console Ap
- Win10如何更改网络连接_Windows10以太
- Win11怎么格式化U盘_Win11系统U盘格式化
- php本地部署后session无法保存_sessi
- 微信短链接怎么还原php_用浏览器开发者工具抓包获
- 如何在Golang中处理JSON字段缺失_Gola
- Mac怎么进行语音输入_Mac听写功能设置与使用【
- PHP 中如何在函数内持久化修改引用变量的指向
- Windows10怎么查看系统激活状态_Windo
- Win11怎么打开旧版计算器_Win11恢复传统计
- Win10怎样安装Excel数据分析工具_Win1

p(file_size-1); write("\0", 1)
QQ客服