YTMartian 最近的时间轴更新 YTMartian 最近的时间轴更新 |
YTMartianV2EX 第 561198 号会员，加入于 2021-11-08 21:37:47 +08:00 |
www.dongjiayi.com
YTMartian 最近回复了
187 天前 回复了 drymonfidelia 创建的主题 › MongoDB › mongodump 出来的文件为什么比数据库本身大了一倍多？数据库大小只有 100GB， dump 出来的 bson 有 242GB，硬盘放不下了，怎么不占用硬盘空间备份数据到其它机器？ |
这是什么原理？ mongodump 出来的是数据的纯 byte 形式吧，居然还会比原来的数据更大？
187 天前 回复了 drymonfidelia 创建的主题 › 程序员 › 给大家见识一下日本的逆天 IT 水平 |
讲真，我以前读书时做了个摄像头监控的 web ，一开始就是这么做的，后面感觉太卡才知道可以流式传输
207 天前 回复了 drymonfidelia 创建的主题 › 程序员 › 要对单个 6.20TB 的超大 csv 文件保持顺序的情况下进行去除重复行，有什么好思路？显然不可能加载进内存 |
磁盘够用的话，先外部排序，然后直接读取，忽略与上一条相同的数据就行了吧，随机读取文件指定位置，也不用加载进内存
Select Language