1
opengps 2023-05-12 12:53:06 +08:00
这锅电脑不背,excel 才是问题源头
|
2
Atukey 2023-05-12 13:26:24 +08:00
100 万条这是把 excel 当 mysql 用了吧啊😂
|
3
gam2046 2023-05-12 13:56:33 +08:00
excel 最大支持 1048576 行,我自己用 Excel 365 打开了一个试了试,要求也并不高,占用不到 1G 内存。
内存够,都是可以打开的。 |
4
ryd994 2023-05-12 14:24:54 +08:00 via Android
这锅 excel 也不背,你把 excel 当数据库用啊
搞个 mysql+网页前端不好吗?比如 phpMyAdmin raspberry pi 都能跑得动 |
5
Tink 2023-05-12 16:22:59 +08:00
这我寻思大内存就行了吧
|
6
xuelu520 2023-05-12 16:24:48 +08:00
excel 也不背锅,啥需求需要打开 1M 行数据的文件。
这明显就是有问题的 |
7
kkwkk 2023-05-12 17:26:32 +08:00
讲真做到导入 excel 我就跟同事说,“尽管做性能先别管,有的 excel 用户自己电脑都打不开还得给你解析”
|
8
NoOneNoBody 2023-05-12 17:52:31 +08:00 1
盲猜是 excel“格式”的 csv 数据?
|
9
xd880616 2023-05-12 17:58:23 +08:00 1
我经常在有接近 90 多万行,40-50 列的 excel 里搞来搞去。
1 、屏幕要大,17 寸最好 2 、16G 内存可能就够了,除非你要打开很多张这种表,而表之间有嵌套公式。当然 17 寸的笔记本比较大概率是 32G 内存的 3 、CPU 好像不太有所谓,算个公式一样都要等,我分不清是内存还是 CPU 的瓶颈,但是我的 11 代低压 U 可以基本流畅的运行,只是要等一小会,然后风扇会起飞。 |
10
Biggoldfish 2023-05-12 18:12:06 +08:00 via Android
Excel 是可以连接到 Azure SQL Database/Data warehouse 的嘛 别说 1M 行数据了,100B 行都毫无压力
而你本地只需要一个 ARM 上网本(例如 M1/M2 Mac |
11
snw 2023-05-12 20:30:31 +08:00 via Android
@ryd994
巨硬真的是想让用户把 Excel 当数据库用的,很久以前加了 table 功能之后就配了一堆 Database 函数(比如 DGET ),这里的 database 不是外部数据库,只是 excel 自己的表。 后来加了数据模型功能又配了几个 CUBE 函数,基本上把 Access 打入冷宫了。 |
12
snw 2023-05-12 20:37:43 +08:00 via Android 1
Excel 流畅运行的说法很笼统,取决你文件内容是什么。如果只是一些写死的数据那比较容易,如果有复杂公式那么要求可以极高。
如果你要做筛选操作,那么速度取决于颗粒度,大部分行相同的话速度快(比如年月的列),要是每一行数据都不同那就会很慢(比如主数据的主键)。 |
13
westerndream 2023-05-12 22:18:20 +08:00
用 python 处理吧
|