• 2

超大CSV問題

手邊有個CSV檔案 7G
唯一能確定是裡面有近2千萬筆歷史資料
使用excel無法開啟

請問要用什麼軟體才能開啟或匯入 看見檔案內容呢?
2023-02-19 9:05 發佈
文章關鍵字 問題 CSV
geek1031 wrote:
手邊有個CSV檔案 7G
唯一能確定是裡面有近2千萬筆歷史資料


7 GB 2千萬筆 ?
好奇是啥種類的資料 ?
geek1031 wrote:
手邊有個CSV檔案 7G...(恕刪)

倒xml 就行了
ultraedit這套軟體,可以試看看

https://www.ultraedit.com/support/tutorials-power-tips/ultraedit/large-file-handling/
CSV 是純文字檔..

可以用EmEditor切割成小檔案 再開啟..
藍色蟾蜍跟藍蛆 = 最大的在野黨..
匯入ACCESS 或 MYSQL 這種資料庫
貓老闆
CONA24

如果家裡有office有一定的機率會裝到ACCESS這樣就方便了。

2023-02-19 12:06
CONA24

要不用NotePad++我國人民自己開發的文字編輯軟體我看也行。

2023-02-19 12:08
geek1031 wrote:
手邊有個CSV檔案 7G
唯一能確定是裡面有近2千萬筆歷史資料
使用excel無法開啟


檔案錯亂 的機會比較大!!

類似:容量才16G usb 隨身碟,內有一檔案顯示20G
好像要先用 [救檔案軟體]

應該沒有文字檔軟體可以開 7G, 2千萬筆資料應該也不用7G.
我的Rainbow Text Editor,在XP 4G Ram ,G540,大概可以開100M, 就約 3百萬行 資料.
無聊做壓力測試. 該電腦5年壞掉,好像是顯示卡壞了,也不知道是玩game壞的,還是...

Rainbow Text Editor v3.92 (約2014最後改版, 電腦壞了,Delphi 5 CD 也壞了)
免費中文版
https://1drv.ms/u/s!Av3q0LtSFFdfgmJfcwZM2ynUWtVo?e=2VlHIl
最近在 win11測試,馬馬虎虎,要XP才會快.
哈瑪星.阿順(Forex I.A. Chen) www.flickr.com/ForexChen
snare

不是沒有可能,雖然往下2千萬列,但往右資料量未知,也許每筆資料都有超多文字、欄位。

2023-02-19 16:10
根據微軟的資料:工作表和活頁簿的規格與限制

Excel 的極限是 1,048,576 列乘以 16,384 欄
所以不可能用 Excel 處理這種檔案
還是用資料庫吧
(Access 也算是資料庫一種,也可以試試,至於它的限制還要查一下)
不然就只能拆分成多個檔案了
geek1031 wrote:
手邊有個CSV檔案 7G
唯一能確定是裡面有近2千萬筆歷史資料



Notepad++
RolexTFH520 wrote:
Notepad++


測了下 V8.4.8 X64 :
OS : Windows 7 X64
RAM : 12 GB

檔案 : 928 MB 總行數 : 17,019,217(1 千 700 萬)
正常 但是讀很久

檔案 : 5.03 GB 總行數 : 94,551,201(9 千 400 萬)
記憶體吃掉近 10 GB,
出現 記憶體 不足,點 確定 後,電腦 死當.

結論 :
不適合 大檔案.
  • 2
內文搜尋
X
評分
評分
複製連結
Mobile01提醒您
您目前瀏覽的是行動版網頁
是否切換到電腦版網頁呢?