怎麼拆分txt百萬條數據
- 心理
- 關注:7.82K次
第一,透過python,numpy讀取txt檔案,採用numpy自帶的矩陣數據切割方法進行切分,操作簡單,只是需要預先安裝python。
第二,txt數據插入數據庫,透過sql的方式substr截取字元串直接查詢結果,然後匯出。
第三,透過spark這種大數據手段,切分數據列。
- 文章版權屬於文章作者所有,轉載請註明 https://rmnxw.com/zh-hant/lvse/xinli/54exw9.html
第一,透過python,numpy讀取txt檔案,採用numpy自帶的矩陣數據切割方法進行切分,操作簡單,只是需要預先安裝python。
第二,txt數據插入數據庫,透過sql的方式substr截取字元串直接查詢結果,然後匯出。
第三,透過spark這種大數據手段,切分數據列。