當前位置:聚美館>智慧生活>心理>

怎麼拆分txt百萬條數據

心理 閱讀(8.57K)
怎麼拆分txt百萬條數據

第一,透過python,numpy讀取txt檔案,採用numpy自帶的矩陣數據切割方法進行切分,操作簡單,只是需要預先安裝python。

第二,txt數據插入數據庫,透過sql的方式substr截取字元串直接查詢結果,然後匯出。

第三,透過spark這種大數據手段,切分數據列。