fwrite
зацикливается на многих .csv
файлы в рабочем каталоге, но когда я пишу .parquet
он перезаписывается каждый раз.
Я попробовал несколько подходов, в основном я пытаюсь использовать имя файла I, чтобы сохранить .csv
имя файла, как показано ниже, без его перезаписи.
rm(list = ls())
gc()
# Set up environment #
require("data.table")
require("arrow")
# Set directory to data, define files #
setwd("E:/TransferComplete/07/")
files <- list.files(pattern = "csv")
for (i in files){ setwd("E:/TransferComplete/07/")
loopStart <- Sys.time()
bb <- fread(i,header = TRUE,sep = ",", data.table = FALSE, stringsAsFactors = FALSE,
select = c("x","y","z"))
gc()
write_parquet(bb,
'E:/P/i.parquet')
loopEnd <- Sys.time()
loopTime <- round(as.numeric(loopEnd) - as.numeric(loopStart), 0)
}