Descargo un archivo CSV(unicode) de un sitio web, los campos están separados por tabulación y entre comillas doble y el salto de linea no lo hace al final de cada fila de como se ve en el CSV, ejemplo de como se ve la información del CSV al abrirlo con bloc de notas:
"campo1" "campo2" "campo3" "campo4"
"campo5" "campo6" "000000AA1011" "000000AA1012"
"000000AA1013" "000000AA1014" "000000AA1015" "000000AA1016"
"000000AA1017" "000000AA1018" "000000AA1019" "000000AA1020"
"000000AA1021" "000000AA1022"
Quiero convertirlo a CSV(utf-8) para que los campos estén separados por coma y no estén entre comillas dobles y el salto de linea lo haga como se ve en el CSV y de esta manera poder hacer el LOAD DATA LOCAL INFILE
de MySQL
e inserte los registros del CSV sin ningún problema a la tabla de MySQL
, ejemplo de como quiero que se vea el CSV al abrirlo con un bloc de notas:
campo1,campo2,campo3,campo4,campo5,campo6
000000AA1011,000000AA1012,000000AA1013,000000AA1014,000000AA1015,000000AA1016
000000AA1017,000000AA1018,000000AA1019,000000AA1020,000000AA1021,000000AA1022
Cabe mencionar que en 1er instancia intente tomar el CSV(unicode) e insertarlo en la tabla MySQL
de la siguiente manera:
LOAD DATA LOCAL INFILE 'C:/data.csv' INTO TABLE bd.down_data
FIELDS TERMINATED BY '\t' ESCAPED BY '"'
LINES TERMINATED BY '\n' IGNORE 1 LINES
(campo1, campo2, campo3);
Esta consulta me inserta los datos pero les pone un espacio después de cada carácter, ejemplo:
campo1 campo2 campo3
0 0 0 0 0 0 A A 1 0 1 1 0 0 0 0 0 0 A A 1 0 1 2 0 0 0 0 0 0 A A 1 0 1 3
0 0 0 0 0 0 A A 1 0 1 7 0 0 0 0 0 0 A A 1 0 1 8 0 0 0 0 0 0 A A 1 0 1 9
e intente eliminar los espacios de la siguiente manera:
Select REPLACE(campo1,' ','') as campo1 from bd.down_data;
pero no logra hacer ningún cambio, me imagino que el problema es la codificación del archivo CSV original y por ello quiero corregir el problema desde el CSV(tener los campos separados por coma y sin comillas dobles al momento de hacer el LOAD DATA LOCAL INFILE
) ya que si guardo nuevamente el mismo CSV desde el excel como CSV reemplazandolo y lo abro con el bloc de notas ya me aparece separado por comas.
Estoy haciendo esto en Python
:
import csv
path = 'data.csv'
with open(path, 'r', encoding='utf-8', errors='ignore') as infile, open('final.csv', 'w') as outfile:
inputs = csv.reader(infile)
output = csv.writer(outfile)
for index, row in enumerate(inputs):
if index == 0:
continue
output.writerow(row)
me crea el nuevo archivo final.csv
pero sin ningún registro y me marca el siguiente error:
Traceback (most recent call last):
File "export.py", line 9, in <module>
for index, row in enumerate(inputs):
_csv.Error: line contains NULL byte
UPDATE:
archivo real:
https://drive.google.com/open?id=1LnCJVVc83HPAXAc88BMtKoHFIHpP5xtW