Home / Questions / 325756
Accepted
Piero Pajares
Asked: 2020-01-31 15:21:23 +0800 CST 2020-01-31 15:21:23 +0800 CST

Read Formatted Text to csv

  • 772

With the zoho api I consult the mail that has an attachment with this format:

b' Ruta\tDespacho\tFecha Reparto\tRegional\tZona\tSector\tNombre\tTipo 
Caja\tFactura\tNumero Caja\tCodigo Cliente\tIdentificacion\tCod Premio/Producto\tDireccion\tCodigo Distrito\tDistri
to\tDescrip Premios/Productos\tCantidad\tCiudad\tTelefono\tReferencia de la Direccion\tCampana\tFecha Despacho\tCons Caja\tCodigo Distribuidor\tDistribuidor\tCelular1\n  18782\t51602\t\t
001\t132\t012\tNELLY MARIBEL TOAPANTA TOAQUIZA\tPEDIDO\t1528806\t1\t132012001\t0504095548\t\tLA VICTORIA SN ANTONIO TELLO\t81\tMULINLIVI\t\t1\tPUJILI\t0\tCASA AZUL DE 1 PISO, VIA PRINCIP
AL POR LA CURVA CERRAMIENTO MAYA PORTON NEGRO CA\t202002\t01/29/2020\t14\t135\tMARIANA ESPINOZA SANTILLAN\t0984044011\n'

I am wanting to be able to convert it to csv and be able to format it in python: I see many examples but most do it by opening the file but not with the content directly: in this way:

import csv
with open('archivo.csv') as csvfile:
reader = csv.DictReader(csvfile)
#y aqui poder manejarlo como diccionario
for row in reader:
    print(row['Ruta'], row['Despacho'])

but I don't see the way how to pass it to csv format and then handle it as a dictionary.

python

2 Answers

  1. This is a solution

    import csv,re
origin = b'Ruta\tDespacho\tFecha Reparto\tRegional\tZona\tSector\tNombre\tTipoCaja\tFactura\tNumero Caja\tCodigo Cliente\tIdentificacion\tCod Premio/Producto\tDireccion\tCodigo Distrito\tDistrito\tDescrip Premios/Productos\tCantidad\tCiudad\tTelefono\tReferencia de la Direccion\tCampana\tFecha Despacho\tCons Caja\tCodigo Distribuidor\tDistribuidor\tCelular1\n  18782\t51602\t\t001\t132\t012\tNELLY MARIBEL TOAPANTA TOAQUIZA\tPEDIDO\t1528806\t1\t132012001\t0504095548\t\tLA VICTORIA SN ANTONIO TELLO\t81\tMULINLIVI\t\t1\tPUJILI\t0\tCASA AZUL DE 1 PISO, VIA PRINCIPAL POR LA CURVA CERRAMIENTO MAYA PORTON NEGRO CA\t202002\t01/29/2020\t14\t135\tMARIANA ESPINOZA SANTILLAN\t0984044011\n'


data = origin.decode('utf-8').splitlines()



with open("tmp.csv", "w") as csv_file:
    # Create the writer object with tab delimiter
    writer = csv.writer(csv_file, delimiter = '\t')
    for line in data:
        writer.writerow(re.split('\s+',line))

    OUTPUT

    Ruta    Despacho    Fecha   Reparto Regional    Zona    Sector  Nombre  TipoCaja    Factura Numero  Caja    Codigo  Cliente Identificacion  Cod Premio/Producto Direccion   Codigo  Distrito    Distrito    Descrip Premios/Productos   Cantidad    Ciudad  Telefono    Referencia  de  la  Direccion   Campana Fecha   Despacho    Cons    Caja    Codigo  Distribuidor    Distribuidor    Celular1
    18782   51602   001 132 012 NELLY   MARIBEL TOAPANTA    TOAQUIZA    PEDIDO  1528806 1   132012001   0504095548  LA  VICTORIA    SN  ANTONIO TELLO   81  MULINLIVI   1   PUJILI  0   CASA    AZUL    DE  1   PISO,   VIA PRINCIPAL   POR LA  CURVA   CERRAMIENTO MAYA    PORTON  NEGRO   CA  202002  01/29/2020  14  135 MARIANA ESPINOZA    SANTILLAN   0984044011
    • 1
  2. Best Answer

    Well, in case someone needs to do something similar, I solved it in the following way:

    I first converted the format from bytes to str in order to work:

    file = file.content.decode('utf-8')
upload_raw_data = [] # En esta lista guardare la data deseada

    Then I split the \n to separate the rows and a lambda function \t to separate the columns:

    data_list = list(map(lambda row: row.split("\t"), file.split("\n")))

    and we obtain in this case 3 lists of this form:

    [[' Ruta', 'Despacho', 'Fecha Reparto', 'Regional', 'Zona', 'Sector', 'Nombre', 'Tipo Caja', 'Factura', 'Numero Caja', 'Codigo Cliente', 'Identificacion', 'Cod Premio/Producto', 'Direcci
on', 'Codigo Distrito', 'Distrito', 'Descrip Premios/Productos', 'Cantidad', 'Ciudad', 'Telefono', 'Referencia de la Direccion', 'Campana', 'Fecha Despacho', 'Cons Caja', 'Codigo Distrib
uidor', 'Distribuidor', 'Celular1'], ['  18782', '51602', '', '001', '132', '012', 'NELLY MARIBEL TOAPANTA TOAQUIZA', 'PEDIDO', '1528806', '1', '132012001', '0504095548', '', 'LA VICTORI
A SN ANTONIO TELLO', '81', 'MULINLIVI', '', '1', 'PUJILI', '0', 'CASA AZUL DE 1 PISO, VIA PRINCIPAL POR LA CURVA CERRAMIENTO MAYA PORTON NEGRO CA', '202002', '01/29/2020', '14', '135', '
MARIANA ESPINOZA SANTILLAN', '0984044011'], ['']]

    Where the first list, by law, are the headers and I store them in a separate list to later match them with their value:

    headers = [header.strip() for header in data_list[0]]  # Uso el strip para quitar espacios en blanco ejm: '  valor' por 'valor'

['Ruta', 'Despacho', 'Fecha Reparto', 'Regional', 'Zona', 'Sector', 'Nombre', 'Tipo Caja', 'Factura', 'Numero Caja', 'Codigo Cliente', 'Identificacion', 'Cod Premio/Producto', 'Direccion
', 'Codigo Distrito', 'Distrito', 'Descrip Premios/Productos', 'Cantidad', 'Ciudad', 'Telefono', 'Referencia de la Direccion', 'Campana', 'Fecha Despacho', 'Cons Caja', 'Codigo Distribui
dor', 'Distribuidor', 'Celular1']

    And finally I go through the list (data_list) with enumerate that I use to have the index, since if I want to have the index I would have to create a counter and I didn't want the XD code to look ugly:

    for idx, data in enumerate(data_list):
# Valido que no recorra la cabecera y que tenga la misma cantidad de elementos en la lista que los header si no no haria bien el match.
    if idx > 0 and len(data) === len(headers):
       #Como practicamente tenemos el mismo numero de elementos le asignamos su cabecera por el indice de cada elemento
        data_dict = {headers[idx_el]: el.strip() for idx_el, el in enumerate(data)}
       #Guardamos todo esto en una nueva lista con la data que se quiere :D!
       upload_raw_data.append(data_dict)

    Resulting:

    [{'Ruta': '18782', 'Despacho': '51602', 'Fecha Reparto': '', 'Regional': '001', 'Zona': '132', 'Sector': '012', 'Nombre': 'NELLY MARIBEL TOAPANTA TOAQUIZA', 'Tipo Caja': 'PEDIDO', 'Factu
ra': '1528806', 'Numero Caja': '1', 'Codigo Cliente': '132012001', 'Identificacion': '0504095548', 'Cod Premio/Producto': '', 'Direccion': 'LA VICTORIA SN ANTONIO TELLO', 'Codigo Distrit
o': '81', 'Distrito': 'MULINLIVI', 'Descrip Premios/Productos': '', 'Cantidad': '1', 'Ciudad': 'PUJILI', 'Telefono': '0', 'Referencia de la Direccion': 'CASA AZUL DE 1 PISO, VIA PRINCIPA
L POR LA CURVA CERRAMIENTO MAYA PORTON NEGRO CA', 'Campana': '202002', 'Fecha Despacho': '01/29/2020', 'Cons Caja': '14', 'Codigo Distribuidor': '135', 'Distribuidor': 'MARIANA ESPINOZA 
SANTILLAN', 'Celular1': '0984044011'}]

    I hope it helps someone :D!

    • 0