{"id":37608,"date":"2023-01-20T15:14:46","date_gmt":"2023-01-20T15:14:46","guid":{"rendered":"https:\/\/dinocloud.com\/?page_id=37608"},"modified":"2023-01-20T15:47:00","modified_gmt":"2023-01-20T15:47:00","slug":"molinos-rio-de-la-plata","status":"publish","type":"page","link":"https:\/\/dinocloud.com\/es\/molinos-rio-de-la-plata\/","title":{"rendered":"Molinos R\u00edo de la Plata"},"content":{"rendered":"\n
<\/div>
\n
<\/div>\n\n\n\n

De lo manual a lo autom\u00e1tico:
el proceso de extracci\u00f3n de datos de Molinos R\u00edo de la Plata<\/h2>
<\/div><\/div>

<\/p><\/div>\n\n\n\n

<\/div>\n\n\n\n
\n
\n
\"Logo<\/figure>\n<\/div><\/div>\n\n\n\n
\n

DinoCloud, una compa\u00f1\u00eda cloud-first y partner Premier de AWS<\/strong>, cuenta con recursos y expertise t\u00e9cnica de vanguardia para llevar a cabo proyectos que acompa\u00f1an a empresas de diversa \u00edndole en su camino hacia la transformaci\u00f3n digital y la automatizaci\u00f3n de procesos<\/strong> en la nube. Molinos R\u00edo de la Plata es una compa\u00f1\u00eda l\u00edder en la producci\u00f3n de alimentos y bebidas de Argentina y es cliente de DinoCloud desde diciembre de 2021.<\/p>\n\n\n\n

Conoce m\u00e1s de Molinos<\/span><\/a><\/div>\n<\/div>\n<\/div>\n\n\n\n
<\/div>\n\n\n\n

Nuestra relaci\u00f3n laboral naci\u00f3 de un proyecto de facturaci\u00f3n local<\/strong>, que es otra de las ramas de especializaci\u00f3n de DinoCloud. Debido a la buena relaci\u00f3n interpersonal y profesional generada en este proyecto, Molinos R\u00edo de la Plata se comunic\u00f3 con el \u00e1rea comercial de DinoCloud para abordar otra necesidad: la automatizaci\u00f3n de los procesos de extracci\u00f3n de datos<\/strong> del programa Precios Claros. Este programa busca lograr la equidad competitiva mediante la exhibici\u00f3n del valor comercial de los productos elaborados por la competencia en el mercado de los alimentos.<\/p>\n\n\n\n

Antes de empezar con este proyecto, Molinos R\u00edo de la Plata utilizaba un script de PowerShell <\/strong>para extraer manualmente los datos de Precios Claros y cargarlos en una base de datos SQl Server<\/strong>. Este proceso manual supon\u00eda una gran desventaja operativa ya que no solamente obstaculizaba lograr la alta disponibilidad de los datos<\/strong> para la toma estrat\u00e9gica de decisiones, sino que tambi\u00e9n aumentaba la posibilidad de errores en la lectura y extracci\u00f3n de datos.
A ra\u00edz de esta necesidad, DinoCloud le llev\u00f3 a Molinos R\u00edo de la Plata un proyecto cuyo objetivo principal era la realizaci\u00f3n de un Data Lake autom\u00e1tico<\/strong> para la extracci\u00f3n y transformaci\u00f3n de los datos del programa Precios Claros. Este proyecto fue pensado para durar un mes con tres \u00e9picas.<\/p>\n\n\n\n

<\/div>\n<\/div><\/section>\n\n\n\n
<\/div>
\n
<\/div>\n\n\n\n

Discovery, infraestructura, y migraci\u00f3n<\/h2>
<\/div><\/div>

<\/p><\/div>\n\n\n\n

El proyecto de automatizaci\u00f3n de los procesos de extracci\u00f3n de datos del programa Precios Claros se llev\u00f3 a cabo en tres \u00e9picas diferentes:<\/p>\n\n\n\n

Discovery<\/h4>\n\n\n\n

Esta etapa consisti\u00f3 en entender el procesos que estaba realizando el cliente y se hicieron dos reuniones junto al cliente para captar correctamente las necesidades a abordar.<\/p>\n\n\n\n

Armado de la infraestructura para el procesamiento<\/h4>\n\n\n\n

La principal tarea de esta \u00e9pica fue armar el workflow en AWS Glue<\/strong> para automatizar el procesamiento. Para esto, se configuraron los roles y gestionaron las claves con el servicio de AWS IAM, se crearon y configuraron buckets de AWS S3<\/strong> y se crearon jobs en AWS Glue. Adem\u00e1s se desarrollaron los pipelines ETL sobre AWS Glue<\/strong> y se arm\u00f3 la arquitectura de datos en Amazon Redshift<\/strong> para dar soporte a las consultas necesarias para los reportes en PowerBI<\/strong>. Esta etapa culmin\u00f3 con el workflow terminado.<\/p>\n\n\n\n

Migraci\u00f3n del procesos de scraping a AWS<\/h4>\n\n\n\n

Una vez creada la arquitectura era necesario realizar la migraci\u00f3n del proceso de scraping<\/strong>, que se realiz\u00f3 con \u00e9xito.<\/p>\n\n\n\n

<\/div>\n<\/div><\/section>\n\n\n\n
<\/div>
\n
<\/div>\n\n\n\n

Resultados integrales del proyecto<\/h2>
<\/div><\/div>

<\/p><\/div>\n\n\n\n

Los resultados del proyecto fueron la automatizaci\u00f3n del proceso de extracci\u00f3n<\/strong>, la transformaci\u00f3n y el cargado de datos, lo que logr\u00f3 una sustancial reducci\u00f3n de tiempos operativos y la posibilidad de errores por trabajo manual. <\/p>\n\n\n\n

Adem\u00e1s, se logr\u00f3 capacitar al personal en herramientas de AWS <\/strong>que ellos desconoc\u00edan y se los sumergi\u00f3 en el mundo cloud.  Durante 3 meses y una vez por semana, se realizaron sesiones de demostraci\u00f3n de la metodolog\u00eda de trabajo y la transferencia de conocimiento. Por \u00faltimo, se realiz\u00f3 la documentaci\u00f3n de todo el workflow para que el equipo de ingenier\u00eda de Molinos R\u00edo de la Plata acceda cuando lo necesite. <\/p>\n\n\n\n

La duraci\u00f3n inicial del proyecto era de 1 mes, tiempo en el que se realizaron las tareas descriptas, a\u00fan as\u00ed, el contrato se extendi\u00f3 en dos ocasiones. La primera renovaci\u00f3n se llev\u00f3 a cabo debido a la necesidad de seguir brindando soporte para la transferencia de conocimiento<\/strong> al personal de Molinos R\u00edo de la Plata. La segunda renovaci\u00f3n se enmarc\u00f3 en un cuadro de investigaci\u00f3n e implementaciones para mejoras de los procesos. <\/p>\n\n\n\n

En cuanto a las mejoras de los procesos, los mismos fueron los siguientes:<\/p>\n\n\n\n

  • la implementaci\u00f3n de Lifecycle de Glacie<\/strong>r; <\/li>
  • best practices para que el S3 sea p\u00fablico; <\/li>
  • crear un job intermedio que transforme formatos inusuales a utf8;<\/li>
  • crear un script de migraci\u00f3n de CSV a Redshift<\/strong> y crear nueva vista de las tablas de AWS Glue<\/strong> y datos hist\u00f3ricos; y<\/li>
  • llevar a cabo investigaciones extras para mejorar los procesos en Molinos.<\/li><\/ul>\n\n\n\n
    <\/div>\n\n\n\n
    <\/div>
    \n

    Conclusi\u00f3n<\/h3>\n\n\n\n

    El proyecto de DinoCloud con Molinos R\u00edo de la Plata fue un \u00e9xito y se logr\u00f3 la automatizaci\u00f3n del proceso de extracci\u00f3n de datos<\/strong> del programa Precios Claros, lo que permite tomar decisiones estrat\u00e9gicas m\u00e1s r\u00e1pidamente en un mercado muy competitivo. Ahora, Molinos R\u00edo de la Plata est\u00e1 m\u00e1s involucrado en el mundo cloud y en la transformaci\u00f3n digital<\/strong> gracias a la experiencia y expertise t\u00e9cnica de DinoCloud.<\/p>\n<\/div><\/section>\n\n\n\n

    <\/div>\n<\/div><\/section>\n\n\n\n
    \n
    <\/div>
    \n
    <\/div>\n\n\n\n

    Formulario de contacto<\/h2>
    <\/div><\/div>\n\n\n\n
    <\/div>
    \n

    (*) Campos obligatorios<\/p>\n\n\n\n