Una transformaci贸n (Pentaho Data Integration) para todo…

Por esos d铆as estoy cumpliendo 10 a帽os de experiencia desarrollando soluciones de integraci贸n, automatizaci贸n e inteligencia de negocios empleando Pentaho Data Integration (PDI) .

Es incre铆ble, cuando tengo un problema o un cliente se me acerca indicando una necesidad particular para su negocio, no es Java, C#, o Python, en lo que pienso… Mi mente modela la soluci贸n a la velocidad de la luz empleando cajitas y flechas.

Mis primeras transformaciones en PDI le铆an archivos de excel alojados en carpetas compartidas, ficheros txt arrojados por m谩quinas de medici贸n de producci贸n, y bases de datos heterog茅neas, consolidando toda la informaci贸n en una base de datos relacional sobre la cual ya era responsabilidad de otro crear dashboards de control con el cual podr铆an monitorear a tiempo prudencial una centena de variables relacionadas con la producci贸n de hidrocarburos por parte de una industria petroqu铆mica de capital Japon茅s y Venezolano sin tener que revisar decenas de reportes de lenta generaci贸n.

Luego de eso, he construido transformaciones:

– que integran ERPs con sistemas Legacy para empresas con transacciones que rozan los millones mensualmente.

– que consolidan en un data warehouse operaciones de negocios en cinco pa铆ses distintos.

– que monitorean servicios y env铆an alertas por correo previo al colapso.

– que hacen en segundos el trabajo manual de d铆as, o en minutos automatizan tareas que empleando un lenguaje de programaci贸n durar铆a d铆as, sino semanas.

Algunos snapshots de estos d铆as hechos en Pentaho Data Integration

Una transformaci贸n que dado un archivo de Excel, realiza un cambio masivo de precio sobre los art铆culos en un ERP. Para brindar seguridad al proceso, valida que el cambio no exceda X porcentaje de diferencia contra precio anterior, porque sabemos que el Excel es propenso a error de dedos. Para brindar auditoria, deja un registro en la base de datos de cuando ocurri贸 y quien lo hizo. Nada de esto lo soportaba el ERP y ahora los 5 compradores del negocio hacen en 5 minutos el trabajo de 4 horas.

Una transformaci贸n que reduce el trabajo de 1 semana a 2 horas al automatizar la revisi贸n y aplicaci贸n de reglas de negocio compuestas para el c谩lculo de comisiones de venta basado en cobros, diversidad de clientes y diversidad de mercanc铆a vendida.

Evoluci贸n continua

Cada a帽o sale al menos una nueva versi贸n de PDI, cada versi贸n es mas flexible, poderosa y r谩pida que la anterior. La compatibilidad entre versiones es algo que cuidan con mucho detalle.

Si quieres aprender PDI, hay muchos libros accesibles en Amazon, y la wiki tambi茅n se mantiene actualizada. No obstante, el mejor maestro es la experiencia (cont谩ctame), pr谩ctica y el descubrimiento.

Deja un comentario

Tu direcci贸n de correo electr贸nico no ser谩 publicada.