Habilitador tecnologico para Auditorias de espacio en disco

Cuando hacemos procesos ETL con DataStage, se genera una gran cantidad de archivos temporales, permanentes, de trabajo, etc, etc. El volumen de datos de nuestras fuentes de datos (Source) se ve duplicado, triplicado y muchas veces cuadruplicado. Lo que hace que la administracion del espacio en disco sea vital para la buena salud de nuestros proyectos y de su correcta ejecucion diaria.
Para diseñar y desarrollar este habilitador tambien podemos utilizar DataStage. Tenemos todas las herramientas para hacerlo: Comandos Unix, rutinas DataStage de ejecucion de estos comandos, stages para envio de archivos de datos por email, etc.
Este Auditor diario toma informacion de los tamaños actuales de cada uno de los file systems, archivos planos y archivos hash y los guarda en otro archivo .txt. Luego, al siguiente dia vuelve a tomar esta misma informacion y la guarda en otro archivo plano.
Una vez generados estos archivos planos, efectua una comparacion de los tamaños de los file systems, archivos planos y hash y genera un informe, indicando:
- Variacion en volumen y porcentaje de los file systems.
- Variacion en volumen y porcentaje de los archivos planos y hash.
- Archivos hash que estan llegando a un nivel critico y pudieran corromperse.
- Logs de jobs con grandes volumenes de warnings y que ponen en riesgo la estabilidad del proyecto DataStage en el cual estan alojados.

Estas alertas se envian segun parametrizacion del proceso Auditor. los niveles criticos de crecimiento y porcentajes se le envian por parametros y solo se envian avisos de los componentes que se encuentren por encima de estos niveles.

Con este habilitador los monitoreos ya no seran manuales, porque lo podemos agendar a traves del planificador y dejar que el mismo envie los mensajes de alerta.

Otro espacio de tiempo disponible para el admistrador ETL!!!!!.