Extendiendo smartcube para visualizar valores estadísticos dentro de grandes conjuntos de datos multidimensionales, manteniendo la eficiencia de uso de memoria y baja latencia de respuesta a consultas
Loading...
Date
2024
Authors
Journal Title
Journal ISSN
Volume Title
Publisher
Universidad Católica San Pablo
Abstract
La visualización de grandes cantidades de datos multidimensionales consiste en obtener información clave mediante su exploración, análisis y organización. En el estado del arte, podemos encontrar diversas metodologías para llevar a cabo estas tres tareas mediante el uso adecuado de estructuras de datos. En este trabajo, proponemos presentar dichas metodologías, basadas en Data Cube, una de las que marcó un punto de inflexión en el área, contribuyendo con una estructura de datos orientada a la optimización del uso de memoria y eficiencia en la resolución de consultas. En la continua búsqueda por incrementar la optimización en el uso de recursos y el tiempo de respuesta a consultas, Smartcube combina el enfoque de estructuras de datos con Artificial Intelligence (AI) para mantener en todo momento la disposición más conveniente de nodos en la estructura de datos, según las consultas del usuario. Así, buscamos extender Smartcube aprovechando la optimización que aporta, para incluir valores estadísticos preprocesados en la indexación, lo que permitirá visualizar gráficos más complejos. Como resultado, los mapas de calor y los histogramas pueden mejorarse al visualizarlos junto con valores estadísticos como la media, mediana y varianza, enriqueciendo su valor informativo. El aumento del preprocesamiento traerá como consecuencia inevitable un incremento en el uso de memoria. Sin embargo, intentamos que este crecimiento sea moderado, a pesar de aumentar al preprocesamiento con cuatro valores, y mantenemos un bajo tiempo de respuesta en las consultas.