IFindIT Analytics

Qué es IFindIT®?

Es una colección cada vez mayor de servicios dispuestos en una nube privada que utilizando tecnologías de Big Data permite leer, limpiar transformar, enriquecer, cruzar, operar, encontrar, visualizar, publicar, entregar datos de diferentes tipos para generar valor.
Comprende un conjunto de herramientas integradas, plantillas prediseñadas y servicios gestionados que hacen más fácil crear y administrar información.
Comprende además productos core tales como analítica de datos avanzada y búsqueda inteligente.
Utiliza tecnologías como Machine learning, Procesamiento de lenguaje natural, Spark, modelos fundacionales (Inteligencia artificial generativa), bases de datos columnares entre otras.
Dado su nivel de madurez, permite generar soluciones ágiles, eficientes, costo efectivas para mejorar el acceso a la información, la generación de conocimiento, la toma de decisiones informadas, entre otros retos

IFindIT® es una plataforma basada en una arquitectura nativa de nube privada, optimizada para aplicaciones en tiempo real que combina una capacidad de almacenamiento elástica ágil, con capacidades de búsqueda a profundidad, relevancia sin igual y capacidades de IA. Esta arquitectura permite a Creangel ofrecer sus soluciones bajo la modalidad SAAS, sin requerir servidores del lado del cliente, esto que elimina todos los gastos operativos relacionados con infraestructura tecnológica para que pueda comenzar a trabajar rápidamente y escalar sus necesidades con una plataforma basada en Big Data

IFindIT Analytics

En términos generales IFINDIT, como plataforma de analítica basada en búsqueda avanzada, además de estar orientada a Big data (permite operar millones de registros por hora) permite llevar a cabo, entre otros, los siguientes procesos:

Carga: Incluye los conectores desplegados y listos para utilizar la entidad debe suministrar los datos a procesar a través de una vista generalizada (tabla de hechos) a la que IFINDIT se conectará vía VPN site to site mediante alguno de estos mecanismos:

Conexión a diversos tipos de sistemas de bases de datos tales como: SQL, MySQL, Oracle, DB2, Postgres, Informix, Casandra, MariaDB, MongoDB, y otras bases de datos a través de JDBC.
Datos estructurados en archivos txt, Raw, xls, csv, parquet files.

Arquitectura de procesamiento: IFindIT está basada en arquitectura Kappa porque es necesario contar con una arquitectura de procesamiento de datos diseñada para proporcionar un sistema escalable, tolerante a fallas y flexible para procesar grandes cantidades de datos tanto en tiempo real como en batch.
Kappa utiliza un único sistema de procesamiento de datos para manejar cargas de trabajo de procesamiento tanto en flujos como en batch; esto permite procesamiento de datos más ágil y simple y a la vez, proporcionar un acceso rápido y confiable a los resultados de las consultas.

Almacenamiento en formato columnar: Esto significa que solo carga las columnas necesarias para una consulta en específico, esto permite mejorar la velocidad de las consultas que recuperan solo unas pocas columnas y agregaciones (Ej: cuántas personas con qué características, en qué periodo de tiempo, etc.).

Sistema distribuido escalable: La plataforma permite crecer de manera elástica, dada la alta demanda de información solicitada, es necesario contemplar operaciones que pueden incluir la carga de datos a una velocidad de millones de registros por minuto y a la vez atender consultas que generan resultados en pocos segundos.

Procesamiento masivamente paralelo: La plataforma recibe requerimientos que pueden incluir cientos de millones de datos en una sola consulta, por esto es necesario que la plataforma este en capacidad de procesar cada consulta en paralelo en todo el clúster.

Reportes: Permite generar reportes, datos agregados, columnas, conteos, consultas tipo SQL

Creación de consultas o reportes tipo Wizard: Permite a personas que no tengan un elevado nivel técnico, crear reportes de tal forma que sea posible dividir la carga de trabajo para atender requerimientos rápidamente.

Salida de datos:
La plataforma entregará datos en algunas de las siguientes presentaciones:

Datos sin agregar: xls, csv, txt, Json, XML
Datos en masa: permite extraer datos en paquetes de millones de registros de decenas de columnas cada uno
Visualización: La plataforma está en capacidad de desplegar datos con características visuales tipo tableros de control, tanto para datos agregados como no agregados y con capacidad de ser mostrados tanto en equipos de escritorio como en dispositivos móviles

Seguridad: La plataforma provee mecanismos de autenticación y control de acceso basados en roles. Se integra con el Directorio Activo, pero también permite la creación de usuarios locales a la plataforma.

Robustez: IFindIT está en capacidad de ser utilizada por miles de usuarios de manera simultánea, respondiendo a requerimientos SIN impactar los sistemas de información donde están contenidos los datos, estos impactos son evidentes en particular en Bases de datos, donde el consumo de memoria es muy alto en caso de concurrencia.

PROCESOS BASE

IFindIT® maneja datos a través de tres procesos básicos: extracción de datos, transformación de datos, carga en el lago de datos y visualización de datos. Estos procesos aseguran la obtención oportuna y suficiente de información para la toma de decisiones en diversas áreas funcionales de la organización.

I PROCESO DE EXTRACCIÓN DE DATOS

II PROCESO DE TRANSFORMACIÓN DE DATOS

III PROCESO DE CARGA EN EL LAGO DE DATOS

IV MÓDULO DE SEGURIDAD

I PROCESO DE EXTRACCIÓN DE DATOS

IFindIT® Analytics, se especializa en analítica de datos a nivel de Big Data, permitiendo procesar grandes volúmenes de datos con respuestas rápidas. Ofrece una solución integral que incluye la infraestructura necesaria para realizar cálculos complejos en términos de millones de registros. Con más de 160 conectores, permite extraer datos de diversas fuentes, como bases de datos comerciales (JDBC), archivos planos (csv, tsv), archivos json, xml y de hojas de cálculo Excel, es una fuente valiosa para la analítica de datos en las diferentes áreas operativas de las organizaciones. IFindIT® Analytics elimina la preocupación del cliente por la infraestructura y la administración de recursos, ofreciendo respuestas inmediatas a los requerimientos analíticos.

II PROCESO DE TRANSFORMACIÓN DE DATOS

El proceso de transformación de datos es crucial para convertir la información en elementos de juicio utilizables para tomar decisiones acertadas. En IFindIT Analytics, la transformación se realiza con técnicas de Big Data, permitiendo limpiar grandes volúmenes de datos en cuestión de horas, no días ni semanas.
IFindIT Analytics se centra en la limpieza de datos en esta etapa, asegurando que cumplan con las características requeridas y la calidad necesaria para el uso específico previsto. Con las características de Big Data, la plataforma permite consumir grandes cantidades de datos a velocidades extraordinarias, facilitando cálculos inmediatos para las unidades de negocio.
Los analistas de datos tienen acceso a gigabytes de información, lo que les permite obtener indicadores, aplicar filtros y construir tableros de control de manera interactiva. Los usuarios finales pueden construir sus propios tableros de control de manera intuitiva, sin necesidad de conocimientos en programación, utilizando funciones como “arrastrar” y “soltar”. Esto agiliza el proceso sin depender de la intervención del área de TI para resolver sus requerimientos.
Los datos se trabajan según las necesidades de consumo, ya sea en tiempo real (streaming) para cálculos que requieren actualización constante o en lotes (batch) para resultados que pueden consumirse en momentos específicos. En una hora, se puede realizar la limpieza de 180 millones de registros de 90 campos cada uno, demostrando la eficiencia y velocidad del proceso.

III PROCESO DE CARGA EN EL LAGO DE DATOS

Después de la transformación de datos, estos son dirigidos a un lago con capacidad para gestionar volúmenes tipo Big Data, permitiendo diferentes tratamientos según las necesidades de la organización o áreas funcionales. Los datos estructurados son utilizados para cálculos mediante una librería con aproximadamente 50 tableros interactivos.
IFindIT Analytics facilita la realización de ejercicios de analítica al disponer tanto de datos estructurados como de datos extraídos de fuentes no estructuradas en una base de datos tipo columnar llamada IFindIT Columnar. Diseñada para optimizar análisis de grandes volúmenes de información, ofrece respuestas en segundos. La herramienta responde de inmediato a las solicitudes de búsqueda de archivos, proporcionando acceso o permitiendo la realización de cálculos de analítica a la velocidad de Big Data.
La analítica se lleva a cabo mediante Tableros de Control Interactivos, que permiten construir visualizaciones eficientes sin necesidad de programación, a través de métodos intuitivos como “drag and drop”. Los usuarios que prefieran herramientas de visualización distintas pueden conectarse al lago de datos mediante un API para aprovechar los beneficios de IFindIT Columnar.

IV MÓDULO DE SEGURIDAD

El módulo de seguridad en la solución IFindIT® es esencial para garantizar un acceso controlado a los datos. Integrado con el Directorio Activo, establece niveles de seguridad basados en roles de usuario y políticas de la empresa. Los privilegios de acceso heredan las políticas del sistema de información web integrado, asegurando la seguridad desde la fuente.
La arquitectura de seguridad de la herramienta está diseñada para mitigar ataques comunes, como inyección de código y denegaciones de servicio. La comunicación entre el servidor y los clientes se puede configurar para usar exclusivamente protocolos seguros (SSL), asegurando la protección de datos durante la transmisión, tanto en búsquedas de texto como en la presentación de reportes interactivos. Este enfoque seguro permite despliegues internos y externos, brindando protección total a los datos.

Condiciones técnicas de uso del software

Dado que IFindIT® es una plataforma basada en una arquitectura nativa de nube privada, usted NO requerirá servidores del lado del cliente para beneficiarse del poder de computo ofrecido, por ello para comenzar a la plataforma se le entrega el acceso a IFindIT® por medio de:
(i) Un usuario y contraseña al portal de administración o
(ii) Una conexión por medio de una VPN site to site a las fuentes a integrar
(iii) Una conexión por medio de una VPN

IFindIT Requiere tener acceso con privilegios de solo lectura a las fuentes de información.

Números de parte

Código único de parte de Fabricante (SKU)	Nombre del producto	Descripción del producto	Tipo de distribución
IF-ANALYTICS-05-12	LICENCIA IFINDIT ANALYTICS HASTA: 5 FUENTES O 12 GB DATOS O 5 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 5 fuentes o 12 GB de datos o 5 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-10-12	LICENCIA IFINDIT ANALYTICS HASTA: 10 FUENTES O 12 GB DATOS O 10 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 10 fuentes o 12 GB de datos o 10 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-15-12	LICENCIA IFINDIT ANALYTICS HASTA: 15 FUENTES O 12 GB DATOS O 15 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 15 fuentes o 12 GB de datos o 15 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-20-12	LICENCIA IFINDIT ANALYTICS HASTA: 20 FUENTES O 12 GB DATOS O 20 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 20 fuentes o 12 GB de datos o 20 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-25-12	LICENCIA IFINDIT ANALYTICS HASTA: 25 FUENTES O 12 GB DATOS O 25 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 25 fuentes o 12 GB de datos o 25 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-05-24	LICENCIA IFINDIT ANALYTICS HASTA: 5 FUENTES O 24 GB DATOS O 5 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 5 fuentes o 24 GB de datos o 5 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-10-24	LICENCIA IFINDIT ANALYTICS HASTA: 10 FUENTES O 24 GB DATOS O 10 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 10 fuentes o 24 GB de datos o 10 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-15-24	LICENCIA IFINDIT ANALYTICS HASTA: 10 FUENTES O 24 GB DATOS O 10 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 10 fuentes o 24 GB de datos o 10 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-20-24	LICENCIA IFINDIT ANALYTICS HASTA: 10 FUENTES O 24 GB DATOS O 10 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 10 fuentes o 24 GB de datos o 10 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-25-24	LICENCIA IFINDIT ANALYTICS HASTA: 15 FUENTES O 24 GB DATOS O 15 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 15 fuentes o 24 GB de datos o 15 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTICS-15-30	LICENCIA IFINDIT ANALYTICS HASTA: 15 FUENTES O 30 GB DATOS O 15 TABLEROS	Licencia IFindIT Analytics, Incluye analítica de datos para 15 fuentes o 30 GB de datos o 15 Tableros, lo que se cumpla primero	Suscripción – SAAS
IF-ANALYTIC-SERVICES	LICENCIA IFINDIT SERVICIOS DE ANALITICA	Licencia Servicios de información para analítica de datos estructurados	Suscripción – SAAS

CONSÚLTENOS PARA CREAR UNA SOLUCIÓN DE BÚSQUEDA A SU MEDIDA