Material Detail

The right integration method to minimize delivery lag: Kafka and ClickHouse for real-time analytics

The right integration method to minimize delivery lag: Kafka and ClickHouse for real-time analytics

Choosing the right integration method to minimize delivery lag. ClickHouse and Kafka, scalable and open-source, form a powerful duo for building cost-effective, real-time analytics systems, suitable for log analysis, clickstream analytics, financial transactions, and more. The integration method of this combination is an important consideration that affects ingestion performance, resource distribution, and costs. In this webinar, we explore the...

Show More

Quality

  • User Rating
  • Comments  (1) Comments
  • Learning Exercises
  • Bookmark Collections
  • Course ePortfolios
  • Accessibility Info

More about this material

Comments

Log in to participate in the discussions or sign up if you are not already a MERLOT member.
Xabier Zarate Jimeno
1 year ago
EVALUACIÓN DE LA CALIDAD DEL RECURSO COMO MATERIAL DE APRENDIZAJE EN LOS ESTUDIOS DE GRADO DE INGENIERÍA INFORMÁTICA DE LA UPM. Description: ClickHouse y Kafka, escalables y de código abierto, forman un poderoso dúo para construir sistemas de análisis en tiempo real rentables, adecuados para análisis de registros, análisis de clickstream, transacciones financieras y más. El método de integración de esta combinación es una consideración importante que afecta el rendimiento de la ingesta, la distribución de recursos y los costos. En este tutorial, se explora la integración de Kafka con ClickHouse, cubriendo varios métodos y mejores prácticas para optimizar el procesamiento y almacenamiento de datos. Overview: El tema del recurso es la integración de la plataforma de streaming de datos Kafka junto a la plataforma de procesamiento analítico en línea (OLAP). Este tema está entre otros asociado con el perfil business analyst dado que el uso conjunto de estas dos herramientas proporcionan una infraestructura apropiada para el análisis de la ingente cantidad de datos que genera una empresa. En lo que respecta a las subdisciplinas de MERLOT, este recurso se enmarca dentro de Science and Technology, más concretamente dentro de Information Technology y posteriormente en IT Infrastructure. El recurso incluye material en forma de video. Type of Material: Tutorial Technical Requirements: Navegador que soporte YouTube. Equipo que soporte el uso de las plataformas ClickHouse y Kafka. Learning Goal(s): - Data Science and Analytics - Information Systems Governance - Information and Knowledge Management Recommended Use(s): En la asignatura de Arquitectura del Data Warehouse se proporciona conocimiento avanzado del modelo OLTP y OLAP de las bases de datos, y este recurso permitiría aprovechar al máximo esos conocimientos para construir una infraestructura que permita el análisis de un gran volumen de datos. Target Student Population: Estudiantes universitarios. Prerequisite Knowledge: Los estudiantes debieran de tener un conocimiento avanzado de las bases de datos tanto en el modelo OLAP como en el modelo OLTP. Evaluations and Observations o Quality of Content: La calidad es muy elevada debido a la importancia del tema que se trata y la eficacia con la que lo hace. Lista Fortalezas de la calidad del contenido: - Proporciona explicaciones detalladas del modo de proceder de las plataformas empleadas. - Las plataformas empleadas tienen un gran valor a día de hoy. - Los conceptos enseñados son de gran valor para cualquier empresa, especialmente PYMES. Lista Preocupaciones de la calidad del contenido: - Se requiere una notable familiarización con las plataformas en aras de seguir la explicación aportada. - El idioma del video es el ingles y requiere cierto nivel para la correcta comprensión. o Potential Effectiveness as a Teaching/Learning Tool: Permite la construcción de la infraestructura siguiendo la explicación dada en el video. Lista Fortalezas de la efectividad del recurso como una herramienta de aprendizaje: - Es un tema del que existen pocos materiales didácticos actualizados en la web. - El propio video te permite la construcción de la infraestructura. - Muestra la explicación de expertos en la materia. Lista Preocupaciones de la efectividad del recurso como una herramienta de aprendizaje: - Quizá puede resultar un nivel demasiado elevado para alguien que no tenga bien afianzados los conocimientos previos requeridos. o Ease of Use: El nivel de dificultad es medio-elevado y requiere tener los conocimientos previos bien claros. Lista Fortalezas de la facilidad de uso del recurso: - La explicación sigue un orden secuencial y acompasar la realización de lo que se va mostrando. Lista Preocupaciones de la facilidad de uso del recurso: - Se requiere una notable familiarización con las plataformas en aras de seguir la explicación aportada. - Se ha de personalizar la ejecución de ciertos pasos en función de las características del equipo empleado.