Kafka

Apache Kafka es una plataforma distribuida, escalable y de código abierto que permite crear pipelines de procesamiento de datos y de aplicaciones de datos en streaming en tiempo real. Este sistema, ampliamente reconocido por facilitar la gestión de bases de datos voluminosas en tiempo real, es compatible con una amplia variedad de lenguajes de programación (frameworks): Python, Query, PHP, Java, Ruby, etc.

Los datos entrantes que transitan por este sistema se organizan en «topics» o temas y pueden estructurarse según el tipo de datos recopilados que contengan. La arquitectura de Apache Kafka en cluster se orquesta mediante un registro de tiempo que ordena estos datos y los replica para posteriormente distribuirlos. Las fuentes que publican datos en estos temas se denominan «producers» o «publishers», mientras que las que leen estos datos se conocen como «consumers» o «subscribers». Ambas acceden a la biblioteca Java de la plataforma Kafka Stream. La plataforma permite gestionar los flujos de datos que evolucionan entre estas fuentes, sin sobrecargas, gracias a las colas de espera. De este modo, es capaz de distribuir la información entre diferentes sistemas (servidores, espacios de almacenamiento de datos, bases de datos relacionales, etc.) y, gracias a esta gestión centralizada, facilita el tratamiento de grandes volúmenes de datos generados mediante procesos de big data o machine learning, entre otros.

Esta solución es ideal para dar respuesta a aquellas aplicaciones que requieren un análisis rápido de datos en directo. Su función como intermediario en el tratamiento centralizado de los mensajes de comunicación favorece una mejor gestión de sus datos.

Estas dos soluciones open source ofrecen diferentes ventajas: la principal ventaja de Kafka reside en su capacidad para gestionar grandes volúmenes de datos, por lo que su uso es más pertinente si se inicia en el big data o el machine learning. Por su parte, RabbitMQ es más recomendable para la entrega de mensajes con baja latencia y el enrutamiento complejo. Además, esta solución no es una plataforma de difusión propiamente dicha, sino más bien un programa de difusión.

Managed Databases for Kafka es una DBaaS (Database as a Service) que forma parte de los servicios administrados disponibles en nuestra solución Public Cloud. La principal función de esta solución es ahorrarle tiempo en su trabajo, ya que nosotros nos encargamos de la gestión y el mantenimiento de su base de datos.

Sí, una vez que haya descargado y aceptado la licencia de Kafka, ya podrá hacerlo. Sin embargo, usted deberá encargarse de la gestión y la administración de la base de datos, y no disfrutará de las ventajas incluidas con nuestro servicio llave en mano.

Estos planes ofrecen funcionalidades que responden a los distintos usos y, por lo tanto, su nivel de disponibilidad también es diferente.

No, usted mantendrá un control total sobre sus datos. Al utilizar Managed Databases for Kafka, sus datos se almacenan en un espacio de almacenamiento dedicado exclusivamente a su uso.

Sí, si sus necesidades en materia de RAM aumentan, puede migrar a nodos con mayor capacidad. Sin embargo, tenga en cuenta que no es posible migrar a nodos con una capacidad inferior.

Sí, OVHcloud ofrece una copia de seguridad automatizada con cada solución. Sin embargo, las políticas de conservación por defecto dependerán de la gama elegida.

Sí, nuestro servicio puede consumirse como un recurso o como parte de una infraestructura Public Cloud y puede administrarlo desde el área de cliente, la API OVHcloud o la API OpenStack. Asimismo, ofrecemos servicios administrados para la gestión de bases de datos relacionales (SQL), como MySQL y PostgreSQL, o no relacionales (NoSQL), como Redis o MongoDB.

OVHcloud se encarga de realizar todas las tareas de gestión y administración de la base de datos para que usted no tenga preocuparse por su mantenimiento. Este es el valor añadido que facturamos como servicio.

Sí, puede conectarlo a través de una red pública o privada. Sin embargo, si quiere desplegar el programa Kafka en su servidor Bare Metal, deberá hacerlo usted mismo y, posteriormente, encargarse de la gestión y la administración de su base de datos.