Technology

Confluent lance un canevas « pointer-cliquer » pour créer des pipelines de données en continu

Pour renforcer encore notre engagement à fournir une couverture de pointe de la technologie des données, VentureBeat est ravi d’accueillir Andrew Brust et Tony Baer en tant que contributeurs réguliers. Surveillez leurs articles dans le pipeline de données.

Basé en Californie Confluent, qui propose une plateforme de streaming de données basée sur Apache Kafka, a annoncé aujourd’hui Stream Designer, une interface visuelle pour aider les développeurs à créer, tester et déployer des pipelines de données en temps réel en quelques minutes. La société a présenté l’outil lors de sa conférence Current 2022 en cours.

Au cours des dernières années, les données en temps réel sont devenues essentielles à la croissance et au succès des entreprises. Les données par lots sont encore largement utilisées, mais elles ne répondent pas à de nombreux défis et cas d’utilisation que les entreprises rencontrent dans leurs opérations de routine. En conséquence, les technologies de streaming de données qui étaient autrefois à la périphérie connaissent une augmentation de l’adoption, y compris Apache Kafka.

Plus de 80 % des entreprises du Fortune 100 utilisent Kafka pour gérer de gros volumes de données en temps réel. Cependant, lorsqu’il s’agit de créer des pipelines de données en streaming sur Kafka open source, les équipes doivent faire appel à des talents d’ingénierie hautement spécialisés et faire face à de longs délais de développement répartis sur plusieurs outils. Cela met le streaming de données omniprésent hors de portée de nombreuses organisations.

Entrez dans le concepteur de flux

Le nouveau Stream Designer de Confluent, qui est désormais généralement disponible, offre un canevas visuel pointer-cliquer pour décrire les flux de données et la logique métier dans l’interface utilisateur de Confluent Cloud. De cette façon, au lieu de gérer le casse-tête de la gestion de composants individuels sur Kafka (chacun nécessitant son propre code passe-partout), les développeurs peuvent créer des pipelines avec l’écosystème complet de Kafka accessible dans une seule interface visuelle. Ils peuvent également itérer et tester avant le déploiement en production de manière modulaire.

événements

MetaBeat 2022

MetaBeat réunira des leaders d’opinion pour donner des conseils sur la façon dont la technologie métaverse transformera la façon dont toutes les industries communiquent et font des affaires le 4 octobre à San Francisco, en Californie.

Inscrivez-vous ici

« Il s’agit de la première interface visuelle du secteur pour la création native de pipelines de streaming sur Kafka. Bien qu’il existe d’autres processeurs de flux basés sur une interface graphique, ils sont alimentés par d’autres technologies de messagerie, souvent fermées et propriétaires. Stream Designer est basé sur Kafka, qui est largement connu comme la norme pour le streaming de données. C’est la plate-forme de choix des développeurs en raison de son architecture hautement évolutive et résiliente, ainsi que de sa forte popularité en open source », a déclaré Jon Fancey, chef de produit principal chez Confluent, à VentureBeat.

Concepteur de flux Confluent

Fancey a déclaré avoir organisé un programme bêta fermé pour Stream Designer avec certains clients et avoir été témoin de commentaires « très positifs ».

“Cela a réduit le temps de rampe pour les développeurs qui découvrent Kafka et a augmenté la productivité des développeurs Kafka plus expérimentés. Avec un moyen radicalement plus simple de créer, tester et déployer des pipelines de données en continu, ils ont pu transformer les pipelines ETL traditionnels pour prendre en charge un paradigme en temps réel », a-t-il noté.

Vue de bout en bout

Une fois qu’un pipeline construit à l’aide de Stream Designer est déployé, les équipes peuvent également utiliser les outils pour obtenir une vue de bout en bout de leur pipeline de données de streaming, ainsi que pour le maintenir et le mettre à jour tout au long de son cycle de vie. De plus, ces pipelines peuvent également être exportés sous forme de code source SQL pour être partagés avec d’autres équipes, déployés dans un autre environnement ou intégrés aux flux de travail CI/CD existants, ce qui permet une collaboration et un transfert de connaissances transparents.

“Le streaming de données devient rapidement le système nerveux central de notre infrastructure car il alimente les expériences client en temps réel dans nos 12 pays d’opérations”, a déclaré Enes Hoxha, architecte d’entreprise chez Raiffeisen Bank International.

« L’interface visuelle low-code de Stream Designer permettra à davantage de développeurs, dans l’ensemble de notre organisation, d’exploiter les données en mouvement. Avec une vue unifiée de bout en bout de nos pipelines de données en continu, cela améliorera la productivité de nos développeurs en facilitant grandement les applications en temps réel, le développement de pipelines et le dépannage », a-t-il ajouté.

Quoi de plus à Current 2022 ?

Confluent a également profité de la conférence actuelle pour annoncer Gouvernance de flux avancéeun nouveau niveau de sa suite de gouvernance entièrement gérée pour Apache Kafka et les données en mouvement.

L’offre, comme l’explique la société, fournira aux entreprises une lignée ponctuelle pour résoudre les problèmes dans des pipelines complexes, des métadonnées commerciales pour découvrir et comprendre les sujets plus rapidement, et Schema Registry pour appliquer des contrôles de qualité à l’échelle mondiale.

Gouvernance de flux avancée
Gouvernance de flux avancée

De plus, la société a annoncé un service privé de connexion pour Google Cloud, permettant aux entreprises de configurer une connexion simple et sécurisée entre un cloud privé virtuel (VPC) Google Cloud et Confluent Cloud. Cela réduira la complexité et le fardeau de la connexion manuelle des réseaux virtuels dans le cloud public tout en gardant privés tous les détails sur le réseau d’un client.

Notamment, le développement signifie que Confluent Cloud prend désormais en charge les terminaux privés des trois principaux fournisseurs de services cloud.

La mission de VentureBeat est d’être une place publique numérique permettant aux décideurs techniques d’acquérir des connaissances sur la technologie d’entreprise transformatrice et d’effectuer des transactions. Découvrez nos briefings.

Leave a Reply

Your email address will not be published.