Confluent Luncurkan Tableflow untuk Integrasikan Analisis

Curupekspress.bacakoran.co - Confluent, Inc. pionir data streaming mengumumkan kapabilitas Confluent Cloud baru yang memudahkan pelanggan melakukan streaming, menghubungkan, mengatur dan memproses serta menjaga data tetap aman.

Confluent Tableflow dengan mudah mengubah topik Apache Kafka dan skema terkait menjadi tabel Apache Iceberg dengan satu klik untuk memasok data lakes dan data warehouses dengan lebih baik.

Konektor yang dikelola sepenuhnya oleh Confluent telah ditingkatkan dengan jalur jaringan baru yang aman dan biaya output yang lebih rendah hingga 50 persen.

Stream Governance kini diaktifkan secara default di seluruh wilayah dengan SLA yang lebih baik yang tersedia untuk Schema Registry, sehingga lebih mudah untuk menyesuaikan dan berbagi aliran data dengan aman di mana pun aliran data tersebut digunakan.

Agar perusahaan dapat mengambil keputusan yang mengoptimalkan biaya, meningkatkan pendapatan dan mendorong inovasi, diperlukan penghubung antara data operasional dan analitik, yang biasanya secara tradisional terkotak-kotak dalam organisasi.

Ruang lingkup operasional mencakup aplikasi SaaS, aplikasi khusus dan basis data yang mendukung bisnis seperti Oracle, Salesforce, dan ServiceNow.

Sedangkan ruang lingkup analitik mencakup data warehouses, data lakes, dan analytics engines yang mendukung analitik dan pengambilan keputusan, serta menggunakan aliran data dan tabel historis untuk menjalankan kueri dan fungsi analitik yang berbeda.

"Masalah penting bagi perusahaan modern adalah bahwa operasional dan analitik harus sangat terhubung, tetapi sering kali dibangun di atas koneksi point-to-point di banyak alat," ujar Chief Product Officer Confluent Shaun Clowes.

"Bisnis ditinggalkan dengan kekacauan data yang rumit untuk dinavigasi dan membuat bisnis kekurangan wawasan secara real-time," imbuhnya.

Banyak organisasi yang beralih ke Kafka sebagai standar untuk streaming data di bagian operasional dan ke Iceberg sebagai format tabel terbuka standar untuk kumpulan data di bagian analitik.

Dengan menggunakan Iceberg, perusahaan dapat berbagi data di seluruh tim dan platform sambil terus memperbarui tabel seiring dengan perkembangan data itu sendiri. Perusahaan yang menggunakan Kafka ingin memanfaatkan Iceberg untuk memenuhi permintaan yang terus meningkat akan analisis berbasis streaming dan batch.

Akibatnya, banyak perusahaan harus melakukan migrasi yang kompleks yang dapat menghabiskan banyak sumber daya, menghasilkan data yang basi dan tidak dapat dipercaya, serta meningkatkan biaya. "Standar terbuka seperti Apache Kafka dan Apache Iceberg merupakan pilihan populer untuk streaming data dan mengelola data dalam tabel untuk mesin analitik," ujar Vice President Data Intelligence and Integration Software Stewart Bond di IDC.

"Namun, masih ada tantangan untuk mengintegrasikan data real-time di seluruh database operasional dan mesin analitik. Organisasi harus mencari solusi yang menyatukan divisi operasional dan analitik serta mengelola kompleksitas migrasi, format data, dan skema," tambahnya. Tableflow memudahkan pengumpanan ke data warehouses dan data lakes untuk analisis.

Tableflow, fitur baru di Confluent Cloud, mengubah topik dan skema menjadi tabel Iceberg dalam satu klik untuk memberi ke data warehouse, data lake, atau mesin analitik apa pun untuk kasus penggunaan pemrosesan real-time atau batch. Tableflow bekerja bersama dengan kemampuan yang ada pada platform streaming data Confluent, termasuk fitur Stream Governance dan pemrosesan streaming dengan Apache Flink, untuk menyatukan lanskap operasional dan analitik.