JRIIN :Jurnal Riset Informatika dan Inovasi
Vol 1 No 12 (2024): Vol. 1 No. 12 Mei (2024): JRIIN : Jurnal Riset Informatika

Dynamic Data Processing Pipeline: Integrasi Apache Kafka dan Apache Spark

Sofyan Mufti Prasetiyo (Unknown)
Marji (Unknown)
Aditya Rahman Purwanto (Unknown)
Fransiskus Frengky Farnebun (Unknown)



Article Info

Publish Date
30 May 2024

Abstract

Di era di mana kebutuhan akan pengolahan data real-time semakin mendesak, integrasi antara Apache Kafka dan Apache Spark menjadi kunci dalam memenuhi tuntutan ini. Artikel ini menggali bagaimana kombinasi antara Kafka sebagai sistem pesan yang andal dan Spark sebagai platform pemrosesan in-memory mampu mengoptimalkan manajemen data untuk menghadapi aliran data yang besar dan heterogen. Kami mendiskusikan desain, implementasi, serta manfaat dari integrasi ini dalam membangun jalur data yang efisien dan responsif, memungkinkan organisasi untuk mendapatkan wawasan yang bernilai dengan latensi minimal.

Copyrights © 2024






Journal Info

Abbrev

jriin

Publisher

Subject

Computer Science & IT Decision Sciences, Operations Research & Management

Description

1. Komputasi Lunak, 2. Sistem Cerdas Terdistribusi, Manajemen Basis Data, dan Pengambilan Informasi, 3. Komputasi evolusioner dan komputasi DNA/seluler/molekuler, 4. Deteksi kesalahan, 5. Sistem Energi Hijau dan Terbarukan, 6. Antarmuka Manusia, 7. Interaksi Manusia-Komputer, 8. Hibrida dan ...