Integrasi Nol-ETL Amazon Aurora dengan Amazon Redshift
Aktifkan Analitik dan ML Mendekati Waktu Nyata pada Petabita Data Transaksional
Mengapa Integrasi Nol-ETL Aurora dengan Amazon Redshift?
Keuntungan
Akses data transaksional dari Aurora di Amazon Redshift dalam hitungan detik untuk menjalankan analitik dan ML mendekati waktu nyata pada petabita data.
Analisis data transaksional Anda dengan cepat mendekati waktu nyata tanpa harus membangun dan mengelola pipeline ETL untuk memindahkan data transaksional ke sistem analitik.
Konsolidasikan banyak tabel dari berbagai klaster basis data Aurora dan repilasikan data Anda ke satu gudang data Amazon Redshift untuk menjalankan analitik terpadu di berbagai aplikasi dan sumber data.
Jalankan analitik mendekati waktu nyata pada data transaksional tanpa harus mengelola infrastruktur apa pun saat menggunakan Amazon Aurora Nirserver v2 dan Amazon Redshift Nirserver.
Kasus Penggunaan
Gunakan kemampuan analitik dan ML Amazon Redshift untuk mendapatkan wawasan secara mendekati waktu nyata dari data transaksional dan data lainnya untuk merespons peristiwa krusial yang sensitif terhadap waktu secara efektif. Analitik mendekati waktu nyata dapat membantu Anda mendapatkan wawasan yang lebih akurat dan tepat waktu untuk kasus penggunaan, seperti penargetan konten, pengalaman bermain game yang dioptimalkan, pemantauan kualitas data, deteksi penipuan, serta analisis perilaku pelanggan.
Dengan integrasi nol-ETL Aurora dengan Amazon Redshift, Anda dapat menggunakan kemampuan Amazon Redshift untuk menganalisis petabita data transaksional yang dikonsolidasikan dari banyak klaster basis data Aurora. Anda dapat memanfaatkan kemampuan analitis komprehensif Amazon Redshift, seperti ML bawaan, tampilan terwujud, berbagi data, dan akses gabungan ke beberapa penyimpanan data dan danau data. Dengan Amazon Redshift ML, Anda dapat menjalankan miliaran prediksi dengan perintah SQL langsung melalui integrasi native ke Amazon SageMaker.
Memindahkan data dari basis data transaksional ke gudang data pusat sering kali memerlukan pembangunan, manajemen, dan pengoperasian solusi ETL pipeline data yang kompleks. Dengan integrasi nol-ETL, Anda dapat dengan mudah mereplikasi skema, data yang ada, dan perubahan data dari basis data Aurora Anda ke klaster Amazon Redshift baru atau yang sudah ada. Integrasi nol-ETL menghilangkan kebutuhan akan manajemen pipeline data yang kompleks.
Pelanggan
Infosys
Verifikasi pengiriman sangat penting untuk mempertahankan integritas rantai pasokan bagi pelanggan manufaktur, ritail, dan logistik Infosys. Untuk mencapai hal ini, penyerapan data pelacakan pengiriman waktu nyata diperlukan untuk melacak pengiriman dan analitik pengiriman.
"Infosys telah memanfaatkan kemampuan nol-ETL untuk menyerap data secara waktu nyata, dengan memungkinkan pelacakan pengiriman barang dan memberikan visibilitas ke lokasi, status, dan perkiraan waktu kedatangan. Hal ini memungkinkan untuk optimisasi operasi pengiriman dan pengurangan biaya yang signifikan. Dengan pelaporan dan analitik komprehensif nol-ETL, bersama dengan cetak biru industri Infosys Cobalt dan Topaz, pengambilan keputusan yang didorong data kini dapat dilakukan."
Sunil Senan, SVP dan Global Head of Data, Analytics and AI - Infosys
Intuit
Intuit adalah platform teknologi keuangan global yang mendukung kemakmuran bagi 100 juta konsumen dan pelanggan bisnis kecil dengan TurboTax, Credit Karma, QuickBooks, serta Mailchimp. Dengan kompleksitas migrasi yang akan datang, Intuit melihat tingkat yang mengejutkan lebih dari 10 juta migrasi profil per hari. Intuit beralih ke integrasi nol-ETL Amazon Aurora MySQL dengan Amazon Redshift untuk menyederhanakan proses penyerapan data mereka dan menghilangkan kebutuhan akan pekerjaan rekayasa yang kompleks.
"Volume data yang besar dan kebutuhan untuk migrasi yang lancar menghadirkan tantangan yang signifikan bagi kami. Selain itu, kami membutuhkan solusi yang memungkinkan kami menganalisis proses migrasi dengan cepat, yang memungkinkan kami membuat keputusan yang cepat dan didorong data. Untuk mengatasi tantangan ini, kami beralih ke integrasi nol-ETL Amazon Aurora dengan Amazon Redshift untuk menyederhanakan proses penyerapan data dan menghilangkan kebutuhan akan pekerjaan rekayasa yang kompleks. Dengan nol-ETL, kami dapat mengirim sejumlah besar data ke Amazon Redshift tanpa perlu penangkapan data atau tugas penyerapan yang terpisah. Hal ini memungkinkan wawasan cepat untuk mendorong keputusan teknis dan bisnis yang penting sehingga menghemat waktu berbulan-bulan yang seharusnya diperlukan. Memanfaatkan integrasi nol-ETL Aurora dengan Amazon Redshift untuk membantu kami menjelajahi pola baru di Intuit untuk migrasi data skala besar dan analitik hampir waktu nyata."
Aruna Ghiware, Product Development Manager - Intuit
KINTO Technologies Corporation
KINTO Technologies Corporation adalah pemain terkemuka di industri platform mobilitas dan merupakan perusahaan teknologi yang bertanggung jawab atas pengembangan layanan KINTO sebagai perusahaan layanan keuangan Toyota. Memanfaatkan integrasi nol-ETL Amazon Aurora MySQL dengan Amazon Redshift, KINTO Technologies mampu mencapai jalur data yang lebih tangguh dan kini dapat menerapkan fitur analitik canggih Amazon Redshift ke data operasionalnya hampir secara waktu nyata.
“Sebelum integrasi nol-ETL tersedia, kami menggunakan solusi yang dibuat khusus yang terus mengalirkan perubahan dari basis data inti kami ke aplikasi downstream, tetapi kami menghadapi tantangan performa yang terus-menerus dan dampak pada beban kerja produksi kami. Untuk mengatasi dampak performa pada beban kerja produksi, kami harus menyetel pipeline secara manual agar lebih jarang mengirim pembaruan dan puas dengan data lama di Amazon Redshift. Dengan integrasi nol-ETL Aurora MySQL dengan Amazon Redshift, kami selalu dapat memiliki data mendekati waktu nyata yang tersedia di Amazon Redshift, sehingga dapat menghilangkan waktu yang dihabiskan developer untuk mengelola pipeline data secara manual untuk operasi ETL atau menangani dampak performa terhadap beban kerja, yang membantu mengurangi beban operasional kami."
Hitoshi Kageyama, Executive Vice President - KINTO Technologies Corporation
MassPay
MassPay adalah penyedia solusi orkestrasi pembayaran global terkemuka yang memungkinkan pembayaran B2B dan B2C menjadi lancar, aman, serta sesuai di negara, mata uang, atau metode pembayaran apa pun.
"Kami mengandalkan Amazon Aurora Edisi Kompatibel MySQL dan Amazon Redshift agar dapat menghadirkan infrastruktur beperforma tinggi serta dapat untuk pemrosesan transaksi dan analitik. Aurora MySQL berfungsi sebagai tulang punggung lapisan basis data operasional kami, yang mendukung alur kerja pembayaran yang penting bagi misi dengan pemrosesan miliaran dolar. Amazon Redshift mendukung pergudangan data dan analitik lanjutan kami dengan memberikan wawasan mendekati waktu nyata terkait performa pembayaran, tren pelanggan, serta efisiensi operasional. Melalui integrasi nol-ETL Aurora MySQL dengan Amazon Redshift, kami telah menghilangkan latensi antara penyerapan data dan pelaporan. Hal ini telah menghasilkan pengurangan 90% dalam latensi ketersediaan data, dengan data MySQL sekarang dapat diakses di Redshift 1,5x lebih cepat. Hasilnya adalah peningkatan pengambilan keputusan internal serta 75% peningkatan dalam pemanfaatan internal dan ketergantungan pada Amazon Redshift sebagai sumber utama pelaporan kami."
Yossi Shlomo, Director of Payment Systems Architecture - MassPay
Money Forward, Inc.
Money Forward, Inc. berusaha untuk meningkatkan produktivitas dan potensi kreatif tim IT dalam organisasi dengan menyederhanakan tugas berulang, memotong biaya, serta memperkuat keamanan melalui Admina, Platform Manajemen SaaS intuitifnya.
"Sebelum integrasi nol-ETL Amazon Aurora dengan Amazon Redshift dirilis, beban implementasi dan pemeliharaan operasi ETL kami untuk menganalisis data produk dari Amazon Aurora MySQL di Amazon Redshift begitu menantang. Integrasi nol-ETL Aurora MySQL dengan Amazon Redshift memungkinkan sinkronisasi data mendekati waktu nyata antara basis data Aurora MySQL kami dan Amazon Redshift, yang mengurangi waktu untuk membangun lingkungan analisis dari sebulan menjadi hanya tiga jam. Selain mengurangi beban awal pada saat pengembangan, dengan integrasi nol-ETL, dampak pada lingkungan produksi menjadi lebih kecil, yang memungkinkan pembangunan lingkungan analisis dengan biaya minimum dan kecepatan maksimum."
Katsutoshi Murakami, Director dan CPO - Money Forward i
Harga
AWS tidak mengenakan biaya tambahan untuk integrasi nol-ETL Aurora dengan Amazon Redshift. Anda membayar sumber daya Aurora dan Amazon Redshift yang ada yang digunakan untuk membuat serta memproses data perubahan yang dibuat sebagai bagian dari integrasi nol-ETL. Sumber daya ini dapat mencakup:
- I/O dan penyimpanan tambahan yang digunakan dengan mengaktifkan pengambilan data perubahan
- Biaya ekspor snapshot untuk ekspor data awal guna menempatkan basis data Amazon Redshift Anda
- Penyimpanan Amazon Redshift tambahan untuk menyimpan data yang direplikasi
- Komputasi Amazon Redshift tambahan untuk memproses replikasi data
- Biaya transfer data lintas AZ untuk memindahkan data dari sumber ke target.
Pemrosesan perubahan data yang berkelanjutan dengan integrasi nol-ETL ditawarkan tanpa biaya tambahan. Untuk Informasi Selengkapnya, Kunjungi Halaman Harga Aurora.
Cara Memulai
Untuk membuat integrasi nol-ETL antara Aurora dan Amazon Redshift, tentukan klaster Aurora DB sebagai sumber data dan gudang data Amazon Redshift sebagai target. Integrasi tersebut mereplikasi data dari basis data sumber ke gudang data target. Data tersedia di Amazon Redshift dalam hitungan detik, sehingga para analis data dapat mulai menggunakan fungsi analitik dan ML Amazon Redshift pada data. Untuk Mempelajari Selengkapnya, Kunjungi Panduan Memulai Aurora dan Amazon Redshift.