Android

Amazon Mengotomatiskan Penggunaan Hadoop untuk Pengembang

Hadoop Processing Frameworks

Hadoop Processing Frameworks
Anonim

Amazon.com telah meluncurkan layanan yang di-host yang dirancang untuk menyederhanakan bagi pengembang penggunaan implementasi Hadoop dari model pemrograman MapReduce untuk memproses set data besar dalam kluster prosesor.

Disebut Amazon Elastic MapReduce, layanan komputasi awan ditujukan untuk pengembang aplikasi yang perlu memecahkan sejumlah besar data, yang sangat cocok untuk Hadoop.

Dengan Amazon Elastic MapReduce, banyak tugas yang perlu ditangani oleh pengembang secara manual terkait dengan Hadoop yang diaktivasi, komputasi awan Amazon Web Services (AWS) perusahaan divisi mengatakan dalam sebuah blog resmi pada hari Kamis.

[Bacaan lebih lanjut: Layanan streaming TV terbaik]

"Menggunakan Elastic MapReduce, Anda dapat membuat, menjalankan, memantau, dan mengontrol pekerjaan Hadoop dengan kemudahan point-and-click. Anda tidak perlu keluar dan membeli perangkat keras. Anda tidak harus memutarnya, membuat jaringan, atau mengelolanya. Anda tidak perlu khawatir kehabisan sumber daya atau membaginya dengan anggota lain dari organisasi Anda. Anda tidak perlu memantau, menyetelnya, atau menghabiskan waktu untuk memutakhirkan sistem atau perangkat lunak aplikasi, "posting blog tersebut berbunyi.

AWS memutuskan untuk membuat layanan ini setelah mempelajarinya memiliki pelanggan yang menjalankan pekerjaan Hadoop di Amazon Layanan Elastic Compute Cloud (EC2), yang menyediakan kapasitas komputasi yang dihosting. Karena Hadoop menjadi semakin populer, Amazon bertujuan untuk mempermudah pengembang lain untuk memanfaatkan penerapan open source MapReduce ini.

Elastic MapReduce bekerja bersama dengan EC2 dan Amazon Storage Storage Service (S3) menyelenggarakan layanan cloud penyimpanan. "Elastic MapReduce secara otomatis memototi implementasi Hadoop dari kerangka MapReduce pada instance Amazon EC2, membagi data dalam alur pekerjaan menjadi bagian yang lebih kecil sehingga dapat diproses - fungsi 'peta' - secara paralel, dan akhirnya menggabungkan kembali data yang telah diproses ke dalam solusi akhir - fungsi 'mengurangi'. Amazon S3 berfungsi sebagai sumber untuk data yang dianalisis, dan sebagai tujuan output untuk hasil akhir, "menurut deskripsi terpisah dari layanan.

Seperti layanan cloud AWS lainnya, Amazon mengenakan biaya untuk Elastic MapReduce berdasarkan penggunaan, tanpa biaya minimum.