Android

Yahoo Mencari Hadoop Meningkatkan Dengan Rilis Versi Internal

Keseimbangan Supply dan demand (ekonomi) equilibrium

Keseimbangan Supply dan demand (ekonomi) equilibrium
Anonim

Untuk memajukan adopsi teknologi Hadoop untuk memproses kumpulan data masif, Yahoo akan merilis versi perangkat lunak yang telah disempurnakannya untuk memberdayakan banyak situs dan layanan utamanya.

Pengumumannya adalah pada hari Rabu di Hadoop tahunan kedua KTT, diselenggarakan oleh Yahoo dan disponsori oleh beberapa vendor besar yang mendukung teknologi ini, termasuk IBM, Sun, dan Amazon.com.

Mesin pencari Yahoo, sistem iklan, dan layanan webmail menggunakan Hadoop, sebuah implementasi open-source dari model pemrograman MapReduce untuk memproses set data besar dalam kelompok prosesor.

[Bacaan lebih lanjut: Layanan streaming TV terbaik]

Di Yahoo, Hadoop berjalan di lebih dari 25.000 server untuk memecahkan data pada puluhan miliar halaman Web, puluhan pet abit penyimpanan dan milyaran catatan setiap hari.

Dengan merilis kode sumber distribusi Hadoop-nya, Yahoo berharap dapat meningkatkan pengembangan proyek Apache Software Foundation ini.

Yahoo, yang mempekerjakan pendiri Hadoop, Doug Cutting, menyumbangkan kembali Perangkat tambahan Hadoop untuk proyek Apache, tetapi sekarang merilis implementasi Hadoop penuhnya, yang merupakan yang terbesar di dunia dan telah diuji dan disempurnakan secara ekstensif untuk digunakan dalam sistem produksi langsung. Kode Yahoo datang tanpa pembatasan pada penggunaan komersial.

"Ada banyak minat yang menyatakan bahwa jika kami membuat ini tersedia, itu akan berguna untuk pengguna lain," kata Shelton Shugar, wakil presiden senior komputasi awan di Yahoo.

Yahoo semakin mengkonsolidasikan platform pemrosesan pada kelompok Hadoop karena mereka dapat skala lebih baik dan menyediakan pemrosesan data skala besar yang diperlukan situs dan layanan perusahaan, katanya.

"Kami sangat senang dengan bagaimana Hadoop adalah bekerja untuk kami. Ini adalah platform yang luar biasa, "kata Shugar.

Amazon.com baru-baru ini meluncurkan layanan yang di-host yang dirancang untuk menyederhanakan bagi pengembang penggunaan Hadoop yang disebut Amazon Elastic MapReduce, sementara perusahaan seperti pasar Cloudera distribusi komersial Hadoop yang dirancang untuk penyebaran perusahaan