Facebook bersiap untuk menggunakan 'cold storage' untuk menangani data dalam jumlah besar

Facebook sedang memikirkan ulang cara menyimpan data untuk mengatasi 7 petabyte foto baru yang diupload pengguna jejaring sosial setiap bulan. Seiring bertambahnya jumlah foto, Facebook perlu menemukan cara yang lebih murah dan hemat daya untuk menyimpan semuanya, menurut wakil presiden perusahaan rekayasa infrastruktur.

Pengguna mengunggah sekitar 300 juta foto sehari, lebih banyak pada acara-acara khusus, Facebook Jay Parikh mengatakan kepada konferensi Eropa Struktur di Amsterdam Rabu. "Halloween adalah salah satu hari pengunggahan foto terbesar kami tahun ini. Kami akan mendapatkan tempat antara mungkin 1 dan 2 miliar foto yang diunggah hanya dalam satu hari," katanya.

Foto-foto seperti yang diambil di Halloween segera kehilangan minat mereka, dengan tidak ada yang melihat mereka setelah beberapa hari atau minggu, tetapi "Kontrak kami dengan pengguna kami adalah bahwa kami tidak dapat menghapus data saat tidak diakses, kami harus menyimpannya," katanya. Itu mengarah pada gagasan menempatkan foto ke dalam semacam "penyimpanan dingin," kata Parikh.

[Bacaan lebih lanjut: Layanan streaming TV terbaik]

Untuk melakukan itu, Facebook berencana untuk membangun pusat data baru dengan berbagai jenis penyimpanan, perangkat keras server, dan peralatan jaringan yang mengkonsumsi lebih sedikit daya dan biaya kurang dari pusat data yang ada - semua tanpa mengubah waktu respons server, katanya.

Tapi seberapa efisien Facebook dapat membuat penyimpanan dinginnya? Ketika biaya dan konsumsi daya di pusat data diturunkan, ini biasanya terjadi dengan mengorbankan kecepatan akses.

Menyimpan data pada kaset, misalnya, menurunkan konsumsi daya tetapi sangat memperlambat akses data.

Amazon Web Services mengikuti jalur tengah dengan layanan penyimpanan cloud Glacier, yang dijadikan sebagai alternatif untuk rekaman. Layanan ini dioptimalkan untuk data yang jarang diakses dan untuk itu waktu pengambilan beberapa jam dapat diterima.

Itu terlalu lambat untuk Facebook, menurut Parikh. "Saya tidak dapat memiliki foto yang Anda akses dari lima atau sepuluh tahun yang lalu, dan bagi saya untuk menampilkan spanduk kepada pengguna yang mengatakan: 'Hei, mengapa Anda tidak mencoba lagi dalam 24 jam?' Ini masih harus waktu yang relatif nyata, "katanya.

Kebutuhan daya yang lebih rendah

Gambar: Sumber data milik Pusat Data Data Knowledge Center di Oregon

Sebagian besar pusat data yang digunakan saat ini dioptimalkan untuk menggunakan banyak kekuatan untuk menangani tugas-tugas yang membutuhkan daya komputasi besar. Teknologi "penyimpanan dingin" yang dipikirkan Facebook berada di ekstrem yang lain, kata Parikh. "Anda membutuhkan banyak ruang tetapi Anda tidak membutuhkan banyak daya," katanya, seraya menambahkan bahwa segala sesuatu tentang pusat data perlu dipikirkan kembali untuk menangani masalah pada skala wajah Facebook.

Pada tingkat tinggi, Facebook sedang mengerjakan perangkat lunak yang akan mencari tahu bagaimana dan di mana untuk menyimpan sepotong konten di infrastruktur ketika sudah tua, kata Parikh. "Itu berarti bahwa salinan data akan bergerak dari waktu ke waktu dan memanfaatkan berbagai infrastruktur yang berbeda yang akan kami optimalkan untuk usia konten." Beberapa penemuan di lapisan perangkat lunak akan memungkinkan Facebook untuk tetap merespon dengan cepat tetapi untuk menyimpan data dengan biaya lebih efektif, katanya.

Penyimpanan dingin akan menjadi bagian dari infrastruktur Facebook di tahun depan atau dua, katanya. Facebook berencana untuk mengungkapkan dan berbagi bagian yang dianggap relevan melalui Proyek Compute Terbuka, sebuah inisiatif yang dimulai oleh Facebook untuk menerapkan model kolaborasi perangkat lunak open-source ke dunia perangkat keras pusat data.