Penguji Bug Lebih Memilih Google ke Bing

Dalam kompetisi untuk menemukan mesin pencari bug, Google keluar di atas Bing, sementara juga mendapatkan pujian umum yang lebih tinggi dari mesin pencari baru Microsoft. Lebih dari 1100 orang di lebih dari 50 negara berpartisipasi dalam kompetisi (PDF), yang diselenggarakan oleh Southborough, Massachusetts berbasis uTest.

uTest mengadakan kompetisi crowdsourced triwulanan, mungkin untuk menghidupkan publisitas untuk bisnis pengujian perangkat lunaknya, dan berbagi hasil dengan vendor. Penguji dinilai berdasarkan "inovasi" dari bug, pemahaman mereka tentang masalah, dan kualitas laporan mereka. Hadiah berkisar dari $ 400 untuk hadiah pertama hingga $ 50 untuk tempat kelima.

Meskipun Google mendapatkan pujian tertinggi, hampir sepertiga penguji terkejut dengan Bing, dan 10 persen mengatakan mereka menjadikannya mesin pencari utama mereka, memiliki menguji Google dan Yahoo juga. Namun, 90 persen lainnya mengatakan mereka akan menempel dengan Google, menghargai akurasi pencariannya di atas semua.

Penguji benar-benar menemukan bug paling sedikit di Yahoo, dengan hanya 70 masalah, meskipun lebih sedikit peserta yang fokus pada mesin pencari yang berangkat ini dibandingkan dengan dua mesin pencari utama lainnya. Penguji menemukan 130 bug di Google, dengan 8 persen diklasifikasikan sebagai "showstoppers," sementara 321 bug ditemukan di Bing, 14 persen dari mereka showstoppers.

Tidak jelas bagaimana uTest mendefinisikan bug, tetapi mereka berhubungan dengan teknis, fungsional, dan masalah antarmuka pengguna. Karena bug yang diketahui tidak memenuhi syarat, saya kira Google mendapat umpan di sini, karena mungkin ada masalah yang dilaporkan dengan baik yang tidak muncul dalam hasil kontes. Sebagai perbandingan, Bing berumur kurang dari empat bulan, jadi ada banyak ruang untuk munculnya masalah baru.

Lebih menarik adalah survei yang diminta oleh penguji dari para penguji setelah kontes. Uang juga ada di sini, dengan $ 400 untuk siapa pun yang mengirimkan laporan umpan balik terbaik.

Google mendominasi survei ini, sebagai pilihan utama untuk akurasi, relevansi waktu nyata, dan kecepatan pemuatan halaman. Di semua kategori, Bing menempati peringkat kedua dan Yahoo menempati posisi ketiga. Sebagian kecil penguji juga mencoba Google Kafein, dan umumnya terkesan. Salah satu penguji mengatakan bahwa hasilnya kembali dua kali lebih cepat daripada mesin Google yang sudah ada.

Jika hasil survei sama sekali mewakili semua pengguna, ini merupakan pukulan bagi Microsoft, yang telah mencoba memasarkan Bing sebagai hasil pencarian yang lebih baik. Namun, Microsoft mungkin mengakui kehilangan pertempuran ini, alih-alih beralih ke fitur baru yang mencolok seperti pencarian visual.