Тестеры ошибок предпочитают Google для Bing

В конкурсе на поиск поисковой системы ошибок, Google вышел на вершину Bing, а также получил более высокую общую оценку, чем новая поисковая система Microsoft. В конкурсе (PDF) участвовало более 1100 человек из более чем 50 стран мира.

uTest проводит ежеквартальные конкурсы краудсорсинга, возможно, для того, чтобы обнародовать рекламу своего бизнеса по тестированию программного обеспечения и делится результатами с поставщики. Тестеры оценивались по «инновационности» ошибок, их пониманию проблем и качеству их отчетов. Вознаграждения варьировались от 400 долларов за первый приз до 50 долларов за пятое место.

В то время как Google заслужил самую высокую оценку, почти третья часть тестировщиков была приятно удивлена ​​Bing, а 10 процентов сказали, что они сделают ее своей основной поисковой системой, имея тестировали Google и Yahoo. Тем не менее, остальные 90% заявили, что они будут придерживаться Google, оценивая его точность поиска прежде всего.

Тестеры на самом деле нашли наименьшие ошибки в Yahoo, всего 70 проблем, хотя меньше участников сосредоточилось на этой уходящей поисковой системе по сравнению с другие две основные поисковые системы. Тестеры обнаружили 130 ошибок в Google с 8 процентами, классифицированными как «showstoppers», в то время как 321 ошибка была обнаружена в Bing, 14% из них - showstoppers.

Неясно, как UTest определяет ошибки, но они относятся к техническим, функциональным и проблемы с пользовательским интерфейсом. Поскольку известные ошибки не соответствуют требованиям, я предполагаю, что Google получает пропуск здесь, так как могут быть обнаружены проблемы, которые не отображаются в результатах конкурса. Для сравнения, Bing составляет менее четырех месяцев, поэтому есть много возможностей для возникновения новых проблем.

Более интересным является опрос, который uTest запросил у своих тестировщиков после конкурса. Деньги также были на линии, при этом 400 долларов были направлены на того, кто подал лучший отчет о результатах.

Google доминировал над этими опросами, как лучший выбор для точности, актуальности в реальном времени и скорости загрузки страниц. Во всех категориях Bing занял второе место, а Yahoo заняла третье место. Небольшой процент тестировщиков также пробовал Google Caffeine и был в целом впечатлен. Один из тестировщиков сказал, что результаты вернулись в два раза быстрее, чем у существующего двигателя Google.

Если результаты опроса являются представителями всех пользователей, это удар Microsoft, который попытался продать Bing как лучший результат поиска. Однако Microsoft может признать, что проигрывает эту битву, вместо этого обращаясь к новым, ярким функциям, таким как визуальный поиск.