З роками можливості Пошуку вдосконалюються відповідно до все більших потреб і очікувань користувачів Google. Що б це не було: нововведення, як-от Мережа знань, чи оновлення наших систем, завдяки яким ми показуємо релевантний контент – ми завжди прагнемо покращувати корисність результатів пошуку.

Ми проводимо ретельне оцінювання всіх потенційних змін Пошуку, аналізуємо показники й тоді вирішуємо, чи вносити запропоновану зміну.

Наші досвідчені інженери, аналітики, юристи й експерти з питань конфіденційності перевіряють дані цих оцінок і експериментів та вирішують, чи застосовувати зміну. У 2022 році ми провели понад 800 000 експериментів і додали в Пошук 4000 покращень.

Наші найдосвідченіші інженери й спеціалісти з обробки даних, які ретельно перевіряють дані з усіх експериментів, досліджують кожну запропоновану для Пошуку зміну, щоб вирішити, чи схвалювати її запуск. Багато запропонованих за минулий рік змін було відхилено. Ми не запускаємо зміни, якщо вони не покращують роботу Пошуку для користувачів.

Перш ніж запускати нову функцію для всіх, ми випробовуємо її в експериментах із реальним трафіком. Ми вмикаємо таку функцію лише для невеликого відсотка користувачів (зазвичай від 0,1%), а тоді порівнюємо експериментальну групу з контрольною, яка не мала доступу до цієї функції. Ми досліджуємо цілий список показників: що саме люди натискали, скільки запитів вони ввели й скільки завчасно покинули, через який час натискали результат тощо. На цій основі ми визначаємо, чи була взаємодія з новою функцією позитивною та чи сприятиме ця зміна релевантнішим і кориснішим результатам пошуку.

Пошук не є статичним. Ми постійно вдосконалюємо наші системи, щоб показувати кращі результати, і в процесі запуску змін важливу роль відіграють експерти з перевірки якості Пошуку. Під час паралельних експериментів ми показуємо експертам два різні набори результатів пошуку: один із застосованими змінами, а інший – без них. Ми запитуємо, яким результатам вони віддають перевагу та чому.