Після невдалого виступу на SMX Elizabeth Tucker зробила нову спробу пояснити, як же Google вимірює…
Після невдалого виступу на SMX Elizabeth Tucker зробила нову спробу пояснити, як же Google вимірює якість пошуку.
Більшість інтерв'ю — розповідь про організацію роботи щодо якості поміж різними відділами і підходи до вирішення проблем.
Деякі системи негативні, наприклад, вебспам. Але є системи позитивні, наприклад, тематичність або топікальність, коли Google намагається встановити найбільш тематично відповідний контент до запиту користувача. Це також стосується випадків, коли потрібно встановити контент, який відповідає на питання запиту, а не просто містить ключові слова з самих запитів.
Чому в Google впевнені, що результати пошуку постійно покращуються?
Тому що запити стають все складнішими. І більш довгими. Раніше запити з 4х слів вважались довгими. Але зараз це вже запити від щонайменше 10 слів.
До BERT Google майже не розумів використання прийменників. І хоча і зараз це є проблемою, але все ж таки розуміння і відповіді покращились.
Запити, які містять "ні", "не" або "без" все ще є викликами, і Google поки що не навчився їх нормально опрацьовувати.
Також ознакою покращення пошуку є те, що люди починають проводити більше часу в Google, більше користуються пошуком після оновлення. Але іноді це може означати, що вони не можуть знайти те, що шукають. Тому кількість пошукових запитів не використовується для вимірювання покращення якості пошуку.
Elizabeth Tucker зробила вказівки для асесорів якості пошуку у тому вигляді, у якому ми їх знаємо. Відповіді асесорів вимірюються і за цими вимірюваннями робляться висновки щодо впровадження змін у пошук, ініціювання відповідних оновлень.
Улюблений запит Elizabeth — "cute kittens" — милі кошенята. Так і не зрозуміло, як вони вимірюють милість кошенят, але результат має містити наймиліших. Вийшло у них?
Відео [36:23] Розшифровка