Tip:
Highlight text to annotate it
X
Rajan Patel: Het zoekalgoritme van Google bestaat uit honderden signalen
die we combineren om de beste resultaten voor elke gebruiker weer te geven.
Amit Singhal: Vorig jaar
hebben we meer dan 500 wijzigingen in ons algoritme aangebracht.
Je kunt dus zeggen
dat we ons algoritme bijna elke dag één of twee keer aanpassen.
Scott Huffman: We analyseren elke potentiële wijziging grondig
om ervoor te zorgen dat deze het gewenste resultaat heeft voor gebruikers.
Mark Paskin: De eerste stap bij het verbeteren van Google Zoeken
is het bedenken van een idee.
Scott Huffman: We gaan bijna altijd uit van een reeks motiverende zoekopdrachten
die niet zo goed presteren als we zouden willen.
De rangschikkingsengineers bedenken een hypothese
over welk signaal, welke gegevens
we in ons algoritme zouden kunnen integreren.
Amit Singhal: We testen alle redelijke ideeën
met grondige wetenschappelijke tests.
Mark Paskin: Eerst gebruiken we 'raters', oftewel rangschikkers.
Dat zijn externe mensen die zijn getraind om te beoordelen
of een rangschikking relevanter en van hogere kwaliteit is dan een andere.
Rajan Patel: We laten deze raters twee rangschikkingen zien voor zoekopdrachten
die kunnen worden beïnvloed door het experiment van de engineer.
We bevestigen deze wijzigingen ook via experimenten met echte gebruikers.
Mark Paskin: Dat doen we in wat we een 'sandbox' noemen.
We sturen een heel klein deel van het echte Google-verkeer naar de sandbox.
We berekenen allerlei verschillende statistieken.
Scott Huffman: In 2010 hebben we meer dan 20.000 verschillende experimenten uitgevoerd.
En de gegevens van de menselijke evaluatie en het experiment online
worden vervolgens geanalyseerd door een zoekanalist.
Sangeeta Das: Voor elk project
wordt er meestal één analist toegewezen vanaf het moment
waarop we met de engineers overleggen over de wijziging die ze willen aanbrengen.
Zoals jullie zien, is het effect vrij klein.
Mark Paskin: Vervolgens vergaderen we over de lancering,
waarbij het management van het zoekteam naar de gegevens kijkt
en een besluit neemt.
Amit Singhal: Dat moeten we echt oplossen.
Sangeeta Das: Het doel van het team voor zoekanalyse
is een met gegevens onderbouwd besluit aan te geven
en een onbevooroordeeld beeld te geven.
Amit Singhal: Oké?
Niet goedgekeurd dus.
Het team zal begrijpen wat er aan de hand is.
Als uit onze wetenschappelijke tests blijkt dat het goed werkt voor Google-gebruikers,
lanceren we de wijziging op Google.
Mark Paskin: Sinds enkele jaren
biedt Google spellingsuggesties voor zoekopdrachten
die typefouten of verkeerde spellingen bevatten.
Soms typt u een zoekopdracht en dan ziet u staan:
'Bedoelde u', gevolgd door een alternatieve zoekopdracht.
Als u de naam van uw medicijn verkeerd spelt,
en u niet op de link 'Bedoelde u' klikt,
ontvangt u misschien resultaten met die verkeerd gespelde naam.
En dat zijn meestal niet de beste resultaten.
Daarom dachten we aan een ander soort interface
die we 'volledige paginavervanging' noemen.
En in plaats van 'Bedoelde u'
staat er nu boven aan de pagina:
'Resultaten weergeven voor'.
En voor het geval we ons hebben vergist,
staat er ook een link met 'Zoek in plaats daarvan naar',
gevolgd door de zoekopdracht die u had getypt.
We noemen die link de 'nooddeur'.
Voor elke keer dat een gebruiker op die nooddeur moest klikken
omdat het spellingsalgoritme een fout had gemaakt,
wilden we ervoor zorgen dat het algoritme in 50 andere gevallen
wel de juiste spelling voorstelde,
zodat gebruikers niet op 'Bedoelde u' hoefden te klikken.
En ze keken ook in de live verkeersgegevens
hoe vaak gebruikers op die nooddeur klikten
om ervoor te zorgen dat het gebruikerssignaal dat we uit live experimenten ontvangen
overeenkomt met het signaal uit onze gewone evaluaties.
We presenteerden dit aan het lanceringscomité
en op basis van de evaluaties door raters en de live experimenten
bleek duidelijk dat de engineers hadden gedaan wat ze moesten doen.
En dus lanceerden we het.
Amit Singhal: Wanneer je de belangen van Google naast die van gebruikers legt,
zoals wij hebben gedaan,
krijg je goede resultaten.
Mark Paskin: We investeren veel in kijken wat er voor gebruikers werkt.
Rajan Patel: Kan deze wijziging gebruikers helpen,
niet alleen in de Verenigde Staten of in het Engels,
maar over de hele wereld?
Scott Huffman: We raken enthousiast
als we het gevoel krijgen dat we iets hebben bedacht dat veel gebruikers zal helpen.
Amit Singhal: Gebruikers keren toch terug naar Google,
zelfs al kunnen ze voor een andere zoekmachine kiezen
zodra ze een browser openen.