bedrijf Microsoft presenteerde een kunstmatige-intelligentiesysteem genaamd Speller100, dat de spelling corrigeert in meer dan 100 talen die worden gebruikt in Bing-zoekopdrachten.
"Wij geloven dat Speller100 het meest uitgebreide spellingcorrectiesysteem is dat ooit is gemaakt in termen van taaldekking en nauwkeurigheid", aldus het bedrijf in een blogpost.
Eerder leverde Bing hoogwaardige spellingcorrecties voor ongeveer twee dozijn talen. Het systeem beschikte echter niet over voldoende trainingsgegevens om goed te presteren in talen met weinig aanwezigheid op het web en beperkte gebruikersfeedback.
Het Speller100-systeem overwint deze beperkingen door te zoeken naar overeenkomsten tussen grote taalfamilies. Het past ook "zero shot training" toe (ZSL - zero-shot leren) om fouten te corrigeren zonder dat er aanvullende trainingsgegevens nodig zijn.
Microsoft legt uit
Microsoft zei dat het ongeveer een dozijn taalfamiliemodellen had gecreëerd om de voordelen van ‘zero-shot learning’ te maximaliseren:
Stel je voor dat iemand je heeft leren schrijven in het Engels en je hebt automatisch ook leren schrijven in het Duits, Nederlands, Afrikaans, Schots en Luxemburgs. Dit zijn de mogelijkheden die "zero-shot learning" ons biedt, en het is een belangrijk onderdeel in Speller100 waarmee we kunnen schalen naar talen met zeer weinig of geen gegevens.
Het systeem vermindert ook de behoefte aan door mensen gegenereerde annotaties door tekst van webpagina's te extraheren om veelvoorkomende fouten te genereren.
"Dergelijke tekst kan gemakkelijk worden geëxtraheerd door het internet te scannen, en het is voldoende om honderden talen te onderwijzen", aldus de Microsoft.
Na het uitvoeren van online testen rapporteert het bedrijf de volgende resultaten:
- Het aantal pagina's zonder resultaat is teruggebracht naar 30%.
- Het aantal gevallen waarin gebruikers hun zoekopdracht handmatig moesten herformuleren, daalde met 5%.
- Het aantal gebruikerskliks op spellingsuggesties steeg van enkele cijfers naar 67%.
- Het aantal klikken door gebruikers op elk element op de pagina steeg van enkele cijfers naar 70%.
Microsoft zei dat de integratie van het Speller100-systeem in Bing slechts de eerste stap is. Het bedrijf is van plan de technologie in de nabije toekomst toe te voegen aan "veel meer" van zijn producten.
Lees ook: