Analizator priprema tekst za pretraživanje pretvarajući ga u tokene: jedinice, često riječi, koje se kasnije mogu uspoređivati.
Za namjerno konfiguriran pipeline koji uklanja HTML, dijeli riječi i pretvara ih u mala slova:
<b>Blue Shoes</b>
-> Blue Shoes
-> [Blue, Shoes]
-> [blue, shoes]
Završni tokeni objašnjavaju zašto shoes malim slovima može odgovarati izvornom ulazu. Ovo je prilagođeni primjer; ne uklanja svaki analizator HTML.
U Kibana Dev Tools ovaj zahtjev pokazuje tokene tog pipelinea:
POST /_analyze
{
"char_filter": ["html_strip"],
"tokenizer": "standard",
"filter": ["lowercase"],
"text": "<b>Blue Shoes</b>"
}
Potražite blue i shoes u vraćenim tokenima. Zatim testirajte stvarne naglaske, jezike i kodove proizvoda. Analiza tijekom indeksiranja priprema pohranjene termine, a analiza tijekom pretrage priprema korisničke upite. Termini moraju biti kompatibilni i kada se dva pipelinea razlikuju.
Knjižnica IT pitanja za razgovore za posao s detaljnim odgovorima — od Juniora do Seniora.
Doniraj