En analyzer forbereder tekst til søgning ved at omdanne den til tokens: enheder, ofte ord, som senere kan matches.
Se hver transformation
For en bevidst konfigureret pipeline, der fjerner HTML, opdeler ord og gør dem små:
<b>Blue Shoes</b>
-> Blue Shoes
-> [Blue, Shoes]
-> [blue, shoes]
- Et character filter fjerner HTML før opdelingen.
