Analyzer menyiapkan teks untuk pencarian dengan mengubahnya menjadi token: unit, sering berupa kata, yang nanti dapat dicocokkan.
Amati setiap transformasi
Untuk pipeline yang sengaja dikonfigurasi menghapus HTML, memisahkan kata, dan mengubahnya menjadi huruf kecil:
<b>Blue Shoes</b>
-> Blue Shoes
-> [Blue, Shoes]
-> [blue, shoes]
