Analyzer textને tokenમાં ફેરવી શોધ માટે તૈયાર કરે છે: એવા એકમો, સામાન્ય રીતે શબ્દો, જેનો પછી મેળ મેળવી શકાય.
દરેક પરિવર્તન જુઓ
જાણપૂર્વક HTML દૂર કરવા, શબ્દ અલગ કરવા અને નાના અક્ષર કરવાની pipeline ગોઠવી હોય તો:
text
<b>Blue Shoes</b>
-> Blue Shoes
-> [Blue, Shoes]
-> [blue, shoes]
- Character filter વિભાજન પહેલાં HTML દૂર કરે છે.
