analyzer text-কে token-এ বদলে অনুসন্ধানের জন্য প্রস্তুত করে: পরে মিলিয়ে দেখা যায় এমন একক, যা প্রায়ই শব্দ।
ইচ্ছাকৃতভাবে HTML অপসারণ, শব্দ বিভাজন ও ছোট হাতের অক্ষরের pipeline কনফিগার করলে:
<b>Blue Shoes</b>
-> Blue Shoes
-> [Blue, Shoes]
-> [blue, shoes]
শেষের token-গুলো বোঝায় কেন ছোট হাতের shoes মূল ইনপুটের সঙ্গে মেলে। এটি কাস্টম উদাহরণ; সব analyzer HTML সরায় না।
Kibana Dev Tools-এ এই অনুরোধ ওই pipeline-এর token দেখায়:
POST /_analyze
{
"char_filter": ["html_strip"],
"tokenizer": "standard",
"filter": ["lowercase"],
"text": "<b>Blue Shoes</b>"
}
ফেরত আসা token-এ blue ও shoes খুঁজুন। তারপর প্রকৃত উচ্চারণচিহ্ন, ভাষা ও পণ্যের কোড পরীক্ষা করুন। Index-time analysis সংরক্ষিত term প্রস্তুত করে; search-time analysis ব্যবহারকারীর কুয়েরি প্রস্তুত করে। pipeline আলাদা হলেও term-গুলো সামঞ্জস্যপূর্ণ হওয়া দরকার।
বিস্তারিত উত্তরসহ IT ইন্টারভিউ প্রশ্নের একটি লাইব্রেরি — জুনিয়র থেকে সিনিয়র পর্যন্ত।
দান করুন