ডকুমেন্ট চাঙ্কিং

টোকেন-ভিত্তিক চাঙ্কিং

টোকেনগুলিকে মৌলিক একক হিসাবে ব্যবহার করে বিভাজনের কৌশল, যা জিপিটি বা বার্টের মতো ভাষা মডেলগুলির প্রসঙ্গ সীমা মেনে চলার জন্য অপরিহার্য।

← ফিরে যান