মডেল একটা তারিখে পড়া বন্ধ করেছে, আর সে জানে না সেই তারিখটা কী
একটা ভাষা মডেল প্রশিক্ষণ শুরুর আগে সাজানো লেখার একটা নির্দিষ্ট ভাণ্ডার থেকে শেখে। LLM কী দুটো প্রশিক্ষণ পর্যায় নিয়ে আলোচনা করে; এখানে মূল কথা হলো দুটোতেই একটা শেষ তারিখ থাকা ডেটা ব্যবহার হয়। সেই তারিখের পরে প্রকাশিত কিছুই মডেলে নেই। না নির্বাচন, না মূল্য পরিবর্তন, না মডেল নিজের সম্পর্কে খবর।
ভেন্ডররা মডেল কার্ডে সেই তারিখ প্রকাশ করে, আর ক্রমশ দুটো করে প্রকাশ করছে। Anthropic একটা "training data cutoff" তালিকাভুক্ত করে, যেই শেষ তারিখ পর্যন্ত কোনো ডেটা অন্তর্ভুক্ত হয়েছে, আর একটা "reliable knowledge cutoff", তার আগের একটা তারিখ যার আগে কভারেজ যথেষ্ট ঘন যে বিশ্বাস করা যায়। এই দুটোর মধ্যে ফাঁক থাকে কারণ কোনো ঘটনা নিয়ে লিখতে ওয়েবের মাসের পর মাস লাগে: মার্চে একটা রিলিজ নিয়ে এপ্রিলে হাতেগোনা পাতা থাকে আর সেপ্টেম্বরে হাজার হাজার। জুলাইয়ে প্রশিক্ষিত একটা মডেল মার্চ ভালোভাবে জানে আর জুলাই প্রায় জানেই না।
মডেল নিজেই এই দুটো তারিখের কোনোটাই বলতে পারে না। তার কোনো ক্যালেন্ডার নেই, নিজের প্রশিক্ষণের কোনো রেকর্ডও নেই; "তোমার knowledge cutoff কী" জিজ্ঞাসা করলে সে তার প্রশিক্ষণ ডেটায় সেই প্রশ্নের সবচেয়ে সম্ভাব্য উত্তরটা তৈরি করে, যা সাধারণত কোনো আগের মডেল সম্পর্কে পড়া একটা তারিখ। Anthropic-এর প্রকাশিত সিস্টেম প্রম্পটগুলো Claude-কে তার নিজস্ব cutoff তারিখ স্পষ্ট লেখায় জানিয়ে দেয়, যা এই স্বীকৃতিই যে অন্যথায় মডেল এটা জানত না। তারিখটা কার্ড থেকে নিন, কখনো চ্যাট থেকে নয়।
রিলিজের দিন একটা মডেল কতটা পুরনো, মাপা হলো
প্রশিক্ষণে মাসের পর মাস লাগে, আর মূল্যায়ন এবং সুরক্ষা কাজে আরও বেশি, তাই একটা মডেল লঞ্চ হওয়ার সময়ই পিছিয়ে থাকে। চার্টটা আটটা মডেল কার্ড থেকে পড়া: reliable বা বলা knowledge cutoff-এর বিপরীতে পাবলিক রিলিজ তারিখ, পূর্ণ মাসে।
দুটো প্যাটার্ন দেখা যায়। OpenAI-র ফ্ল্যাগশিপগুলো সবচেয়ে বেশি পিছিয়ে থেকে রিলিজ হয়েছে, GPT-4.1 আর GPT-5 দুটোই দশ মাস, যেখানে Anthropic আর Google দুই থেকে চার মাসের মধ্যে থেকেছে। আর সার্ভিসে থাকতে থাকতে এই ফাঁক শুধু বাড়ে: GPT-4o লঞ্চের এক বছর পরেও ChatGPT-এর ডিফল্ট মডেল ছিল, যতক্ষণে তার জ্ঞান 19 মাস আগে শেষ হয়েছিল। প্রতিদিন ব্যবহার হওয়া একটা মডেল সাধারণত আপনি যা জিজ্ঞাসা করছেন তার চেয়ে এক বছর বা তার বেশি পিছিয়ে থাকে।
উপরের তারিখগুলো ভেন্ডরদের নিজস্ব, এই পাতার শেষে যুক্ত মডেল কার্ড থেকে পড়া। AI মডেল টাইমলাইন-এ সাইট ট্র্যাক করা প্রতিটা মডেলের রিলিজ তারিখ আছে।
আপনি সীমা পার করে জিজ্ঞাসা করলে মডেল কী করে
সে উত্তর দেয়। এটাই সমস্যা। একটা মডেলের কোনো লুকআপ ধাপ নেই যা "পাওয়া যায়নি" ফেরত দেয়; সে সবচেয়ে সম্ভাব্য ধারাবাহিকতা তৈরি করে, আর গত মাস নিয়ে একটা প্রশ্নের জন্য সেই ধারাবাহিকতা প্রশিক্ষণ ডেটায় থাকা একই ধরনের প্রশ্নের প্যাটার্ন থেকে তৈরি হয়। cutoff-এর পরে বেরোনো কোনো পণ্য নিয়ে জিজ্ঞাসা করুন, মডেল বর্ণনা করবে এমন পণ্য যুক্তিসঙ্গতভাবে কেমন হতো। বর্তমান দাম জিজ্ঞাসা করুন, সে cutoff-এর দামটা দেবে, বর্তমান কালে বলা।
AI হ্যালুসিনেশন কী ব্যাখ্যা করে কেন মডেল অনিশ্চিত না হয়ে আত্মবিশ্বাসী থাকে, কিন্তু cutoff সংস্করণের একটা ধরা যাওয়ার লক্ষণ আছে যা আপনি ব্যবহার করতে পারেন: উত্তরটা সুসংগত আর একটু পুরনো। মডেলের নাম এক ভার্সন পিছনে, দামটা গত বছরের, "সর্বশেষ" ফিচারটা প্রশিক্ষণ উইন্ডোর সময়কার। একটা পুরনো উত্তর ভুল দেখায় না; এটা অতীতের মতো দেখায়।
| প্রশ্নের ধরন | সাধারণ মডেলকে জিজ্ঞাসা করা নিরাপদ? | কেন |
|---|---|---|
| কীভাবে কিছু কাজ করে, প্রতিষ্ঠিত তথ্য, cutoff-এর আগের ইতিহাস | হ্যাঁ | প্রশিক্ষণ ডেটায় ঘন, বদলানোর সম্ভাবনা কম |
| দাম, প্ল্যান, সীমা, ভার্সন নম্বর | না | প্রতি মাসে বদলায়; মডেল বর্তমান কালে cutoff থেকে উত্তর দেয় |
| সাম্প্রতিক রিলিজ, খবর, ফলাফল, আইন | না | অনুপস্থিত বা কম; মডেল সম্ভাব্য বিবরণ দিয়ে ফাঁক পূরণ করে |
| মডেল নিজের সম্পর্কে কিছু, তার cutoff সহ | না | মডেলের নিজের প্রশিক্ষণের কোনো রেকর্ড নেই |
| আপনার নিজের নথি, আপনার নিজের ডেটা | না | প্রশিক্ষণ সেটে কখনোই ছিল না; আপলোড করুন |
সমাধান হলো সার্চ, আর যে মডেলের সার্চ নেই তার জন্যও কাজ করে
cutoff সরানো যায় না, তাই সমাধান হলো উত্তর দেওয়ার সময় মডেলকে বর্তমান লেখা হাতে ধরিয়ে দেওয়া। দুটো পদ্ধতি এটা করে। একটা নথি আপলোড করলে আপনার লেখা প্রম্পটে ঢুকে যায়, আর মডেল সেখান থেকে উত্তর দেয়। ওয়েব সার্চ পাতা নিয়ে আসে আর খোলা ওয়েবের সাথে একই কাজ করে। দুটোই গ্রাউন্ডিং, আর দুটোই RAG কী যে পদ্ধতি বর্ণনা করে সেটা: মডেল তখনও অনুমান করে, কিন্তু তার প্রশিক্ষণের পরের উপাদান থেকে।
Whizi-তে, ওয়েব সার্চ ডিফল্টভাবে চালু থাকে, কম্পোজারে অ্যাটাচ বোতামের পাশে বসে, আর আপনি যে মডেল বেছে নেন তার জন্যই প্রযোজ্য হয়। শেষ অংশটাই কাজের কথা। Claude বা একটা Llama মডেল: টগল চালু থাকলে, প্রত্যেকে এই সপ্তাহের প্রশ্নের উত্তর লাইভ উৎস থেকে দেয়। টগলটা অনুমতি দেয়, নির্দেশ দেয় না, তাই একটা কবিতার অনুরোধে সার্চ চালু হয় না আর একটা তারিখওয়ালা প্রশ্নে হয়। সার্চের জন্য কোনো ক্রেডিট লাগে না; বার্তাটার দাম হয় যে মডেল উত্তর দিয়েছে তার ক্রেডিট স্তরে, সার্চ ছাড়া যেমন হতো তেমনই।
একটা সীমা সৎভাবে বলা দরকার। সার্চ পুরনো হওয়া ঠিক করে; এটা বিশ্বাসযোগ্যতা ঠিক করে না। একটা পুরনো ব্লগ পোস্ট একটা ভেন্ডর পাতার মতোই সহজে খুঁজে পাওয়া যায়, তাই দাম বা স্পেসিফিকেশনের জন্য কাজ করার আগে উদ্ধৃত লিংকটা খুলুন, আর যা গুরুত্বপূর্ণ তার জন্য সার্চ চালু রেখে দ্বিতীয় একটা মডেলকে জিজ্ঞাসা করে তুলনা করুন।
ছয় মাস পিছিয়ে ধরে নিন, তারপর প্রশ্নটা সাজান
ধরে নিন প্রতিটা মডেল অন্তত ছয় মাস পিছিয়ে, আর কিছুদিন ধরে ব্যবহার করা একটা মডেল এক বছর বা তার বেশি পিছিয়ে। তারপর প্রশ্নটা সাজান। উত্তরটা যদি সেই সীমার পরের বিশ্ব সম্পর্কে তথ্যের ওপর নির্ভর করে, সার্চ চালু করুন বা উৎস আপলোড করুন। উত্তরটা যদি কথোপকথনে ইতিমধ্যে থাকা কিছু নিয়ে যুক্তির ওপর নির্ভর করে, cutoff গুরুত্বপূর্ণ নয় আর সার্চ বন্ধ রাখা যায়।
তারিখের জন্য মডেল নয়, মডেল কার্ড দেখুন। আর যখন একটা মডেল স্বতঃস্ফূর্তভাবে বলে "আমার শেষ আপডেট অনুযায়ী", এটাকে মডেল নিজের সম্পর্কে একটা তথ্য জানাচ্ছে বলে না নিয়ে তার প্রশিক্ষণ ডেটা থেকে উদ্ধৃত করছে বলে ধরুন, আর সেই বাক্যাংশের পরের সবকিছুকে একই সন্দেহের চোখে দেখুন।
- cutoff তারিখটা ভেন্ডরের মডেল কার্ড থেকে নিন, মডেলকে জিজ্ঞাসা করে কখনো নয়
- লঞ্চের সময় ছয় মাস পুরনো ধরে নিন, আর কিছুদিন সার্ভিসে থাকা মডেলের জন্য এক বছর বা তার বেশি
- দাম, ভার্সন নম্বর, তারিখ বা সাম্প্রতিক নাম থাকা যেকোনো কিছুর জন্য ওয়েব সার্চ চালু করুন
- উত্তরটা আপনার নিজের লেখার ওপর নির্ভর করলে নথি আপলোড করুন; এটা কখনো প্রশিক্ষণ ডেটায় ছিল না
- সার্চ করা কোনো দাম বা স্পেসিফিকেশনে কাজ করার আগে উদ্ধৃত লিংকটা খুলুন, অথবা সার্চ চালু রেখে দ্বিতীয় একটা মডেলকে জিজ্ঞাসা করুন
প্রায়ই জিজ্ঞাসিত প্রশ্ন
Knowledge cutoff date মানে কী?
যে তারিখের পরে কোনো লেখা মডেলের প্রশিক্ষণ ডেটায় অন্তর্ভুক্ত হয়নি। সাহায্য ছাড়া মডেল যা কিছু জানে তা সেই তারিখের আগে থেকে আসে। ভেন্ডররা মডেল কার্ডে এটা প্রকাশ করে, আর কেউ কেউ দুটো প্রকাশ করে: একটা training data cutoff আর তার আগের একটা reliable knowledge cutoff, কারণ সাম্প্রতিক মাসগুলো প্রশিক্ষণের সময় ওয়েবে কমই কভার হয়ে থাকে।
ChatGPT-র knowledge cutoff কী?
এটা চ্যাটের পেছনের মডেলের ওপর নির্ভর করে, আর OpenAI প্রতিটা মডেল পাতায় প্রকাশ করে। GPT-4o-র cutoff অক্টোবর 2023, GPT-4.1-এর জুন 2024 আর GPT-5-এর সেপ্টেম্বর 2024, প্রতিটা 7 থেকে 10 মাস পরে রিলিজ হয়েছে। ব্রাউজিং চালু থাকলে, ChatGPT অন্তর্নিহিত cutoff যাই হোক না কেন লাইভ পাতা থেকে উত্তর দেয়।
মডেল কেন নিজের cutoff বলতে পারে না?
কারণ তার নিজের প্রশিক্ষণের কোনো রেকর্ড নেই। প্রশ্নটা করলে, সে তার প্রশিক্ষণ ডেটা থেকে সবচেয়ে সম্ভাব্য উত্তর তৈরি করে, যা প্রায়ই কোনো আগের মডেলকে বর্ণনা করে। Anthropic-এর প্রকাশিত সিস্টেম প্রম্পটগুলো Claude-কে তার cutoff তারিখ স্পষ্ট লেখায় হাতে ধরিয়ে দেয়, কারণ অন্যথায় মডেল এটা জানত না। মডেল কার্ডই একমাত্র নির্ভরযোগ্য উৎস।
একটা AI মডেল থেকে কীভাবে বর্তমান তথ্য পাব?
তাকে বর্তমান লেখা দিন। ওয়েব সার্চ প্রম্পটে লাইভ পাতা নিয়ে আসে; একটা নথি আপলোড সেখানে আপনার নিজের লেখা রাখে। যেভাবেই হোক, মডেল প্রশিক্ষণ ডেটার বদলে যা তাকে দেওয়া হয়েছে তা থেকে উত্তর দেয়। Whizi প্রতিটা মডেলের জন্য কোনো ক্রেডিট খরচ ছাড়াই ডিফল্টভাবে ওয়েব সার্চ চালু রাখে, তাই নিজস্ব কোনো রিট্রিভাল না থাকা মডেলও আজকের উৎস থেকে উত্তর দেয়।
একটা নতুন মডেল কি cutoff সমস্যা সমাধান করে?
এটা সীমারেখা সরায়, আর রিলিজের দিনও সেই রেখা মাসের পর মাস পিছিয়ে থাকে: GPT-5 তার cutoff-এর দশ মাস পরে লঞ্চ হয়েছিল, Claude 3.7 Sonnet চার মাস পরে। প্রতিটা মডেল তারপর সার্ভিসে বয়স বাড়ায়। পুরনো হওয়ার সমাধান সার্চ বা আপলোড; সক্ষমতার সমাধান একটা নতুন মডেল।