যা যাচাই হয়
যাচাইকরণের পদ্ধতি
যে বৈশিষ্ট্য ঘোষণা করা হয় অথচ তাকে খণ্ডন করার উপায় দেওয়া হয় না, তা বৈশিষ্ট্য নয়, প্রতিশ্রুতি। এই পাতা বলে দেয় কী যাচাই করা হয়, কোন কোন নিয়ন্ত্রণে, আর বিভাগ কী প্রতিষ্ঠা করেছে বলে দাবি করে না।
তারিখের পরিমাপ, পুনরুৎপাদনযোগ্য।
1. কিছুই ঘোষণা করা হয় না, সবই দেখানো হয়
এই সাইট যে নিয়মে চলে তা সরল: যে দাবির সঙ্গে তাকে ভুল প্রমাণ করার উপায় আসে না, সেই দাবি এখানে থাকে না। নিয়মটি সবার আগে ব্যবস্থাটির নিজের নির্মাণেই খাটে। 200-রও বেশি স্বয়ংক্রিয় নিয়ন্ত্রণের একটি সমষ্টি এই নির্মাণের সঙ্গী, আর তা উৎপন্ন নির্গমনের ওপর ঘোষিত বৈশিষ্ট্যগুলো নিরবচ্ছিন্নভাবে যাচাই করে। এই পাতার সঙ্গের ছবিটি তারই একটি প্রাচীন রূপ দেখায়: নিজের হাত ছাড়া অন্য এক হাতে আবার পড়া আর পাশে টীকা লেখা একটি পাঠ।
এই নিয়ন্ত্রণগুলোর প্রমাণমূল্য থাকত না, যদি তারা কেবল সমর্থন করতেই জানত। তাই তাদের সঙ্গে থাকে নেতিবাচক নিয়ন্ত্রণ: যাচাইকারীর সামনে ইচ্ছে করেই এমন উপকরণ রাখা হয়, যা তার প্রত্যাখ্যান করার কথা, আর দেখা হয় সে তা প্রত্যাখ্যান করে কি না। 28 আগস্ট 2026 তারিখের পরিমাপে একটি নির্গমনে ইচ্ছাকৃতভাবে ঢোকানো বিকৃত মান ঠিকই ধরা পড়েছে। যে যাচাইকারী ব্যর্থ হতে জানে না, সে কিছুই যাচাই করে না; ব্যর্থ হতে পারার এই ক্ষমতাই বাকি সময়ে কোনো ভুল না পাওয়াকে পাঠযোগ্য করে তোলে।
দুটি বৈশিষ্ট্য অগ্রাধিকার নিয়ে এই নিয়মের অধীন। প্রথমে তথ্যের সংরক্ষণ: উৎপন্ন প্রতিটি নথি যে তথ্যসমষ্টি থেকে এসেছে তার বিপরীতে যন্ত্র দিয়ে আবার যাচাই করা হয়, কিছু যোগ না করে, কিছু না হারিয়ে। এরপর ভাষার মধ্যে তথ্যগত সমতুল্যতা: একই বিষয়ের ভিন্ন ভিন্ন ভাষার সংস্করণগুলো যাচাই করে দেখা হয় যে সেগুলো ঠিক একই তথ্য বহন করে; কম বলা অনুমোদিত, অন্য কিছু বলা নয়। সংশ্লিষ্ট পরিমাপ রয়েছে ফলাফল ও পরিমাপ পাতায়।
বৈশিষ্ট্য P1
নির্ধারণবাদী ও পুনরুৎপাদনযোগ্য উৎপাদন
অভিন্ন প্রদত্তে ব্যবস্থাটি বাইট পর্যন্ত অভিন্ন নির্গমন উৎপাদন করে: দুটি চালনা একই পাঠ ফিরিয়ে দেয়।
অবস্থা: 28 আগস্ট 2026 তারিখের পরিমাপে বাইরে থেকে পর্যবেক্ষিত, দুটি পৃথক প্রক্রিয়ার মধ্যে ছাপ মিলিয়ে: 147টি পুনরাবৃত্ত উৎপাদন, 147টি অভিন্ন SHA-256 ছাপ।
রেখাচিত্র 1. যাচাইয়ের চুক্তি, P1 থেকে P3 বৈশিষ্ট্য যেমনটি তা ঘোষণা করে। উৎপাদন-প্রক্রিয়ার বর্ণনা এখানে নেই: কেবল তার চুক্তিটুকুই আছে, অর্থাৎ স্থির করা প্রদত্ত, নির্ধারণবাদী নির্গমন, যান্ত্রিক পুনর্যাচাই, আর এমন একটি যাচাইকারী যে ব্যর্থ হতে জানে।
2. বৈশিষ্ট্যের নিবন্ধ
এই সাইটের পাতাগুলো ব্যবস্থার বৈশিষ্ট্যগুলোকে একটি স্থিতিশীল শনাক্তকারী দিয়ে নির্দেশ করে। প্রতিটির অবস্থা, অর্থাৎ অভীষ্ট, পর্যবেক্ষিত বা যাচাইকৃত, যে বাক্স তাকে উদ্ধৃত করে সেটিই বহন করে, তার পরিমাপের তারিখসহ।
- P1. নির্ধারণবাদী ও পুনরুৎপাদনযোগ্য উৎপাদন: অভিন্ন প্রদত্তে বাইট পর্যন্ত অভিন্ন নির্গমন।
- P2. উৎপাদনের মুহূর্তে কোনো ভাষা-মডেল নয়, কোনো নেটওয়ার্ক-সংযোগও নয়।
- P3. তথ্যের সংরক্ষণ: উৎপন্ন প্রতিটি নথি তার প্রদত্ত তথ্যের বিপরীতে যন্ত্র দিয়ে আবার যাচাই করা হয়, কিছু যোগ না করে, কিছু না হারিয়ে।
- P4. ভাষার মধ্যে তথ্যগত সমতুল্যতা: একই বিষয়ের সংস্করণগুলো ঠিক একই তথ্য বহন করে।
- P5. সৎ বর্জন: কম বলা অনুমোদিত, অন্য কিছু বলা নয়, আর নীরবতাগুলো গোনা হয়।
- P6. মাপা পঠনযোগ্যতা: পাঠ-কাঠিন্য মাপা হয়, আর তথ্য অপরিবর্তিত রেখে অল্পবয়সী পাঠকের জন্য একটি রূপ থাকে।
- P7. সীমাবদ্ধ শিক্ষণসহায়তা: উত্তর কেবল বিষয়ের তথ্যপত্র থেকেই, আর মূল্যায়নের রায় যুক্তিসহ।
- P8. সন্ধানযোগ্যতা: কোনো নথির প্রতিটি বক্তব্য একটি উন্মুক্ত উৎস-শনাক্তকারীর সঙ্গে (উইকিডেটা শনাক্তকারী) যুক্ত করা যায়, যা পাঠক নিজেই দেখে নিতে পারেন।
3. স্বাধীন বাহ্যিক তথ্যসূত্র
যে ব্যবস্থা কেবল নিজের যন্ত্র দিয়েই নিজেকে পরীক্ষা করে, সে কেবল নিজের অভ্যন্তরীণ সংগতিই প্রতিষ্ঠা করে। তাই বিভাগের পরিমাপ স্বাধীন ও উন্মুক্ত ভাষাতাত্ত্বিক তথ্যসূত্রের মুখোমুখি রাখা হয়, অর্থাৎ শব্দভাণ্ডার ও তুলনামূলক ভিত্তির, যেগুলোর বিভাগ না রচয়িতা না পরিচালক, আর তাই যেগুলোকে সে নিজের ফলাফলের সঙ্গে মিলিয়ে বদলে নিতে পারে না।
এই পাতা যা দাবি করে তা সেখানেই থামে, যেখানে ব্যবস্থার অভ্যন্তরীণ কার্যপ্রণালী শুরু হয়: মুখোমুখি করাটা ঘটে, তা এমন উপকরণের ওপর ঘটে যা বিভাগের নিয়ন্ত্রণে নেই, আর এই বাহ্যিকতাই তাকে তার মূল্য দেয়। ব্যবস্থার ভেতরে তার ব্যবহারের বিশদ কোনো উন্মুক্ত পাতার বিষয় নয়।
4. বৈজ্ঞানিক অবস্থান
সাম্প্রতিক গবেষণা-সাহিত্য প্রতিষ্ঠা করে যে ক্রমাঙ্কিত সম্ভাব্যতাভিত্তিক উৎপাদক বিরল তথ্যের ক্ষেত্রে মনগড়া বিবৃতির অনুপস্থিতির নিশ্চয়তা দিতে পারে না[1][2][3], যদিও কোনো কোনো কাঠামোয় মনগড়া বিবৃতি পরিসংখ্যানগতভাবে নগণ্য করে তোলা সম্ভব[4]। কর্মসূচি এভাবে আঁকা বিকল্পের অন্য শাখাটি অনুসন্ধান করে: এমন ব্যবস্থা, যা একটি সীমিত তথ্যক্ষেত্রে গঠনগতভাবেই তথ্যের সংরক্ষণ নিশ্চিত করে, সঙ্গে থাকে যান্ত্রিক যাচাই।
এই অবস্থান সাবধানে দাঁড়িয়ে আছে। বিভাগের আনুষ্ঠানিক ফলাফল প্রকাশের প্রস্তুতিতে, আর এই সাইট কোনো উপপাদ্য, কোনো প্রমাণ বা অগ্রাধিকারের কোনো দাবি প্রকাশ করে না: এটি বৈশিষ্ট্য, তারিখযুক্ত পরিমাপ আর একটি কর্মসূচি ঘোষণা করে। যা সমর্থন করা হচ্ছে তা এক বাক্যেই ধরা যায়:
প্রায়ই সঠিক মানে নিশ্চিত নয়: দুই ধারার মধ্যে পার্থক্য মাত্রার নয়, প্রকৃতির।
5. লাইসেন্স ও উন্মুক্ততা
ব্যবস্থার উৎপন্ন বিষয়বস্তু CC BY 4.0 লাইসেন্সে প্রকাশিত: সেগুলো কপি করা, অনুবাদ করা, ছাপা আর আবার বিতরণ করা যায়, একটিমাত্র শর্তে, ODERSA-র নাম উল্লেখ করে। এই লাইসেন্স কোনো বাড়তি সংযোজন নয়, এটি পদ্ধতিরই একটি শর্ত: যে বিষয়বস্তু না নেওয়া যায় না পরীক্ষা করা যায়, তা যাচাই হয় না।
প্রদর্শনের একটি উন্মুক্ত সংকলন প্রস্তুতিতে রয়েছে, আনুষ্ঠানিক প্রকাশনাগুলোও তাই। কোনোটির জন্যই কোনো তারিখ ঘোষণা করা হয়নি: বিভাগ কম ঘোষণা করে আর যা যাচাই হয় তা প্রকাশ করাই পছন্দ করে। ততক্ষণ প্রদর্শন অসম্পাদিত নির্গমন পড়তে দেয়, আর ফলাফল ও পরিমাপ পাতা তার সঙ্গের পরিমাপগুলো দেয়।
প্রশ্নোত্তর
6. সরাসরি প্রশ্ন
বড় ভাষা-মডেল কেন ব্যবহার করা হয় না?
কারণ অভীষ্ট প্রয়োগটি শিক্ষা, আর শিক্ষা সম্ভাব্যতা নয়, নিশ্চয়তা দাবি করে। সাম্প্রতিক গবেষণা-সাহিত্য প্রতিষ্ঠা করে যে ক্রমাঙ্কিত সম্ভাব্যতাভিত্তিক একটি উৎপাদক বিরল তথ্যের ক্ষেত্রে মিথ্যা বিবৃতির অনুপস্থিতির নিশ্চয়তা দিতে পারে না[1][2][3]; সে তা পরিসংখ্যানগতভাবে বিরল করে তুলতে পারে[4], যা নিশ্চয়তার সমান নয়। কর্মসূচি অন্য শাখাটি অধ্যয়ন করে: এমন নির্ধারণবাদী ব্যবস্থা, যার প্রতিটি নথি তার প্রদত্ত তথ্যের বিপরীতে যান্ত্রিকভাবে আবার যাচাই করা হয়। “প্রায়ই সঠিক” আর “নিশ্চিত” এক নয়; পার্থক্যটি মাত্রার নয়, প্রকৃতির।
এই সাইট যা দাবি করে তা কীভাবে যাচাই করবেন?
প্রতিটি সংখ্যা তার পরিমাপের তারিখ আর পদ্ধতি বহন করে; পরিমাপগুলো ব্যবস্থার বর্তমান অবস্থার ওপর একটিমাত্র নির্দেশে আবার নেওয়া যায়। প্রদর্শনগুলো তারিখযুক্ত ও অসম্পাদিত নির্গমন, ত্রুটিসমেত। প্রাতিষ্ঠানিক সংযুক্তি যাচাই করা যায় এই সাইটকে সংস্থার দাপ্তরিক তথ্যের সঙ্গে মিলিয়ে। আনুষ্ঠানিক ফলাফল তাদের যাচাই-উপকরণসহ প্রকাশনার বিষয় হবে।
“সৎ বর্জন” মানে কী?
কোনো ভাষা বা কোনো তথ্যপত্র যখন একটি তথ্য সঠিকভাবে বলতে দেয় না, ব্যবস্থাটি তা আন্দাজ করার বদলে সেই তথ্যের বিষয়ে নীরব থাকে। কম বলা অনুমোদিত; অন্য কিছু বলা নয়। বর্জনগুলো গোনা হয় আর ফলাফলের সঙ্গেই প্রকাশ করা হয়; পরিমাপের সারণিতে তাদের জন্য একটি স্তম্ভ রয়েছে।
কিছু ভাষা এত কম উৎপাদন করে কেন?
1,000 ভাষার মধ্যে সমতা আচরণের সমতা, প্রাচুর্যের সমতা নয়: উপলব্ধ উপকরণ ভাষা ও ক্ষেত্র অনুযায়ী বদলায়, আর সেই তারতম্য ঢেকে রাখার বদলে মাপা হয়। আজ পর্যন্ত সবচেয়ে কম ব্যাপ্ত ক্ষেত্রটি ঐতিহাসিক ব্যক্তিত্বের (1,000 ভাষার মধ্যে 132টি সেখানে একটি নথি উৎপাদন করে); সেটিও সেরাগুলোর মতোই প্রকাশ করা হয়।
প্রকাশের আগে পাঠগুলো কি মানুষ আবার পড়ে দেখে?
এই সাইটের প্রদর্শনের নির্গমন ব্যবস্থাটি যেমন উৎপাদন করে ঠিক তেমনভাবেই প্রকাশিত, কোনো সম্পাদনা ছাড়াই, তাদের আনাড়িপনাসমেত। এটি স্বচ্ছতার একটি বাছাই: হাতে শুধরে নেওয়া একটি সংকলন কিছুই প্রমাণ করত না। ব্যবস্থাটির নিজের যাচাই যান্ত্রিক: স্বয়ংক্রিয় নিয়ন্ত্রণ, নেতিবাচক নিয়ন্ত্রণ, আর স্বাধীন ও উন্মুক্ত ভাষাতাত্ত্বিক তথ্যসূত্রের সঙ্গে মুখোমুখি করা।
এই কর্মসূচিতে কারা কাজ করেন, আর কোন সম্পদ নিয়ে?
ODERSA Research হলো ODERSA-র গবেষণা বিভাগ, 1901 সালের ফরাসি আইনের অধীন একটি অলাভজনক অ্যাসোসিয়েশন, যেখানে কোনো বেতনভুক কর্মী নেই, আর যে তার বিষয়বস্তু CC BY 4.0 লাইসেন্সে প্রকাশ করে, কোনো বিজ্ঞাপন ছাড়াই আর কোনো তথ্য সংগ্রহ ছাড়াই। গবেষণা পরিচালনার দায়িত্বে রয়েছেন Mael Garbe। যোগাযোগ: research@odersa.org।
প্রকাশনাগুলো কোথায়?
প্রস্তুতিতে। সাইট আগে তা-ই প্রকাশ করে যা আমাদের কথায় বিশ্বাস না করেই যাচাই করা যায়: বৈশিষ্ট্য, তারিখযুক্ত পরিমাপ, প্রদর্শন। আনুষ্ঠানিক বিবৃতি আর তাদের প্রমাণ বৈজ্ঞানিক প্রকাশনার পথ ধরে আসবে।
7. তথ্যসূত্র
- A. T. Kalai, S. S. Vempala, “Calibrated Language Models Must Hallucinate”, STOC 2024 (arXiv:2311.14648). ফিরুন
- A. T. Kalai, O. Nachum, S. S. Vempala, E. Zhang, “Why Language Models Hallucinate”, 2025. ফিরুন
- Z. Xu, S. Jain, M. Kankanhalli, “Hallucination is Inevitable: An Innate Limitation of Large Language Models”, 2024 (arXiv:2401.11817). ফিরুন
- Suzuki et al., 2025 (arXiv:2502.12187), অর্থাৎ কোনো কোনো কাঠামোয় মনগড়া বিবৃতি পরিসংখ্যানগতভাবে নগণ্য করে তোলা সম্ভব। ফিরুন
এরপর যা পড়বেন
- ফলাফল ও পরিমাপ, অর্থাৎ এই পদ্ধতি যে পরিমাপগুলোকে ঘিরে রাখে, বৈধতার প্রতি হুমকিসহ।
- প্রদর্শন, অর্থাৎ অসম্পাদিত নির্গমন, আবার পড়ার জন্য আর তুলনা ব্যর্থ হলে খণ্ডন করার জন্য।
- গবেষণা নোট, অর্থাৎ বিভাগের নোট, যেসব চিত্রের আরও জায়গা দরকার তাদের জন্য।