ভ্রান্ত-উদ্ধৃতি অডিট: জমা দেওয়ার আগে যাচাই

জেনারেটিভ AI টুল ব্যবহার করে খসড়া তৈরির পর জমা দেওয়ার আগে একটি ভ্রান্ত-উদ্ধৃতি (hallucinated citation) অডিট এখন সেই পার্থক্য, পরিষ্কার ডেস্ক স্ক্রিন বনাম গবেষণা-নির্ভরতা সংক্রান্ত একটি সতর্কবার্তা। এবং কেন বিষয়টি গুরুত্বপূর্ণ, তার পরিমাপও এখন নির্দিষ্টভাবে নির্ধারিত হয়েছে। কলাম্বিয়া টিমের গবেষক ম্যাক্সিম টোপাজ (Maxim Topaz) ২.৫ মিলিয়নটি বায়োমেডিক্যাল পেপার, যেগুলো PubMed Central-এ ইনডেক্স করা ছিল, সেগুলোর অডিট করে প্রকাশ করেছেন সেই বিষয়টি যা আমরা সবাই গোপনে ভয় করছিলাম। জেনারেটিভ AI টুলগুলো যখন গড় গবেষকের খসড়া তৈরির কর্মপ্রবাহের অংশ হয়ে উঠতে শুরু করে, ঠিক তখনই পিয়ার-রিভিউড বায়োমেডিক্যাল প্রিন্টে ঢুকে পড়া ভুয়া রেফারেন্সের পরিমাণ হঠাৎ করে বেড়েছে। ২০২৬ সালের প্রথম সাত সপ্তাহে প্রকাশিত PubMed-ইনডেক্সড ২৭৭টি পেপারের মধ্যে ১টিতে অন্তত একটি এমন রেফারেন্স উদ্ধৃত করা হয়েছে যা ওই চারটি ডেটাবেস, PubMed, Crossref, OpenAlex, অথবা Google Scholar, কোথাও খুঁজে পাওয়া যায় না। দুই বছর আগের হার ছিল ১-ইন-২,৮২৮। অর্থাৎ ভুয়া রেফারেন্স সাহিত্যতে ঢুকে পড়ার হার প্রায় ১২ গুণ বৃদ্ধি পেয়েছে; এবং সর্বাধিক উর্ধ্বগতি দেখা গেছে ঠিক সময়মতো ২০২৪ সালের মাঝামাঝি থেকেই।

টোপাজের অডিট আমাদের হাতে সবচেয়ে পরিষ্কার সংখ্যা, কিন্তু সেটিই একমাত্র নয়। ArXiv ঘোষণা করেছে, যেসব লেখক স্পষ্টভাবে AI-উৎপন্ন ত্রুটি (যার মধ্যে ভ্রান্ত উদ্ধৃতিও আছে) সহ পেপার পোস্ট করবেন, তাদের জন্য এক বছরের সাবমিশন নিষেধাজ্ঞা থাকবে। GPTZero-এর বিশ্লেষণে ৪,৮৪১টি NeurIPS ২০২৫-এ গৃহীত পেপার দেখিয়ে নিশ্চিতভাবে অন্তত ১০০টি ভ্রান্ত উদ্ধৃতি শনাক্ত করা হয়েছে, যা ৫৩টি পেপারে ছিল, এগুলো তিন থেকে পাঁচজন বিশেষজ্ঞ রিভিউয়ার দ্বারা যাচাই হওয়ার পর। ডিকিন ইউনিভার্সিটির একটি গবেষণায় GPT-4o দিয়ে তৈরি রেফারেন্সে দেখা গেছে, ৫৬ শতাংশ হয় ভুয়া অথবা ত্রুটিযুক্ত, এবং ওই ভুয়া কেসগুলোর ৬৪ শতাংশ এমন DOI-এর সাথে প্যাকেজ করা ছিল যেটি বাস্তব কিন্তু সম্পর্কহীন একটি পেপারের সাথে লিঙ্ক করত, যে ধরনটা ধরতে সবচেয়ে কঠিন।

ভালো খবর হলো, জমা দেওয়ার আগে একটি ভ্রান্ত-উদ্ধৃতি অডিট সাধারণত আপনার রেফারেন্স তালিকার আকার অনুযায়ী ২০ মিনিট থেকে ২ ঘণ্টার মধ্যে শেষ করা যায়, এবং সম্পাদক বা রিভিউয়ার দেখার আগেই প্রায় সব ধরনের এসব ত্রুটি ধরা পড়ে। এই পোস্টটি হলো সেই অডিট। আমরা আলোচনা করি ২০২৬ সালে ভ্রান্ত উদ্ধৃতিগুলো দেখতে কেমন, চারটি ডেটাবেসে যাচাইয়ের কর্মপ্রবাহ, ধাপে ধাপে জমা দেওয়ার আগে চেকলিস্ট, কাজ স্বয়ংক্রিয় করে এমন টুলগুলো, এবং ইতিমধ্যেই রিভিউয়ের অধীনে থাকা একটি ম্যানুস্ক্রিপটে ভ্রান্ত উদ্ধৃতি পেলে কী করবেন।

ভ্রান্ত-উদ্ধৃতি অডিট কী?

ভ্রান্ত-উদ্ধৃতি অডিট হলো জমা দেওয়ার আগের একটি যাচাই প্রক্রিয়া, যা আপনার ম্যানুস্ক্রিপ্টের প্রতিটি রেফারেন্সকে PubMed, Crossref, OpenAlex এবং Google Scholar-এর সাথে মিলিয়ে দেখে, যাতে সম্পাদক বা রিভিউয়ার দেখার আগেই জাল বা অসামঞ্জস্যপূর্ণ উদ্ধৃতি ধরা যায়। আপনার রেফারেন্স তালিকার আকার অনুযায়ী এটি সাধারণত ২০ মিনিট থেকে ২ ঘণ্টা সময় নেয়, এবং প্রায় সব ধরনের এই ত্রুটি ধরতে পারে। কারণ এটি গুরুত্বপূর্ণ: ২০২৬ সালের প্রথম সাত সপ্তাহে PubMed-ইনডেক্সড ২৭৭টি পেপারের মধ্যে ১টিতে ওই চারটি ডেটাবেসের কোথাও না থাকা অন্তত একটি রেফারেন্স ছিল, অর্থাৎ ২০২৩ সালের হারের (১-ইন-২,৮২৮) তুলনায় ১২ গুণ বৃদ্ধি।

কেন ভ্রান্ত উদ্ধৃতি এখন একটি স্ক্রিনিং সমস্যায় পরিণত হয়েছে

২০২৪ সালের দ্বিতীয়ার্ধের দিকে সম্পাদকরা তাদের টেকনিক্যাল স্ক্রিনে ভ্রান্ত রেফারেন্স দেখা শুরু করতে থাকেন। ২০২৬ সালের মাঝামাঝি সময়ে সব শীর্ষস্থানীয় চিকিৎসা ও লাইফ-সায়েন্স জার্নাল তাদের ইন-হাউস প্রি-রিভিউ পদ্ধতি বা পিয়ার রিভিউয়ারদের গাইডলাইনে রেফারেন্স-অস্তিত্ব যাচাই অন্তর্ভুক্ত করে। টোপাজের অডিট প্রকাশ করা The Lancet-এর চিঠিটি আংশিকভাবে জার্নালের নিজস্ব ইনটেক আরও শক্ত করার একটি জনসম্মত প্রতিশ্রুতিও।

ব্যবহারিকভাবে বিষয়টি গুরুত্বপূর্ণ, কারণ ভ্রান্ত উদ্ধৃতি এখন আর কেবল অবহেলার একটি ত্রুটি হিসেবে বিবেচিত হয় না। এটি গবেষণা-নির্ভরতার একটি সতর্ক সংকেত (integrity flag)। “লেখকেরা এক বছর ভুল করেছে” থেকে “লেখকেরা এই উৎসটি পড়েনি, কারণ এটি অস্তিত্বই নেই”, এই ব্যবধানটা ছোট, এবং সম্পাদকদের এখন তা তৈরি করতে (implement) প্রশিক্ষণ দেওয়া হচ্ছে। অধিকাংশ জার্নালে ৬০টি আইটেমের একটি তালিকায় একটি রেফারেন্স ভুল হলে ম্যানুস্ক্রিপ্ট ফিরে যেতে পারে; সবচেয়ে কঠোরগুলোর ক্ষেত্রে (The Lancet, BMJ, এবং Nature Portfolio-এর কয়েকটি শিরোনাম) এটি প্রতিষ্ঠানের গবেষণা-নির্ভরতা অফিসে রেফার করার ট্রিগার হতে পারে।

arXiv নীতিও একই কথাকে আরও তীক্ষ্ণভাবে বলে। ভ্রান্ত রেফারেন্সযুক্ত একটি পেপার সাবমিট করলে কোনো লেখক arXiv থেকে এক বছরের জন্য নিষিদ্ধ হতে পারেন। নিষেধাজ্ঞার পর প্রতিটি পরবর্তী arXiv সাবমিশনকে আগে একটি খ্যাতিমান স্থানে পিয়ার রিভিউ পার হতে হবে, তারপর arXiv তা গ্রহণ করবে। এটি একটি স্থায়ী খ্যাতিগত অসমতা, একটি মাত্র যাচাইবিহীন উদ্ধৃতির ভিত্তিতে। ভুয়া উদ্ধৃতির PubMed সমস্যা শুধু PubMed-এর সমস্যা নয়।

ভ্রান্ত উদ্ধৃতি বাস্তবে দেখতে কেমন

বেশিরভাগ লেখক ভ্রান্ত উদ্ধৃতি কল্পনা করেন সহজে ধরা যায় এমনভাবে: বিকৃত শিরোনাম, অস্তিত্বহীন জার্নালের নাম, অথবা ভবিষ্যৎ সেট করা একটি বছর। এগুলো আছে, এবং সমস্যার সবচেয়ে সহজ ৩০ শতাংশ অংশ এগুলো। বাকি কঠিন ৭০ শতাংশ দেখায় বাস্তব এবং দ্রুত ভিজ্যুয়াল চেক পাস করে।

আমরা চারটি পুনরাবৃত্ত ধরন দেখি।

ধরন ১: বাস্তব লেখক, বাস্তব জার্নাল, গ্রহণযোগ্য শিরোনাম, কিন্তু ওই পেপার নেই। মডেলটি প্রশিক্ষণ ডেটা থেকে এমনভাবে উদ্ধৃতি জড়ো করে যে কোন লেখক কোথায় প্রকাশ করেন এবং কোন টপিকে লেখেন, এ সম্পর্কে কী শেখানো হয়েছিল। আউটপুট একটি বাস্তব রেফারেন্সের মতো পড়ে। DOI থাকলে সেটি হয় রিজলভ করে না, নয়তো অন্য একটি ভিন্ন পেপারে রিজলভ করে।

ধরন ২: বাস্তব পেপার, কিন্তু ভুল লেখক বা ভুল বছর। মডেল জানত পেপারটি আছে, কিন্তু মেটাডেটার কোনো ফিল্ডের সাথে ভুল মিলিয়েছে। Google Scholar শিরোনাম সার্চ পাস করে, কিন্তু DOI লুকআপে ব্যর্থ হয়। উদ্ধৃত দাবি হয়তো বাস্তব পেপারেই আছে (কিন্তু অন্য লেখক বা বছরের অধীনে), এই কারণে এটাকে ধরতে অনেক সময় সবচেয়ে কঠিন লাগে।

ধরন ৩: বাস্তব DOI, কিন্তু সম্পর্কহীন পেপার। ডিকিন স্টাডি। মডেলটি একটি গ্রহণযোগ্য-দেখতে উদ্ধৃতি বানায় এবং একটি DOI যুক্ত করে, যা রিজলভ করে, কিন্তু সম্পূর্ণ ভিন্ন ধরনের কাজের দিকে। DOI যে বাস্তব, তা একটি ভিজ্যুয়াল চেক দেখাতে পারে; কিন্তু লিঙ্ক করা পেপারটি পড়লে তবেই সমস্যা বোঝা যায়। এটিই ৬৪ শতাংশের ধরন।

ধরন ৪: উদ্ধৃতির চারপাশে ‘কষ্টার্জিত বাক্যশৃঙ্খল’ তৈরি করা। Cabanac Problematic Paper Screener এমন ১৯,০০০+ পেপার চিহ্নিত করেছে যেগুলোতে প্যারাফ্রেজিং সফটওয়্যার দিয়ে তৈরি করা “tortured phrases” আছে, যেগুলো প্রায়ই বানানো সাইটেশনগুলোর চারপাশে গুচ্ছবদ্ধ থাকে। যুক্তরাষ্ট্রের জন্য “Joined Together States”, স্তন ক্যান্সারের জন্য “bosom peril”, আর কিডনি ব্যর্থতার জন্য “kidney disappointment”। উদ্ধৃতির আশপাশের গদ্য যদি প্যারাফ্রেজ-মিশিয়ে বানানো (paraphrase-laundered) মতো শোনায়, তাহলে উদ্ধৃতিটিও ভ্রান্ত হওয়ার সম্ভাবনা বেশি। প্যারাফ্রেজিং বিষয়ে আমাদের নোট, যা উদ্ধৃতি সংরক্ষণ করে, Pattern 4 তৈরি করে এমন টেকনিক্যাল গ্যাপটাই ব্যাখ্যা করে। Pattern 4, Pattern 1 থেকে 3, এর সাথে সম্পর্কযুক্ত; তাদের থেকে স্বাধীন নয়।

এই ধরনগুলোই কারণ যে কেবল একটি ডেটাবেস দিয়ে যাচাই করা যথেষ্ট নয়। শিরোনাম-নির্ভর Google Scholar লুকআপ Pattern 2 ও 3 মিস করে। কেবল DOI-নির্ভর Crossref লুকআপ Pattern 1 মিস করে। তাই চার-ডেটাবেস কর্মপ্রবাহ, যেখানে প্রতিটি ডেটাবেস ভিন্ন ধরনের ব্যর্থতা ধরতে পারে, এটি বিদ্যমান।

AI উদ্ধৃতি কীভাবে যাচাই করবেন: চার-ডেটাবেস কর্মপ্রবাহ

আমরা “ভ্রান্ত রেফারেন্স” বলতে এমন রেফারেন্সকে বুঝি যা PubMed, Crossref, OpenAlex বা Google Scholar, এই চারটির যেকোনোটিতেই পাওয়া যায় না। জমা দেওয়ার আগে আমাদের অডিটে আমরা এই চারটি উৎসের উপর নির্ভর করি, কারণ প্রতিটি তিনটির অন্যগুলোর ফাঁক পূরণ করে।

PubMed. বায়োমেডিক্যাল ও ক্লিনিক্যাল সাহিত্যে সেরা কভারেজ। যদি কোনো রেফারেন্সে PMID থাকে, তাহলে PMID লুকআপ ব্যবহার করুন। নাহলে শিরোনাম এবং প্রথম লেখকের শেষ নাম দিয়ে রেফারেন্সটি সার্চ করুন। Crossref যেগুলো গ্রহণ করতে পারে, সেসব অনেক “বাস্তব কিন্তু ভুল” উদ্ধৃতি PubMed প্রত্যাখ্যান করবে।

Crossref. সব ক্ষেত্র জুড়ে DOI-এর সেরা কভারেজ। এই doi.crossref.org লুকআপ ব্যবহার করে DOI দিয়ে রেফারেন্সটি খুঁজুন, অথবা তাদের পাবলিক API-তে api.crossref.org/works/[DOI] ব্যবহার করুন। কাজ না করলে, তা নিশ্চিতভাবেই ভ্রান্ত (hallucinated)। কাজ করলে শিরোনাম, লেখক এবং বছর মিলিয়ে দেখুন।

OpenAlex. সবচেয়ে বিস্তৃত কভারেজ, বিনামূল্যে, এবং এটি PubMed ও Crossref-এ কভার না হওয়া উদ্ধৃতি (মানবিক বিজ্ঞান, কম্পিউটার-সায়েন্স কনফারেন্স প্রসিডিংস, আঞ্চলিক জার্নাল) খুঁজে বের করে। শিরোনাম দিয়ে রেফারেন্সটি খুঁজুন এবং লেখকরা ঠিক আছেন কি না নিশ্চিত করুন। OpenAlex আরও কাজে দেয় কারণ এটি এমন উদ্ধৃতি সামনে আনে যেগুলো প্রি-প্রিন্ট হিসেবে আছে, কিন্তু এখনো DOI-যুক্ত প্রকাশনা হিসেবে ওঠেনি।

Google Scholar. শেষের দিকে ব্যবহার করুন, কারণ কভারেজ সবচেয়ে বিস্তৃত হলেও নির্ভুলতা (precision) সবচেয়ে কম। PubMed, Crossref, OpenAlex বা Google Scholar, এই চারটির কোনোটাতেই না থাকলে কার্যত এটি নিশ্চিতভাবেই ভ্রান্ত। কেবল Google Scholar-এ দেখা যায় কিন্তু কাঠামোবদ্ধ (structured) ডেটাবেসগুলোতে নেই, এমন রেফারেন্স সন্দেহজনক: এটি থাকতে পারে (যেমন ধূসর সাহিত্য, থিসিস, নন-DOI প্রসিডিংস), তবে জমা দেওয়ার আগে ম্যানুয়াল যাচাই প্রয়োজন।

ম্যানুয়ালি করলে প্রতি রেফারেন্সে আনুমানিক এক মিনিট লাগে। ৬০টি রেফারেন্সের একটি পেপার, মানে এক ঘণ্টার কাজ। ২০০টি রেফারেন্সের একটি সিস্টেমেটিক রিভিউ, আরও কাছাকাছি তিন ঘণ্টা। অডিটটা ক্লান্তিকর হলেও যান্ত্রিক (mechanical), তাই এটি অটোমেশনের স্বাভাবিক লক্ষ্য; পরের-but-one সেকশনে টুলগুলোর কথা আছে।

জমা দেওয়ার আগে অডিট: ধাপে ধাপে

খসড়া তৈরির সময়ে কোনো জেনারেটিভ AI টুলের আশেপাশে থাকা প্রতিটি ম্যানুস্ক্রিপ্টে আমরা যে পুনরাবৃত্তযোগ্য চেকলিস্ট ব্যবহার করি। আটটি ধাপ, যার কোনোটিতেই পেইড টুলের প্রয়োজন নেই।

১. রেফারেন্স তালিকাটি একটি সমতল (flat) ফরম্যাটে বের করুন। আপনার রেফারেন্স ম্যানেজার (Zotero, Mendeley, EndNote, Paperpile) থেকে BibTeX বা RIS হিসেবে এক্সপোর্ট করুন। আপনার পেপার যদি কোনো ম্যানেজার ছাড়াই Word-এ খসড়া করা হয়ে থাকে, তাহলে রেফারেন্স তালিকাটি একটি সাধারণ টেক্সট ফাইলে পেস্ট করুন। প্রতিটি এন্ট্রি নম্বর দিন। কোন কোন রেফারেন্স যাচাই করা হয়েছে তা ট্র্যাক করতে আপনার এই নম্বরিং লাগবে।

২. যার শিরোনাম আপনি চেনেন না, এমন যেকোনো রেফারেন্স চিহ্নিত করুন। আপনি যদি পেপারটি কল্পনাও করতে না পারেন, তাহলে প্রায় নিশ্চিতভাবেই আপনি সেটি পড়েননি। ভ্রান্ত রেফারেন্সের ঝুঁকি সবচেয়ে বেশি থাকে এখানেই। যতটা সম্ভব গভীরভাবে যাচাই করতে সেগুলো মার্ক করুন।

৩. প্রতিটি DOI রিজলভ করুন। প্রতিটি DOI কপি করে https://doi.org/[DOI] এ পেস্ট করুন। DOI রিজলভ না করলে, রেফারেন্সটি ভ্রান্ত। রিজলভ হলে, গন্তব্য পেপারের শিরোনাম ও লেখকদের আপনার উদ্ধৃতির সাথে তুলনা করুন। অমিলগুলো Pattern 3 ধরনের ভ্রান্তি।

৪. PubMed বা Crossref-এ প্রতিটি নন-DOI রেফারেন্স যাচাই করুন। শিরোনাম সার্চ + প্রথম লেখকের পদবি। পেপারটি থাকলে আপনার রেকর্ডের জন্য PMID বা DOI সংগ্রহ করুন। দুই ডেটাবেসের কোনোটাতেই না থাকলে, ধাপ ৫-এ এগোন।

৫. OpenAlex এবং Google Scholar-এ এসকেলেটেড রেফারেন্সগুলো ক্রস-চেক করুন। যদি Crossref এবং PubMed, দুটিতেই রেফারেন্সটি ব্যর্থ হয়, তাহলে OpenAlex এবং Google Scholar যাচাইই হবে সিদ্ধান্তমূলক (deciding) লুকআপ। চারটি ডেটাবেসেই ব্যর্থ হওয়া মানে আপনার কাছে প্রমাণ থাকে যে রেফারেন্সটি ভ্রান্ত। যদি কোনো রেফারেন্স কেবল Google Scholar-এ থাকে, তাহলে লিঙ্ক করা উৎসটি ম্যানুয়ালি দেখে নিন।

৬. প্রি-প্রিন্টের ক্ষেত্রে, প্রি-প্রিন্ট এবং যেকোনো প্রকাশিত সংস্করণ, দুটোই যাচাই করুন। ২০২৪ সালের মাঝামাঝি এবং পরের একটি সাধারণ ধরন: মডেল আসল একটি প্রি-প্রিন্ট উদ্ধৃত করতে পারে, কিন্তু একই কাজের একটি কাল্পনিক জার্নাল প্রকাশনা বানিয়ে বসায়। যে কোনো প্রি-প্রিন্ট রেফারেন্সের জন্য arXiv, bioRxiv, medRxiv এবং SSRN, সেগুলোতে বিশেষভাবে খুঁজে দেখুন।

৭. টেক্সটের দাবিটা সোর্সের সাথে মিলিয়ে স্পট-চেক করুন। আসল পেপারটি খুলে দেখুন, যে নির্দিষ্ট দাবিটির জন্য আপনি সেটিকে উদ্ধৃত করছেন, সেটিকে অন্তত ১০ শতাংশ রেফারেন্সের ক্ষেত্রে (অথবা সিস্টেমেটিক-রিভিউ কেস হলে সবগুলোতে) তা সমর্থন করে কি না। ডিকিন স্টাডির ৫৬ শতাংশ ত্রুটির হার অন্তর্ভুক্ত করে Pattern 2 কেস, যেখানে উদ্ধৃত পেপারটি আছে, কিন্তু দাবিকে সমর্থন করে না।

৮. অডিট নথিভুক্ত করুন। অডিট লগ সংরক্ষণ করুন (যেসব রেফারেন্স যাচাই করা হয়েছে, কোন কোন ডেটাবেসে, এবং কোন তারিখে)। জার্নাল যদি পিয়ার রিভিউয়ের সময় জিজ্ঞেস করে, এগুলো আপনার প্রমাণ। কোনো রিভিউয়ার যদি নির্দিষ্ট একটি উদ্ধৃতি নিয়ে আপত্তি তোলে, আপনি যাচাই ধাপ দেখাতে পারেন।

অডিট চালানোর খরচ দুই ঘণ্টা। এটি বাদ দিলে, ধরা পড়লে, কারিগরি-স্ক্রিন রিজেকশন থেকে শুরু করে arXiv নিষেধাজ্ঞা পর্যন্ত হতে পারে। অডিট চালান।

অডিট স্বয়ংক্রিয় করে এমন টুল

আপনি সব আটটি ধাপ ম্যানুয়ালি করতে পারেন। টুল ব্যবহার করলে দ্রুত হবে।

Crossref public API. বিনামূল্যে, সাইনআপ লাগে না। endpoint api.crossref.org/works/[DOI] canonical title, authors এবং year সহ JSON রিটার্ন করে। আপনার রেফারেন্স তালিকা ধরে এই endpoint-এ কল করে এমন ২০ লাইনের একটি Python স্ক্রিপ্ট প্রতি রেফারেন্সে কয়েক সেকেন্ডের মধ্যে Pattern 1 এবং 3 ধরতে পারে। এটি সর্বনিম্ন-ভারী ধরনের অটোমেশন, এবং সাধারণত ৬০-রেফারেন্সের একটি পেপারের জন্য যথেষ্ট।

Scite (scite.ai). রেফারেন্স যাচাই করে এবং রিপোর্ট করে, পরের পেপারগুলো কাজটিকে সমর্থন করে উদ্ধৃত করেছে নাকি বিরোধিতা করে। এটি অন্য টুলগুলোর চেয়ে Pattern 2 (বাস্তব পেপার, ভুল দাবি) ভালোভাবে ধরে, কারণ এটি আসল কনটেন্টের সাথে সম্পৃক্ত হয়। একটি ফ্রি টিয়ার আছে; তবে পুরো ইন্টিগ্রেশনের জন্য পেইড ভার্সন প্রয়োজন।

Problematic Paper Screener (Cabanac, Labbe, Magazinov). বিনামূল্যে, ওপেন, মূলত পোস্ট-পাবলিকেশন স্ক্রিনার হলেও এর ডিটেক্টর স্যুট Pattern 4-এর জন্য জমা দেওয়ার আগেও কাজে লাগে। dbrech.irit.fr/pls/apex/f?p=9999:1-এ সার্চ করুন। এটি কাজে লাগে নিশ্চিত করতে, আপনার উদ্ধৃতির আশপাশের গদ্য কি paraphrase-laundered হয়ে এমন জায়গায় পৌঁছেছে যেখানে সেটি paper-mill আউটপুটের মতো দেখায়।

রেফারেন্স ম্যানেজারে বিল্ট-ইন রেফারেন্স চেকার। যদি Zotero কোনো ভ্রান্ত রেফারেন্স দেখে, তাহলে এর "Find Available PDF" ফাংশন কাজ করবে না। মেটাডেটা পূরণ করার জন্য Mendeley-এর ফিচারও একই প্রভাব ফেলে। এটি উদ্দেশ্যপ্রণোদিত কোনো ভ্রান্তি-চেকার নয়, কিন্তু সাধারণভাবে আপনি যেভাবে ব্যবহার করেন, সেসময় সবচেয়ে সহজ সমস্যাগুলো শনাক্ত করতে এটি সাহায্য করে।

আমাদের proofreader। আমাদের AI proofreader চার-ডেটাবেস অডিটটি এক পাসে চালিয়ে কাজ করে, ভ্রান্ত এবং অসামঞ্জস্যপূর্ণ (mismatched) রেফারেন্সগুলো হাইলাইট করে, এবং এমন একটি পরিষ্কার লগ এক্সপোর্ট করে যেটি আপনি ম্যানুস্ক্রিপ্টের সাথে সংরক্ষণ করতে পারবেন। আমরা এই টুলটি আমাদের বিস্তৃত AI proofing টুলের স্যুটের অংশ হিসেবে দিচ্ছি, research papers–এর জন্য। এতে থাকে সংশ্লিষ্ট গ্রামার, citation-formatting, এবং ট্র্যাকড-চেঞ্জ প্রসেস, সব মিলিয়ে একটি পরিষ্কার রেফারেন্স অডিটের সাথে।

পূর্ণ প্রুফরিডের আগে আলাদা একটি যাচাইয়ের জন্য, আমাদের বিনামূল্যের AI citation checker ব্রাউজারের মধ্যেই কোনো সাইন-আপ ছাড়াই পেস্ট করা যেকোনো রেফারেন্স তালিকার ওপর Crossref, Semantic Scholar এবং অন্যান্য উন্মুক্ত রেজিস্ট্রির বিরুদ্ধে একই অস্তিত্ব যাচাই চালায়।

বেশিরভাগ সময়, Crossref API স্ক্রিপ্ট এবং একটি ম্যানুয়াল এসকেলেশন লিস্ট বেশিরভাগ লেখকের জন্য সমস্যার ৯০ শতাংশ ধরতে পারে। টুলগুলোর মূল্য আসে সিস্টেমেটিক রিভিউতে, বড় সংখ্যক সাবমিশন থাকা গবেষণা গ্রুপে, এবং এমন ক্ষেত্রে যেখানে একটি মাত্র মিস হওয়া ভ্রান্তির খরচ বড় (যেমন Lancet বা NEJM সাবমিশন, অথবা পূর্বের কোনো ফ্ল্যাগের পর arXiv-এ পুনরায় পোস্ট)।

ভ্রান্ত উদ্ধৃতি পেলে কী করবেন

আপনি একটিই পাবেন। আমাদের অভিজ্ঞতায়, LLM ছুঁয়ে যাওয়া প্রায় প্রতিটি রেফারেন্স তালিকায় কমপক্ষে একটি করে থাকে। আপনার ম্যানুস্ক্রিপ্ট কোন পর্যায়ে আছে, তার উপর নির্ভর করে আপনার কাছে দুইটি বিকল্প আছে।

জমা দেওয়ার আগে। সবচেয়ে সহজ কেস। উদ্ধৃতিটি সরিয়ে দিন, অথবা সেটি যে দাবিকে সত্যিই সমর্থন করে এমন একটি বাস্তব রেফারেন্স দিয়ে প্রতিস্থাপন করুন, অথবা আশেপাশের বাক্যটি এমনভাবে নতুন লিখুন যাতে সমর্থনহীন দাবিটি আর না থাকে। অডিট লগে পরিবর্তনটি নথিভুক্ত করুন।

পিয়ার রিভিউয়ের অধীনে। আপনি যখন নিশ্চিত হন যে এটি ভ্রান্ত, তখন যত দ্রুত সম্ভব লিখিতভাবে handling editor-কে জানান। সংশোধিত রেফারেন্স তালিকা এবং একটি ব্যাখ্যা দিন: আপনি কী পেয়েছেন, কীভাবে পেয়েছেন, বাকি রেফারেন্সগুলো যাচাই করতে কী করেছেন। যেসব লেখক নিজেরাই সংশোধন করে তাদের প্রতিক্রিয়ায় সম্পাদকরা সাধারণত রিভিউয়ারের হাতে ধরা পড়া লেখকদের তুলনায় অনেক ভালো সাড়া দেন।

গৃহীত কিন্তু এখনো প্রকাশিত নয়। উৎপাদন (production) সম্পাদককে এখনই যোগাযোগ করুন। বেশিরভাগ প্রকাশক প্রুফের পর্যায়ে একটি দেরি সংশোধন গ্রহণ করবে, যদি সেটি নিয়মিত এডিট হিসেবে না দিয়ে “integrity self-correction” হিসেবে উপস্থাপন করা হয়।

প্রকাশিত। জার্নালের সাথে যোগাযোগ করুন এবং একটি erratum চাইুন, অথবা গুরুতর ক্ষেত্রে corrigendum চান। যদি ভ্রান্ত উদ্ধৃতি পেপারে কোনো গুরুত্বপূর্ণ (substantive) দাবিকে সমর্থন করে, তাহলে সংশোধনটি দাবির নিজস্ব অংশ পর্যন্ত বিস্তৃত হতে হতে পারে। এই পথটি মানুষ সবচেয়ে বেশি এড়াতে চায়; এবং এটিই সেই পথ যেটি অডিট প্রতিরোধ করে।

আপনি যদি কোনো AI টুল ব্যবহার করে থাকেন যা রেফারেন্স তালিকায় প্রভাব ফেলেছে, যেমন paraphrasers বা citation generators, তাহলে আপনার manuscript-এ AI disclosure statement দিন। আপনি এটিও কভার লেটারে জানাতে পারেন যে আপনি একটি অডিট চালিয়ে নিজে সংশোধন করেছেন। এটি সতর্ক করার মতো কিছু শোনায় না, বরং পেশাদারই শোনায়।

প্রায়শই জিজ্ঞাসিত প্রশ্নাবলি

প্রশ্ন: ২০২৬ সালে ভ্রান্ত উদ্ধৃতি কতটা সাধারণ?

কলাম্বিয়ার বিশ্লেষণ (Topaz et al, Lancet 2026) দেখিয়েছে, ২০২৬ সালের প্রথম সাত সপ্তাহে প্রকাশিত PubMed-ইনডেক্সড ২৭৭টি পেপারের মধ্যে ১টির মধ্যে অন্তত একটি রেফারেন্স ছিল। অর্থাৎ ২০২৩ সালের হার (১-ইন-২,৮২৮) থেকে এটি ১২ গুণ বৃদ্ধি। প্রবণতা ঊর্ধ্বমুখী। কঠোর পিয়ার রিভিউ থাকা কনফারেন্সে GPTZero NeurIPS 2025 বিশ্লেষণে ৪,৮৪১টি গৃহীত পেপারের মধ্যে ৫৩টির মধ্যে অন্তত ১০০টি ভ্রান্ত উদ্ধৃতি পাওয়া গেছে, কনফারেন্সের প্রায় ১ শতাংশ।

প্রশ্ন: কেন ৬৪ শতাংশ DOI ধরনটি ধরতে সবচেয়ে কঠিন?

যখন কোনো LLM একটি রেফারেন্স ভ্রান্তভাবে তৈরি করে, তখন কখনো কখনো সেটি প্রশিক্ষণ ডেটা থেকে একটি বাস্তব DOI বসিয়ে দেয়, যেটি উদ্ধৃতিটির বদলে অন্য একটি পেপারের দিকে নির্দেশ করে। DOI রিজলভ করে, অন্য পেপারটি আছে, এবং দ্রুত ভিজ্যুয়াল চেক দেখে সব ঠিকঠাক মনে হয়। প্রকৃত সমস্যা বোঝা যায় কেবল তখনই যখন রেফারেন্স করা পেপারের লিঙ্কে ক্লিক করে দেখা হয়, উদ্ধৃতির শিরোনাম, লেখক, বা এমনকি কনটেন্ট, উদ্ধৃতিটির সাথে মেলে না। ডিকিন স্টাডি দেখায় যে GPT-4o দিয়ে তৈরি ভুয়া উদ্ধৃতিগুলোর ৬৪ শতাংশের ক্ষেত্রেই এটি সত্য ছিল। কেবল DOI রিজলভ হওয়া যথেষ্ট নয়, এটি নিশ্চিত করতে অতিরিক্ত যাচাই দরকার যে লিঙ্ক করা পেপারটি সত্যিই ওই উদ্ধৃতির সাথে সঙ্গতিপূর্ণ।

প্রশ্ন: ভ্রান্ত উদ্ধৃতির জন্য কি arXiv সত্যিই আমাকে এক বছরের জন্য নিষিদ্ধ করবে?

হ্যাঁ, যখন অবহেলা একেবারে স্পষ্ট। থমাস ডিটারিখ (Thomas Dietterich) মে ২০২৬ সালের arXiv নীতি ঘোষণা করেন, যা সেই কেসগুলো মোকাবিলার লক্ষ্য রাখে যেখানে লেখকেরা LLM আউটপুট না যাচাই করে কপি-পেস্ট করেন, ফলে ভ্রান্ত রেফারেন্স, চ্যাটবট প্লেসহোল্ডার টেক্সট পড়ে থাকে, অথবা ডেটা চলে আসে। arXiv স্পষ্ট করে বলেছে যে বাস্তবে সত্যিই বিতর্কিত বা সীমান্তবর্তী (borderline) কেসগুলো এই আওতার বাইরে। নিষেধাজ্ঞার মেয়াদ শেষ হলে, ভবিষ্যতের সব arXiv সাবমিশনকে arXiv পুনরায় গ্রহণ করার আগে প্রথমে একটি খ্যাতিমান স্থানে পিয়ার রিভিউ পার হতে হবে।

প্রশ্ন: আমি কি ChatGPT বা Claude দিয়ে শুধু আমার রেফারেন্স তালিকা চেক করলেই হবে?

না। যে মডেলটি ভ্রান্তভাবে রেফারেন্স বানিয়েছে, সেই একই মডেলটি ভ্রান্তভাবে যাচাইকরণও করে ফেলতে পারে। আমরা দেখেছি LLMগুলো আত্মবিশ্বাসের সাথে "confirm" করে যে বানানো DOIগুলো বৈধ। যাচাইটা হতে হবে বাহ্যিক কাঠামোবদ্ধ ডেটাবেসের (PubMed, Crossref, OpenAlex, Google Scholar) বিপরীতে, যেগুলোর কাছে অথরিটেটিভ মেটাডেটা থাকে, আরেকটি LLM-এর বিপরীতে নয়।

প্রশ্ন: যদি কোনো রেফারেন্স কেবল Google Scholar-এই থাকে?

যদি কোনো রেফারেন্স Google Scholar-এ দেখা যায় কিন্তু PubMed, Crossref, অথবা OpenAlex, কোনোটাতেই না থাকে, তাহলে সেটি নিশ্চিতভাবে ভ্রান্তের (confirmed-hallucinated) চেয়ে বেশি সন্দেহজনক। কিছু বাস্তব উৎস (যেমন একটি থিসিস, DOI ছাড়া কোনো কনফারেন্স প্রসিডিংস, একটি working paper, একটি আঞ্চলিক জার্নাল) Google Scholar-এ দেখা যেতে পারে কিন্তু কাঠামোবদ্ধ ডেটাবেসে কভারেজ নাও থাকতে পারে। লিঙ্ক করা উৎসটি ম্যানুয়ালি দেখে নিন। যদি আপনি পেপারটি খুলে দাবি যাচাই করতে পারেন, তাহলে রেফারেন্সটি বাস্তব কিন্তু কম ইনডেক্সড, এ অবস্থায় আত্মবিশ্বাসের সাথে উদ্ধৃত করুন। যদি উৎসটি খোলা না যায় বা লিঙ্কটি ভেঙে থাকে, তাহলে সেটিকে ভ্রান্ত ধরে সরিয়ে দিন বা প্রতিস্থাপন করুন।

জার্নালে জমার জন্য রেফারেন্স-চেকিং প্রুফরিডার

এক পাসে PubMed, Crossref, OpenAlex, এবং Google Scholar এর বিরুদ্ধে উদ্ভাবিত বা ভুল রেফারেন্স অডিট, আপনার রেকর্ডের জন্য ডাউনলোডযোগ্য ভেরিফিকেশন লগ সহ।