ইনোভিশন কনসাল্টিং এর ৩য় রাউন্ডের জরিপের ফলাফল (যেটি গতকাল প্রকাশ করা হয়েছে) কেন অ্যাকাডেমিক্যালি পদ্ধতিগতভাবে দুর্বল এবং আগের দুই রাউন্ডের তুলনায় এ রাউন্ডের জরিপের ফলাফল কেন গ্রহনযোগ্য নয় এ বিষয়গুলো নিয়ে আলাপ করবো এ লেখায়।
ইনোভিশন তিন রাউন্ড জরিপের ফলাফল প্রকাশ করেছে। প্রথম দুই রাউন্ডে ইনোভিশন মেথোডোলজিক্যালি চমৎকার সার্ভে করেছে। সেই ফলাফলে সর্বশেষ জাতীয় পর্যায়ে বিএনপি ও জামায়াতের পার্থক্য ছিলো ৫ শতাংশের মতো। এর মধ্যে দুটো গুরুত্বপূর্ণ ঘটনা ঘটেছে- খালেদা জিয়ার ইন্তেকাল ও তারেক রহমানের দেশে ফিরে বিএনপি চেয়ারম্যানের দায়িত্ব গ্রহন, জামায়াত এনসিপিসহ একটি বৃহত্তর রাজনৈতিক জোট গঠন। এ ঘটনাগুলোর প্রভাবে মানুষের মতামতে উভয় দিকেই কিছু পরিবর্তন আসা অস্বাভাবিক নয়।
এখন আমি অ্যাকাডেমিক পার্স্পেক্টিভ থেকে আলাপ করবো কেন ইনোভিশনের ৩য় রাউন্ডের জরিপ মেথোডোলজিক্যালি খুবই দুর্বল এবং এই ফলাফল তার আগের দুই রাউন্ডের মতো গ্রহনযোগ্য নয়।
১) ইনোভিশনের এই সার্ভেটা করা হয়েছে তাদের আগের দুই সার্ভেতে যারা অংশগ্রহন করেছিলো তাদেরকে ফোন করার মাধ্যমে। এটা একটা প্যানেল সার্ভে, অর্থ্যাৎ একই ব্যক্তিদেরই পূনরায় সার্ভে করা হয়েছে। এ পর্যন্ত কোন অসুবিধা নেই।
আগের দুই সার্ভের প্রায় ২০ হাজার অংশগ্রহনকারী থেকে প্রায় ১৫ হাজার জনকে ফোন কল দিয়ে ৫ হাজার অংশগ্রহনকারীকে পাওয়া গেছে যারা এ সার্ভেতে মতামত দিয়েছেন। যত জনকে কল দেওয়া হয়েছে তার এক-তৃতীয়াংশ রেস্পন্স করেছে।
এ ছাড়াও এখানে সম্ভাবনা রয়েছে যে প্রথম ও দ্বিতীয় রাউন্ডে অংশগ্রহনের সময় কেউ কেউ ফোন নাম্বার শেয়ার না করে থাকতে পারেন।
২) এই প্যানেল সার্ভেতে (৩য় রাউন্ড) চার লেয়ারে অংশগ্রহনকারীরা বাদ পড়ে থাকতে পারে।
এক- আগের সার্ভেতে ফোন নাম্বার শেয়ার না করে থাকলে;
দুই- এ রাউন্ডে ফোন নাম্বার বন্ধ থাকলে বা নাম্বার ভুল এন্ট্রি হয়ে থাকলে বা মাল্টিপল ফোন নাম্বারের যেকোন একটি নাম্বার শেয়ার করে থাকলে যা সে এখন আর ব্যবহার করছে না;
তিন- কল না ধরলে;
চার- কল ধরলেও মতামত দিতে অস্বীকৃতি জানালে।
এসব কারণেই ২০ হাজার থেকে ১৫ হাজারকে কল করে ৫ হাজার রেস্পন্স এসেছে।
৩) কথা হচ্ছে স্যাম্পল থেকে কিছু মানুষ বাদ পড়লে সমস্যা কি? ইনোভিশন তো তার টার্গেট মতো ৫ হাজার স্যাম্পল পেয়েছে।
সমস্যা #১: অ্যাট্রিশান রেইট বা আমার অরিজিনাল স্যাম্পলের কত শতাংশকে পূনরায় সার্ভে করতে পারলাম। প্যানেল সার্ভেতে এটা একটা গুরুত্বপূর্ণ ইস্যু।
সাধারণত ৫-১০% অ্যাট্রিশান রেইটকে নরমাল ধরা হয়। কোন সার্ভেতে যদি অ্যাট্রিশান রেইট প্রায় ৪০% হয়, তাহলে সেই সার্ভের রেজাল্টের "ক্রেডিবিলিটি বা বিশ্বাসযোগ্যতা মারাত্মকভাবে দূর্বল" মনে করা হয়।
যদি ৫০%+ অ্যাট্রিশান হয় সেটাকে আর রিপ্রেজেন্টেটিভ জরিপ হিসেবে ধরা হয় না।
ইলেকশান সার্ভের মতো সেনসিটিভ সার্ভের ক্ষেত্রে ২০-২৫% অ্যাট্রিশান রেইট হলেই সেটা একটা রেড-ফ্লাগ।
ইনোভিশনের এই সার্ভেতে অ্যাট্রিশান রেইট অলমোস্ট ৭৫% (অরিজিনাল ২০ হাজার স্যাম্পল থেকে ৫ হাজার)। আর যদি ফোন কলের ভিত্তিতে নন-রেস্পন্স ধরি তাও ১৫ হাজার কল থেকে রেস্পন্স ৫ হাজার; মানে ৬৬-৬৭% অ্যাট্রিশান। যা একটা চুড়ান্ত পর্যায়ের রেড-ফ্লাগ এবং এই ৩য় রাউন্ডের জরিপের ফলাফলকে ক্রেডিবল কোন ফলাফল বলার উপায় থাকে না।
হয়তো ফান্ডিং, সময়, ও অন্যান্য সীমাবদ্ধতার কারণে ইনোভিশন এরকম সার্ভে করেছে অথবা কোর টিম মেথোডোলজিক্যাল এই বিষয়গুলোকে সিরিয়াসলি কন্সিডার করে নি।
সমস্যা #২: অ্যাট্রিশান হলে কী সমস্যা হয়? ৫-১০% অ্যাট্রিশান রেইট হলেও রেজাল্ট বায়াস হতে পারে যদি না সেই অ্যাট্রিশান বা বাদ পড়া স্যাম্পলটা র্যান্ডমলি বাদ পড়ে থাকে। র্যান্ডমলি বাদ পড়া মানে কোন বিশেষ বৈশিষ্ট্যের ভিত্তিতে না। কিন্তু সেই ৫-১০% যদি বিশেষ গ্রুপ বা বৈশিষ্ট্যের ভিত্তিতে বাদ পড়ে তাহলে রেজাল্ট ক্রেডিবল থাকবে না।
ধরুন- আপনি পাহাড়ী ও বাংগালী এরিয়া থেকে একটা স্যাম্পল নিয়েছেন। পরবর্তী রাউন্ডে ১০% অংশগ্রহনকারী বাদ পড়েছে, এবং তারা সবাই পাহাড়ী জনগোষ্ঠী থেকে বাদ পড়েছে। তাহলে এই রেজাল্ট বায়াস আসবে কারণ বাদ পড়ারা একই গ্রুপ থেকে বাদ পড়েছে। এটা একটা অ্যাট্রিশান বায়াস বা সিলেক্টিভ/ডিফারেনশিয়াল অ্যাট্রিশান বায়াস। কিন্তু যদি পাহাড়ী, বাংগালী দুই গ্রুপ থেকেই কিছু র্যান্ডম মানুষ বাদ পড়তো (কোন বিশেষ বৈশিষ্ট্যের বা গ্রুপের না), তাহলে অ্যাট্রিশানের পরেও যে স্যাম্পল আমরা পেতাম তা সঠিক বা রিপ্রেজেন্টিটিভ ফলাফল দিতে পারতো।
ইনোভিশনের সার্ভের অ্যাট্রিশান রেইট হচ্ছে অলমোস্ট ৭৫%। এ কারণে এ ফলাফল গ্রহন করবার মতো না।
সমস্যা #৩: ফোন সার্ভে আরেকটু সেনসিটিভ। একজন মানুষ ৬ মাস বা এক বছর আগে কোথাও জরিপে অংশ নিয়েছে এটা তার মনে নাও থাকতে পারে। বিশেষ করে অংশগ্রহন করলেও কোন প্রতিষ্ঠানের জরিপ ছিলো সেটা তার জানার সম্ভাবনা খুবই কম।
কেউ যখন ফোন করে তার রাজনৈতিক পছন্দ অপছন্দ জানতে চাইবে, সেখানে তার সত্য লুকানোর পসিবিলিটি অনেক বেশি। বিশেষ করে রাজনৈতিক সহিংসতা বা টেনশান যখন বেশি থাকে।
এ ফোন কলটা কে করেছে, তার মতলব কি, আমি কোন বিপদে পড়তে পারি কি না এরকম নানান শংকা থাকে। যেটা সরাসরি কোন গবেষক গিয়ে ইন্টার্ভিউ করলে কিছুটা কম থাকবে।
এই রাউন্ডের ফলাফলে সেটাও একটা সিরিয়াস সীমাবদ্ধতা।
ইনোভিশনের প্রচেষ্টাকে আমি স্বাগত জানাই। এবং আগের দুই রাউন্ডের সুন্দর সার্ভের জন্য অ্যাপ্রিশিয়েট করি। কিন্তু এ রাউন্ডের সার্ভের রেজাল্ট গ্রহনযোগ্য নয় মেথোডোলজিক্যাল ফ্লড থাকার কারণে।
ডঃ শিব্বির আহমদ
