জমিদার যদুনাথ সাহা 1900 সালের দিকে মুন্সীগঞ্জ শ্রীনগর উপজেলার ভাগ্যকুল গ্রামে ভগ্গোকুল প্রাসাদ নির্মাণ করেন। যদুনাথ সাহা মূলত একজন ব্যবসায়ী ছিলেন এবং তিনি বরিশাল থেকে লবণ, সুপারি, শাড়ি ইত্যাদি পণ্য আমদানি করে মুর্শিদাবাদে রপ্তানি করতেন। দোতলা ভাগ্যকুল জমিদার বাড়িটি মানিকগঞ্জের বালিয়াটি জমিদার বাড়ির সাথে অসাধারণ সাদৃশ্য বহন করে। ভবনের সামনের অংশে 8টি কলাম রয়েছে, যা মূলত গ্রীক স্থাপত্যের বৈশিষ্ট্য নির্দেশ করে। মূল ভবনের ভেতরের দেয়ালে ময়ূর, সাপ এবং বিভিন্ন ফুল ও পাখির নকশা রয়েছে।
ভাগ্যকুল জমিদার বাড়ির দরজা-জানালা একই মাপের হওয়ার কারণে দরজা-জানালা বন্ধ থাকলে অনুমান করা বেশ কঠিন। মূল ভবনটি বাড়ির পুরো এলাকা ঘিরে তৈরি করা হয়েছে এবং এর মাঝখানে আঙ্গিনা অবস্থিত। বাড়ির প্রথম তলা থেকে দ্বিতীয় তলায় যাওয়ার জন্য কাঠের সিঁড়ি রয়েছে। যদুনাথ সাহা তার ৫ সন্তানের জন্য আলাদা ঘর তৈরি করেন। বাড়িগুলো স্থানীয় লোকজনের কাছে কোকিলপেয়ারী জমিদার বাড়ি, উকিল বাড়ি, জাজ বাড়ি এবং ভাগ্যকুল জমিদার বাড়ি নামে পরিচিত। এক বাড়ি থেকে অন্য বাড়ির দূরত্ব 40 থেকে 50 গজ। তবে বান্দুরায় ভাগ্যকুল জমিদার বাড়িটি বর্তমানে তুলনামূলক ভালো অবস্থায় রয়েছে।



