রাঙামাটি সদর কৃষি কর্মকর্তার কাণ্ড, ঘরে ঢুকতে পারছেন না স্ত্রী-সন্তানেরা