বাবুগঞ্জে জমি নিয়ে বিরোধ, নির্মাণকাজে বাধা ও ভাঙচুরের অভিযোগ