村委会可否处置五保户遗产？

我哥哥8年前作为村里的“五保户”住进村办敬老院。当时他留下3间房屋由我一家居住。前不久，我哥哥患病去世，村委会派人清理我哥哥的遗产时，让我一家搬出我哥的房屋，将房屋变卖后用来抵消他8年中的“五保”费。