我们该把承包的土地退出去吗

我们村很多人承包的土地到期了，村里又给大家伙集体续签，让我们承包，但是这次没有签合同，我们每年也都交承包费，后来村领导换了，新上任的村主任在村里进行楼房规划，把一步分承包地用来盖楼房，并强行没收了几家人的承包的土地（把他们种的农作物都用铲车铲了，那几家人怕村领导有雇用黑帮关系，没敢吭声），现在他又拿我们好几家承包的土地在村里搞竞标承包，也没跟我们商量，就要我们几家承包的土地退给他，我们都没同意（我们几家在承包地上种了果树，长了好几年，刚开始卖钱），现在村领导又把我们几家告上了法庭，但是给的传单是一家一个时间，不知是什么愿意。村里向我们这样承包土地的很多，情况也基本一样，但他为什么只让我们几家不承包了，实在不懂。 还有个问题，村主任在村里承包了一块地，期限承包了50年，他用那块地建工厂，也不知道合法不。