律师好,本人是一位来自农村的农民工,请帮帮我们吧[怀化]

律师好，本人是一位来自农村的农民工，四月份被人请到工地从事钢结构安装，于是我就帮忙叫了十多个农民工去做事，安装过程中，主结构出现大量偏差，移位，给后续安装带来了很大的难度，请我们去安装那个人看情况不对，亏了几万走了，而我们为了那到工资，选择继续做下去，上面的老板要我们签合同，我们没有签，只写了个承诺书，安原来合同计算，帮三老板做完，他也承认我们做完给我们工资结清，出错的地方给我们补工，工资保证发到位，三老板还把我们每个人都用上指纹考勤，眼看还有十多天做完了，他不给我们借钱了，我们出于无奈，就不做了，要求结账，可他们按合同办事，所有反工，都没有了，几十万的工资让他们算剩几万块了，还说，随便我去那个部门去要，他随时奉陪，要钱就几万块，请问这钱能要回来吗，我们是不是要负合同责任？请帮帮我们吧