改变土地使用用途

你好！我于2000年买集体土地4亩左右，从事养殖业，后来因养殖业不顺利，改成做其他生意，而且在2002年在部分场地盖了一些房子，并过户销售出去了。现在生产队的队员向有关部门举报，而且相关部门也准备立案以改变土地使用用途为由受理，现在我想请问一下，土地部门能对我作出什么最坏的结果，如果是罚款和补缴土地使用金能有多少？还会不会有更坏的结果。谢谢！