在我们家宅基地安装了变压器，但是他们要求我们承担移开的所有费用，合理吗

你好，电力公司十几年在未经我们同意的情况下，在我们家宅基地安装了变压器，现在周围已经成为密集的住宅区，变压器离就在我们的门边，相距不到2米，现在我们要求供电局移开变压器，但是他们要求我们承担移开的所有费用，合理吗？