如何保护宅屋使用权

我家祖屋于70年代被台风刮倒,在与表弟协商后置换部分土地用于建房(没有任何书面上的契约),两家分别在约定的土地上建成现有房子.至今房子老化,我家想在自家围墙范围内重新扩建宅屋,但表弟说庭院一部分是几十年前借给我家建房(该部分土地属于以前协商置换土地),现在表弟要收回土地的同时在对我家置换出去的土地只字不提. 与他协商毫无效果的情况下(表弟势力大), 本人想咨询:有没有相关的法律条文即土地使用者在长期的使用后,恃异议的个人在没有书面契约的条件下,法律判定现使用者将继续行使使用权. [em00]