爷爷去世，谁才是财产继承人

我爷爷共有四个子女。老大（我爸爸），其他是三姐妹。 我奶奶已去世很多年了。 2004年5月份我大姑姑向我家里借钱20000元（其中有我爷爷15000元，我爸爸5000元）。我爸爸的5000元已经还了。 2004年11月底我爷爷去世。 听我姑姑说我爷爷有口头表示（三个姑姑可每人分5000元）剩余的财产虽我。而当时我爸爸和我妈妈都不在场。 2005年1月份我大姑姑说还钱，而是把钱分给了其他二个姑姑。（当时我妈妈也有在场）。 我还应该讨回这钱吗？