二个人按揭供一套房子，产权证上写的是二个人的名字

二个人按揭供一套房子，产权证上写的是甲、乙二个人的名字，在供房二三年后，甲人退出供楼，提示的条件是：乙人给甲人三万块钱，产权归乙人所有。但甲人一直没有拿到三万块钱。这时，离甲乙二人达成一致已经过去了三年。现在乙人说：既然产权是一人一半，那么你也应该和我一起供楼才对，这三年是我自己供的楼，你必需拿出我供楼的一半的钱，我才能把三万块钱还给你。 请教律师，乙人的这个说法对吗？那么做为甲人，想尽快把这三万块钱要回来，应该怎么办？当时协议好的给甲人三万块钱是有字据的。