工资卡归属问题

我姑娘自小大脑发育不全，由我做主给姑娘成立一个家庭，可成家后姑爷好吃懒做，有班不上，至今18年无任何工资收入，于4年前又将其弟弟从河北接入家中，这4年中我姑娘不到700元的工资养活一家4口人，她的儿子已上高中一年，自从出生至今由我和老伴抚养，我们家去姑爷那说你们的生活本来不宽裕，你的儿子还靠我们抚养你怎么能让你弟弟长期在这住那？姑爷说：“只他弟弟给他养老”。而且他弟弟调戏我姑娘，后来我姑娘撵其他弟弟，我姑爷边将我姑娘送回娘家，之后姑爷又到相关部门索要我姑娘的工资卡，请问我姑娘没有在他那里生活，是否应该把工资卡给他？我用什么办法能合理地替我姑娘保管她的工资卡？以保证我姑娘及外孙儿的正常生活？