一个关于相对论中时间的问题

一个关于相对论中时间的问题相对论中说一个相对自己高速运动的物体,以自己为观察者,那么该物体上的时间要变慢.现在假如一个宇航员乘坐高速运动的宇宙飞船在太空飞行几年后回到地球上,以地球人为观察着来说,该宇航员的时间过得比地球慢了,那么该宇航员应该比地球人年轻；但是以该宇航员为观察者的话,地球人的时间变慢了,那么应该是该宇航员比地球人老了,这是怎么回事?为什么会出这个矛盾?