求教三代以内旁系血亲回避问题

我在某单位做临时工，现该单位拟对临时工分批进行转正，但有一条规定，即对同单位内部员工存在三代以内旁系血亲关系者，按照回避制度不得被转正录用。我与该单位内一名员工存在这样的特殊关系：我们从血缘意义上说是堂兄弟，但他的父亲自小被别人收养，数十年来我们两家从未有过亲戚来往。单位领导说我不符合转正条件，但我认为所谓回避，就应从社会交往关系角度来看待，而不应从血缘上来简单推断。我的观点是否正确？我国法律和司法解释对此是否有明确的界定？