《护照法》没有规定单位和组织可以集中统一保管护照，单位要求所属工作人员上交统一保管就没有法律依据，就是违法行为。《出入境管理法》对出入境需要备案的国家机关工作人员有规定，但也只限于岗位，和职务无关，组织部门擅自根据任职情况扩大出入境备案范围，也没有法律依据，也是违法行为。

网友认为：

单位让你上交护照的时候，你完全可以拒绝上交，只不过是要被谈话、批评甚至撤职，被处分，你既然要当领导干部，就必须接受组织统一管理。有事外出的时候，向上级报告，组织还会批准交还你护照的，事情结束后，再交由组织统一管理护照。

扣押因私护照差不多相当于限制人身自由，所以，如果所在单位属于一般性单位，无涉密事项的话，单位无缘无故扣押护照肯定是违法的。如果你持有的是因公护照私自保管，你也是违法的。

统一管理护照，有利于统一管理领导干部和特殊岗位员工出国的随意性，现在很多国家互免签证，还有十年免签等政策，出国越来越容易，统一保管护照是在这方面进行有效管理，想出国的领导干部和特殊岗位员工，可以申请护照，然后才能出国。