入户门外移归的管理主要由地方城乡规划行政部门负责。这个部门一般负责城乡规划和土地利用方面的工作，包括建筑的规划、审批和管理等。对于入户门外的移归，这个部门会负责调查和审查申请，然后根据规划、法律法规和政策等要求，拟定方案并进行审批。

同时，该部门还要负责对入户门外移归后的房屋、土地等进行管理和监督，保障城市基础设施和土地资源的合理利用和城市发展的有序进行。