建筑行业主要归 建设行政主管部门管理。根据《中华人民共和国建筑法》第六条，国务院建设行政主管部门对全国的建筑活动实施统一监督管理。此外，建筑工程的质量监督检验工作由建筑工程质量监督检验中心负责，而私企或个人的建筑项目则归地方管理。
具体到地方，建筑工程的管理部门可能是住宅与城乡建设厅或住房和城乡建设管理委员会。这些部门负责颁发建筑单位建设资质证，并管辖各市县的住房及建设局。住建局下设有安监站和质量检查站，负责检查和监督建筑工程产品质量和安全生产方面问题。
建筑施工安全的主管部门是住建部门的安全监督机构，安监局则负责统筹管理各行业的综合安全生产监督管理。
综上所述，建筑行业由建设行政主管部门及其下属机构进行管理和监督，具体责任部门可能因地区和项目性质而异。