政府在无障碍环境建设中的责任主要是：组织编制无障碍环境建设发展规划并组织实施；编制无障碍环境建设发展规划时应当征求残疾人组织等社会组织的意见；对城镇已建成的不符合无障碍设施工程建设标准的道路、公共建筑、公共交通设施、居住建筑、居住区，应当制定无障碍设施改造计划并组织实施。
法律依据:
《无障碍环境建设条例》第四条
县级以上人民政府负责组织编制无障碍环境建设发展规划并组织实施。
编制无障碍环境建设发展规划，应当征求残疾人组织等社会组织的意见。无障碍环境建设发展规划应当纳入国民经济和社会发展规划以及城乡规划。
《无障碍环境建设条例》第十一条
对城镇已建成的不符合无障碍设施工程建设标准的道路、公共建筑、公共交通设施、居住建筑、居住区，县级以上人民政府应当制定无障碍设施改造计划并组织实施。
无障碍设施改造由所有权人或者管理人负责。
