企业租用村里的（不包括建制镇所在地）土地建成办公楼，不需要缴纳房产税。

可以参照以下政策依据理解：

《中华人民共和国房产税暂行条例》的第一条：房产税在城市、县城、建制镇和工矿区征收。 《财政部、国家税务总局关于房产税若干具体问题的解释和暂行规定》（财税地字[1986]8号） 一、关于城市、县城、建制镇、工矿区的解释城市是指经国务院批准设立的市。 县城是指未设立建制镇的县人民政府所在地。 建制镇是指经省、自治区、直辖市人民政府批准设立的建制镇。 工矿区是指工商业比较发达，人口比较集中，符合国务院法规的建制镇标准，但尚未设立镇建制的大中型工矿企业所在地。开征房产税的工矿区须经省、自治区、直辖市人民政府批准。 二、关于城市、建制镇征税范围的解释城市的征税范围为市区、郊区和市辖县县城，不包括农村。 建制镇的征税范围为镇人民政府所在地，不包括所辖的行政村。