可以去房产局查询。登记备案是房地产行政管理部门加强对房屋租赁市场的一种行政管理手段与方式，但登记备案不是租赁合同生效的必要条件。所以实践中，有的租赁合同是没有备案的。至于是否有备案号，以房产局查询结果为准。

怎样查询房屋租赁合同的具体效力

可以根据《民法典》第一百四十三条的规定认定房屋租赁合同的效力，如果符合以下条件，具有法律效力：1、行为人具有相应的民事行为能力；2、意思表示真实；3、不违反法律、行政法规的强制性规定，不违背公序良俗。《民法典》第七百零三条规定，租赁合同是出租人将租赁物交付承租人使用、收益，承租人支付租金的合同。第七百零四条规定，租赁合同的内容一般包括租赁物的名称、数量、用途、租赁期限、租金及其支付期限和方式、租赁物维修等条款。

《房屋登记办法》第七条办理房屋登记，一般依照下列程序进行：

（一）申请；

（二）受理；

（三）审核；

（四）记载于登记簿；

（五）发证。

房屋登记机构认为必要时，可以就登记事项进行公告。