请问:一家可以有两个房贷都以primary residence做贷款吗？

已经有一个房子作为primary residence 做了贷款，房子的deed是两个人的,但贷款在我一个人名下. 现在想新买个房子, 等新房子半年后盖好就搬家，也要贷款，新房子还可以以spouse一个人的名字做primary residence 来贷款吗？有一个loan agent告诉我一家只能有一个房子作为primary residence ， 我们搬家后暂时不打算立即卖老房子，可能会一年后再卖，还没有打算好是否出租，出租管理太麻烦，但现在房子卖价不高，想等等看看。我们可不可以两个房子都以primary residence 办贷款?谢谢