可以进去，但是新房客不要搬进去。

关键问题是，这个房子什么时候你拿回使用权。

第一，如果租约结束，房客搬走，不管给不给你钥匙，使用权根据租约，从房客变成你的。你可以放心租出去。

第二，如果租约未结束，房客搬走，那么理论上使用权还是他的，你可以开门进去打扫油漆，但是不要让新房客搬进去，因为如果旧房客再回来闹，你理亏因为一房两租。这种情况，你需要和房客签署提前结束租约的协议（early termination agreement），正式把使用权拿回来。

第三，如果是驱逐，房客先搬走了，那么参照第二点，你可以进去打扫油漆，但是新房客不能搬进去。如果旧房客不和你签termination agreement。你需要民警最后正式执行驱逐令，哪怕是一个空房子，哪怕是这个房子你都打扫干净了，为了防止旧房客和你瞎闹，让民警来一趟，在驱逐令上签个字，交回法院，这样使用权就完全回到你的手里。不管对方交还还是没交还钥匙。

总之，房客搬走不表明租约结束。必须搞一个书面的结束，要么是原租约上的规定，要么是early termination协议，要么是民警执行驱逐令的签字。如果没有这些，可以进去打扫，但是不能让新房客住进去，以防一房两租自己尴尬。