只要您能够确定对方找不到证据

如果您自己掀开地板看到霉斑，周围没有任何人，你可以不说。

如果您的工人发现霉斑通知你，你也可以不说，但是你要知道以后别人可能找到那个工人作证。

具体说不说，要看你自己的承受能力，和您的道德宗教修养。法律就是因为人性本恶而产生的。