如果与高班同学的约定就是你们两家，那我与你的做法相同。

我会告诉孩子我们既然答应了对方，现在说不去，对对方影响挺大，最好不要这么做。

如果不只你们两家，那么我会考虑告知对方我们不去了而选择去孩子想去的地方。