来太晚了，孩子很受罪的，最好是

小学一年级就来，再或者最晚三年级时。一年级孩子比较融入环境，语言学习也较快，学校课程简单，最初语言不懂也没什么。三年级开始学校重新分班时，也是一个机会，因为大家都要重新适应。另外国内学习也有一定基础了，中文日语可以两不误，英语比日本孩子学得早，也是个好事。
决定在日本常驻的话，还是来得越早越好。否则你想想，就算是在国内，一个语言不通的异地孩子转学的话，也要适应很久的，更何况中日思维方式真是不同，来得太晚对孩子是一种折磨。