我儿子现在3岁，一直是我自己带，每天都有带他散步或者去小朋友多的地方玩，他特别喜欢到我们邻居家（他们家有三个宝宝两个和他同岁一个女孩7岁），每次去他们家会和他约定玩一会儿回家吃饭或睡觉，可每次到回家的时候他都不走或者直接对我说妈妈你走，只有在他们家是这样。是我的陪伴出现了问题吗，我应该怎么做才能让他不留恋他们家，还是本来孩子就这样