我该怎么办

我们离婚一年多，离婚时孩子归男方抚养，我有探视权。离婚后孩子一直由爷爷奶奶在老家抚养，一直没有在他身边，现在孩子已经4岁了，还没有上幼儿园，（他的情况是现已结婚，并有一女，），以前每次我想接孩子在我身边住几天都比较困难，但最终还是接到了，这次他以父母不舍为由拒绝让我接孩子，这种情况我该怎么办？？？谢谢

离异后不与孩子直接生活的一方的探视权是离异后父亲或者母亲的法定权利。另一方的协助是一项法定义务，必须履行。
你可以与对方协议，或者向法院提起诉讼的方式解决。