我2010年10月因男方有外遇协议离婚,孩子抚养权归男方,当时我儿子不到三岁,我们一直在开封生活,他父亲...

我2010年10月因男方有外遇协议离婚,孩子抚养权归男方,当时我儿子不到三岁,我们一直在开封生活,他父亲家是外地的,离婚时我们协商的是我随时可以看望或接儿子回来住,但是现在他们说为了让孩子把我忘记不让我再接孩子了,这让我很痛苦,孩子一直跟着我生活,现在不让回来我实在受不了,而且孩子的父亲在外打工,现在跟着爷爷奶奶生活在农村,得不到一点父爱母爱,请问我该怎么办?