变更抚养权我因对方有外遇今年8月12…

变更抚养权我因对方有外遇今年8月12协议离婚的,儿子6周岁,给男方的,现在男方以不付抚养费为由,拒绝我探视儿子,我内心颇受煎熬,当时考虑颇为欠妥。经济条件我比男方好。男方离婚后马上与第三者同居了,儿子原来就认识第三者,也很讨厌她。男方现在与儿子租住在外面,而且男方弟弟也离婚在他父亲家,他弟弟没有正当职业,他妈妈在我们结婚前就巳过世,小孩以前一直请外面人照看。这种情况我要求变更抚养权的可能性大不大?