抚养权争夺我们协议离婚时孩子八个多月…

抚养权争夺我们协议离婚时孩子八个多月，一直以来孩子都随我生活，说好了离婚后孩子还跟我生活只是协议上归男方，离婚三个多月了孩子一直跟我，男方也没给抚养费，且男方的条件不利于孩子成长，我能不能要回抚养权？