我想咨询一下我跟孩子的爸爸分手两年多了他一直没有管孩子，从孩子生下来都是我自己带自己养的，他虽然跟我在一起，但他从来没有改孩子身上花过一分钱，孩子长到四岁才带去他家里给孩子上的户口！但是由于各种矛盾跟他分手了，刚开始跟他说好的孩子让他妈妈帮忙带的孩子的一切费用由我来出的，可是后来我每次回去看小孩的时候我发现我的小孩过的很不好省直有时候我都亲眼看见他奶奶打他和乱骂小孩的，后来我实在没办法把孩子带在自己身边了，我一边工作一边带孩子的，最近小孩的爸爸要跟我要孩子的抚养权，我不知道该怎么办，我想求助你们！