对方拒付抚养费，我是男方，小孩2岁，一直随我方生活，现在要离婚，女方家境优越，但拒付抚养费我该如何正面回应。