离婚后为小孩的抚养费纠纷受到威胁我小…

离婚后为小孩的抚养费纠纷受到威胁我小孩一岁的时候就离婚了现在都5岁了，在离婚后的时间里每次向前夫要抚养费都很头痛，他都威胁说不要他带走小孩他就不给钱，这几年都被他牵着走他想好久看小孩马上就要见从不管我家里有没有空，时间长了我就让他到家的附近看小孩，今年2010年1.2号他想我提出要见小孩，可是我在工作很忙，我加他到我妈妈家附近去看小孩，他竟然提出不付抚养费了，非要我妈妈将小孩带到他指定的地方见面，我妈妈说很忙叫他到家你看小孩，他不同意，就提出不付抚养费了，现在我该怎么办