Бывший муж угрожает отобрать ребенка

Здравствуйте.Дело в том, что бывший муж угрожает забрать у меня ребенка. При разводе спора о том с кем будет ребенок не возникало, он был со всем согласен, а именно что ребенок будет проживать со мной.Сейчас у него имеется долг по уплате алиментов, в воспитании ребенка он не принимает никакого участия.На каком основании он может отобрать ребенка?Я не наркоманка,не алкоголичка и ребенок живет в хороших условиях.