За согласие на продажу квартиры

Мы с мужем в разводе 2,5 года. Прописаны в общей квартире: я двое детей и бывший муж. Квартира куплена в браке, собственник я, т.к. денежные средства выделялись моими родителями. Двое детей 13 и 7 лет. Сейчас хочу улучшить жилищные условия и приобрести квартиру большей площади. Беру 1/3 ипотеки, остальные с продажи квартиры. Опека требует согласие бывшего мужа. Он отказывается, ставя условием определение места жительства одного ребенка с ним. Правомерно ли это и что можно сделать?