Я с отцом своего ребенка в разводе Вынуждена задерживаться на работе

Здравствуйте! Я с отцом своего ребенка в разводе. Вынуждена задерживаться на работе, в связи с этим ребенка из садика иногда забирает мой гражданский муж. Отец ребенка узнал об этом и категорически возражает, чтобы ребенка отдавали чужому человеку. У меня есть доверенность на гражданского мужа. Отец ребенка сам забирать его отказывается и при этом угрожает написать в прокуратуру жалобу на неправомерные действия дошкольного учреждения. Как мне быть в данной ситуации? У меня нет родителей и родственников, забирать ребенка больше некому. Как выйти из положения, не нарушая ничьих интересов? Спасибо