Я мать двоих детей 7 и 8 лет Развелась с мужем

Здравствуйте. Я мать двоих детей 7 и 8 лет. Развелась с мужем, устно договорились о месте жительства детей с ним на неопределенный срок. Сейчас нахожусь в браке с другим человеком, ушла в декрет. Бывший муж подал в суд на определение места жительства детей с ним. Просит ему не препятствовать. Дети хотят проживать со мной, у нас условия для их проживания со мной и материальное положение позволяют. Чем чревато определение места жительства у отца для меня в дальнейшем, если я захочу их забрать.