Здравствуйте. Нет, это не основание для лишения родительских прав сразу. Советую вам обратится вам обратится в суд о взыскании алиментов из расчета 1 прожиточного минимума на каждого ребенка и об ограничении в правах. Через 6 месяцев если ситуация с общением не изменится уже лишить.
При необходимости составления документов можете написать мне на Вацап, Макс или Телеграмм по номеру телефона который указан в моем профиле.