Ваш муж является собственником квартиры, но если в ней зарегистрированы дети, то они имеют право проживания в этой квартире. Тем более, по закону дети должны быть зарегистрированы с одним из родителей, в Вашем случае с отцом.
Ничего не отдавайте, обращайтесь в суд с иском о разделе имущества, с учетом интересов детей суд может отступить от равенства долей супругов и выделить супругу, с кем остаются дети, большую долю.
Обратитесь в полицию, органы опеки, что отец выгоняет детей из дома.