Столкнулись с проблемой негативом от жителей домов у нас сейчас начались

Здравствуйте! Столкнулись с проблемой, негативом от жителей домов, у нас сейчас начались летние смены, по 10 человек в группе, выходим на детские площадки играть во дворы домов. Они закрытые, у нас есть ключи от многих дворов. Не ломаем ничего, следим за детьми. Многие взрослые подходят и говорят, чтобы мы здесь не гуляли. Имеем ли мы право гулять с детьми во дворах соседних домов? Нужно ли согласовывать с УК?