Хотим приобрести участок для строительства дома Нашли подходящее место в администрации сказали

Хотим приобрести участок для строительства дома. Нашли подходящее место, в администрации сказали, что собственников нет и можно брать участок в аренду, но там стоит дом(аварийное состояние), для того чтобы взять его в аренду нужно убрать крышу и окна, чтобы он не считался домом. С учета он снят. Спросили у соседей про хозяев, говорят они уже умерли, но приезжают то ли дети то ли внуки раз в год устроить гулянки. Вокруг все заросло, дома тоже не видно уже из за кустов и деревьев. Вопрос в том, даже если нет собственников, оформим землю на себя, построим дом и тут заявятся родственники, смогут ли они что-то доказать? Как то пожаловаться на нас? Предъявить нам за дом, что это их родителей или бабушки с дедушкой, которых уже нет в живых.