Помогите разобраться с земельным участком.

Наш земельный участок был записан на отца,на пожизненное пользование, родители купили его когда поженились. после смерти отца сказали, что переделывать ничего не нужно. мы с мамой пользуемся им, брату он был не нужен.когда я собралась там поставить дом, брат сказал, что там его доля, и он не позволит его поставить. подскажите, как разрешить этот вопрос. мы с мужем участок засаживали садом, покупали и завозили землю, удобряли.
нотариус сказал, что брат сейчас не может претендовать на участок , так как на момент смерти я и отец были зарегестрированы в одной квартире , но в поссовете нам выдали поддельную справку, что отец , мама и брат жили в одной квартире и были в ней прописаны. (отец до смерти жил со мной, мама-отдельно)