Desacuerdo en una herencia

Mi padre falleció dejando testamento notarial,en el cual me deja mayor porción en la herencia, adjudicándome el piso en el que vivía.El remanente de su haber se lo deja a mis 3 hermanos(1 piso, 1 finca, 1 coche,y el dinero)

Hay un desacuerdo, porque el piso que me deja a mi, era de proteccion oficial y había sido adjudicado hace 35 años a mis padres. A los 14 años mi madre falleció, sin haber empezado a pagar las cuotas correspondientes por problemas de habitabilidad en el edificio, dejando testamento notarial a partes iguales.Nos repartimos la herencia menos el piso que estaba sin pagar. Al cabo de 10 años el Instituto de la vivienda le reclamo a mi padre el pago del inmueble el cual se hizo cargo, escriturando la propiedad.

Mis hermanos reclaman ahora la parte de la herencia alegando que es ganancial,y amenazan con impugnar el testamento.

Me gustaría que me ayudaran a aclarar esta situación, si puedo aceptar la herencia por separado y que derechos puedo tener.

Agradecería su ayuda.