No se trata de que tengas que "echar" a nadie. La cuestión es que la administración te concedió una vpo (una vivienda social subvencionada en parte con dinero público) para que tú, con la situación personal que alegaste en el momento de la adjudicación, pudieras vivir en ella. Si ya no la necesitas porque vas a vivir en otro sitio de manera habitual, la ley exige que pase a otra persona que cumpla los requisitos (es decir, que la vendas o alquiles a precio protegido). La cosa cambiaría si en el momento de la adjudicación la solicitud la hubierais hecho a nombre de tu cuñado, marido e hijo (contando los ingresos de todos lógicamente). En ese caso, no pasaría nada por que tú te fueras, ya que el resto de adjudicatarios con derecho sobre la vivienda seguiría en el piso. Si no fue así, la vivienda te la adjudicaron a ti solo contando solo tus ingresos y ahora te vas, a efectos legales la casa se queda vacía salvo que la alquiles de manera legal
¿Puede quedarse tu familia? Cada Comunidad autónoma puede poner sus normas. En algunos casos, como en Madrid, no tendrías problema ninguno porque son más flexibles con este tipo de temas. En otros, como por ejemplo el País Vasco, probablemente adjudicarían la vivienda a un demandante de vpo que esté en lista de espera por cumplir los requisitos de la vpo y tener necesidad de vivienda.
Sé que te puede parecer injusto, pero piensa que si yo tuviera una vpo porque ganara 9.000 euros al año y luego me casara con alguien que gana 50.000, no sería lógico que si yo me voy de la casa él siga viviendo en una vpo, mientras hay personas esperando un alquiler social que ganan mucho menos.