Elección comité de empresa

Buenas tardes,en mi empresa a cumplido el pasado Mayo el mandato de 4 años del anterior comité de empresa el sector es de alimentación de la comunidad de Madrid,este mismo comité de empresa no quieren convocar elecciones ya que al ser menos trabajadores actualmente pasaríamos de 3 representantes a 1,me gustaría que me dierais opciones ya que el sindicato del actual comité de empresa no quiere mover nada,y el otro sindicato dice que para mover algo me tengo que afiliar ya que de esta manera puedo solicitar nuevas elecciones,pero sin embargo si voy como independiente tengo que preparar una candidatura con 5 o 6 compañeros mas.Me han comentado la posibilidad de que si los que hay renuncian entrarían otros trabajadores aunque no se presentaran en las anteriores elecciones y de esta manera no perderíamos representantes. Espero vuestra ayuda.Gracias