Avispas dentro de casa

Vivo en una casa de madera, que ya tiene sus años. Las paredes exteriores están hechas de troncos. Las paredes interiores son de machihembrado de madera también. En medio hay una pequeña cámara rellena de argamasa o cemento (no muy consistente). El techo tiene dos vertientes, y la viga superior es un tronco. El techo, por dentro, está forrado también de machihembrado. Pues bien, desde hace algunos días nos encontramos con que hay alguna avispa dentro de casa, cuando la casa ha estado cerrada, o sea, que no pueden haber entrado por la puerta o ventanas. Un día vimos a una avispa como se metía desde el exterior en la zona del techo. Creo que acceden al interior de la casa por algún pequeño hueco que haya en el techo, entre la viga y el revestimiento.
No se como localizar el nido, de hecho no se ni que pinta tiene un nido de avispas. ¿Pueden haber hecho el nido en la cámara de la pared?
Había pensado en lo siguiente:
- Desde dentro de la casa, rociar toda la viga con algún insecticida.
- Tapar todos los huecos con alguna silicona o masilla.
- Rociar la viga y el ángulo que forma el techo desde fuera
- Tapar todos los huecos con masilla desde fuera.
¿Os parece una buena solución o es una tontería? ¿Cómo localizo el nido? ¿Qué insecticida me recomiendais?
Muchas gracias por adelantado y perdonad por el rollazo que he soltado, pero tengo un bebe en casa y me preocupa que le puedan picar y le pase algo.