Necesito ayuda con este problema de matemáticas de probabilidad

Tal y como está escrita la pregunta, la respuesta es sencilla.
Si hemos extraído de la primera urna una bola que tiene escrito un número concreto, en la segunda urna hay sólo una bola con ese mismo número, de entre las 4.096 que componen la urna. Por tanto, siguiendo la conocida regla de "Casos Favorables / Casos Posibles", la probabilidad de que, extraída una bola de la primera urna con un número concreto, la que extraigamos de la segunda urna tenga el mismo número, es 1/4.096.
Lo que planteas es una PROBABILIDAD CONDICIONADA. Concretamente, si A es el número extraído de la primera urna, y B el número extraído de la segunda urna, la probabilidad que hemos calculado corresponde a Pr(B=A | A=x), que se lee así: "la probabilidad de que la bola de la segunda urna sea igual a la de la primera, sabiendo que la bola de la primera urna tenía la numeración x". Esto es igual a Pr(B=x), "probabilidad de que la bola de la segunda urna tenga la numeración x", que es 1/4.096, como hemos dicho.
Podría ser que lo que querías preguntar no era esto, en realidad. Si lo que querías saber es la probabilidad de que al extraer una bola de la primera urna y una bola de la segunda urna, ambas coincidan, es una pregunta diferente. Siguiendo la notación anterior, lo que estarías preguntando en este caso sería Pr(B=A) (PROBABILIDAD NO CONDICIONADA).
Se puede resolver este problema también por el método de "Casos Favorables / Casos Posibles" (con la ayuda, si se quiere, del típico "árbol" en el que dibujamos todos los casos posibles).
Casos Posibles: Hay 4.096 bolas en cada urna, por tanto, hay 4.096 · 4.096 = 16.777.216 resultados posibles.
Casos Favorables: De todas las posibilidades, sólo nos valen aquellas en que en la primera urna y en la segunda nos salga el mismo número, lo cual sucede en 4.096 ocasiones (una por cada número).
Por tanto, Pr(B=A) = 4.096/16.777.216 = 1/4.096 .
Coincide con Pr(B=A | A=x), calculada al principio. Esto sucede porque realmente, la probabilidad de que B sea igual a A no depende de x (no depende de lo que salga en A). En general, si el suceso Z no depende del suceso Y, entonces (y sólo entonces) se cumple Pr(Z | Y) = Pr(Z).
Con esto, espero haber contestado a tu pregunta. Si necesitas cualquier aclaración adicional, no dudes en pedirla.

Y si sacamos las bolas al mismo tiempo, ¿no una después de otra? Gracias. Es decir tu tienes una bolsa con 4096 bolas y yo otra, ¿si sacamos los dos una bola al mismo tiempo cuál es la probabilidad de que sea la misma? Gracias.