Como bien te han dicho, cemento cola. De todos modos yo aprovecharía ahora que tienes el agujero, para mirar si los de alrededor están bien fijos, porque siempre te será más fácil quitarlos ahora que después.
Un consejo: Mientras prepares el cemento cola, mete unos minutos los azulejos en remojo (los restos de cemento y polvo pueden hacer que la cola se adhiera peor y si no eres muy manitas, ten cinta adesiva potente a mano ¿razón? si pones el último demasiado dentro, te va a ser muy difícil sacarlo si no puedes meter la mano, con lo que le pegas un trozo y al tirar saldrá.