Necesito consejos buenos

Hola me llamo luna,diré que no escribo para que me juzguen solo para quien me quiera ayudar.estoy casada pero salgo con un hombre muy de vez en cuando por la situación,el es casado también,mi edad es cuarenta y pocos hace unos 5 años q salimos con nuestros altibajos,pero la última vez que nos vimos me dijo q la mujer había visto unas fotos nuestras en el móvil y q estaba el muy mal,que le gustaría irse conmigo a vivir pero que de que viviríamos si estamos en paro y con que excusa se iba si la mujer era muy buena por otro lado estaban sus hijos y los míos que pensarían de nosotros (son mayores)donde irnos,muchas dudas tiene y mucho miedo le vi echo polvo,se ve lo pasa mal,me borro del whassap y me lo dijo ya que la mujer le vigila ayer le envié un mensaje pero no me ha contestado aún.yo le quiero pero estoy dispuesta a no molestar para que sea feliz,por otro lado pienso que si quiere el me dejara de lado y ya está,me pidió tiempo para que todo se calmara pero yo muero sin saber nada de él.por dios que haríais vosotros?muchas gracias,si necesitáis alguna pregunta hablarme