Mi experiencia
Yo no sé cómo será tu matrimonio, pero yo soy hija de padres divorciados conflictivamente.
Depende de la actitud de él y de la relación que tengais. Si él no quiere divorciarse, es probable que se muestre agresivo o te descalifique ante los niños. Más que probable, te aseguro que eso es lo que va a ocurrir. Si crees que ésta situación podría darse, rompe la relación definitivamente, porque no sabes hasta que punto esto deja secuelas irreversibles en los niños. A mí este tipo de comportamientos me provocaron traumas y un trastorno adaptativo que arrastro desde entonces.
Personalmente, salir los cuatro juntos me parece una chorrada que ya se te pasará. Puede que ahora te entristezca romper definitivamente, pero si tu decisión es firme no querrás volver a verlo probablemente. Además, los niños no lo entenderían, y eso es primordial. Los niños tienen que saber y entender lo que está pasando en todo momento, no les mientas. Yo sé de primera mano lo mucho que estos conflictos familiares pueden modificar tu personalidad de forma permanente, y tus hijos no tienen la culpa. Hazlo por ellos.