No entiendo mucho tu relato pero tu mismo te has respondido explicando tu problema. Debes tomar una decisión, no eres feliz con ella por lo que cuentas.
El pasado de una persona pasado es, lo que importa es lo que sea ahora, si en el pasado hizo o dejó de hacer es cosa de atrás. Que le haya hecho de todo al ex en referente a lo sexual no significa que lo quiera o tenga que hacer contigo y eso también debe respetarse.
En una pareja el sexo no lo es todo, lo mas importante es que tengas a una persona en la cual puedas confiar plenamente, te apoye y te de tu lugar, que haya diálogo, respeto, admiración y deseo por parte de ambos.
Piensa bien las cosas, analiza tu situación y ponlo todo en una balanza, sopesa las cosas y toma la mejor decisión.