Celos de la hermanita de mi pareja

Vivimos juntos con mi pareja (llevamos 4 años de ser novios y hace 2 vivimos juntos) en una casa que está en el mismo terreno que la de sus padres, soy la más pequeña de 3 hermanos tengo 23 y el 25. Tiene una hermanita de 3 años de la cual siento celos y no soporto que lo busque tanto como para jugar, platicar y cosas por el estilo, tampoco soporto que ella llora por cualquier cosa y él rápido corre a consentirla.
No quisiera sentir eso, he tratado de controlar esa desagradable emoción y acercarme a la niña pero no puedo, su sola presencia cuando ella llega y estamos mi pareja y yo juntos, me molesta. Cuando estoy sola y ella se acerca a hablarme no me molesta, solamente me molesta cuando estoy con él.
¿Qué puedo hacer?