¿Se acabó el amor o es manipulador?

Regresé con mi ex pareja y luego de años, me entero que solía compararme con otras mujeres, donde yo salía perdiendo, tanto físicamente como en la personalidad.
Recuerdo que en esa época le pregunté si pasaba algo y él negaba, incluso tuvimos un hijo. Él insistía en ser padres y me propuso también matrimonio.
Ahora que sé lo qué pensó de mí realmente, no logro entender por qué se quedó conmigo. Pienso que no me valoró.
Me siento engañada, traicionada, pienso que fue injusto no haber sabido la verdad en su momento, seguramente me hubiese marchado antes.
Ahora que estamos reconstruyendo la relación saber esto me frena, me duele y no sé qué hacer.
Cuando hablé con él del asunto me dice que eso es algo del pasado y que no quiere hablar del tema.
¿Se puede reconstruir la relación? Si pienso en seguir con él, siento que me estoy traicionando, que pierdo mi dignidad. Y me molesta no haber sabido eso antes.
¿Cómo alguien que dice amarte puede compararte y pensar que las demás son una mejor opción?
Soy una linda mujer, inteligente, creativa, empática. Muchos hombres se han fijado en mí, no sé si intenta bajarme el autoestima porque él es inseguro y cada vez que me ve busca detalles insignificantes en mi ropa o en mi rostro para destacarlos. Antes no hacía eso.