Посоветуйте что делать!!!

С парнем встречаюсь 3 года. Недавно зашел разговор о том что я у него первая, а он у меня нет. И что у него такой пунктик в голове, что это не справедливо. Он меня очень любит и ни в коем случае не будет изменять, но сама мысль что он не первый у меня ему не дает покоя. Подскажите что делать??