Abandonné à la naissance et déposé devant la porte d'un couvent, Anthony Adverse a été élevé par un négociant écossais. Dans sa jeunesse, il est tombé éperdument amoureux d'Angela, qu'il a ensuite perdu de vue. Les années ont passées et Angela, qui a eu un enfant d'Anthony, est devenue la maîtresse de Napoléon ....