后人遂用“人面桃花”或“桃花人面”來形容男子懷念一見鐘情而不能再度相見的女子。如石孝友《謁金門》詞：“縱收香藏鏡，他年重到，人面桃花在否？”黃遵憲《不忍池晚游詩》之七：“鴉背斜陽閃閃紅，桃花人面薄紗籠。”日久天長，“人面桃花”便成為了成語。

    從上述故事看，這個成語涉及了豐富的心理活動，其中最主要的是人的情緒記憶。什么叫情緒記憶呢？它通常以情緒、情感為記憶的內容，也以情緒和帶有情緒色彩的材料記憶得最牢。此種記憶使人能牢牢地記住自己所體驗的情感，尤其是那些富有情感色彩并曾激起自己情感的事物。

    情緒記憶是人類記憶的一種。任何記憶都由記與憶兩個環節或階段組成，而記又包括識記與保持，憶又包括再認與再現。
    崔護邂逅美女的情景，即“人面桃花相映紅”一下子就被他識記住并保存下來了，印象是那么深刻，想抹也抹不去。第二年他再去那里，認出那是去年見過的“此門”和“桃花”，這便是再認。所謂“再認”，就是當以往接觸過的事物出現在眼前時，人們能夠把它們認出來。現在那位漂亮的姑娘不在崔護眼前，而往日的情景卻歷歷在目，這便是再現。所謂再現，就是當過去接觸過的事物不在眼前時，人們能夠把它們重新表現即回想起來。可見，“人面桃花”是一種典型的情緒記憶。