潘虹經歷了一次致命的愛情，在出演影片《苦惱人的笑》時，他與導演楊延晉傳出緋聞，“愛”上有婦之夫的她“腹背受敵”，一方面是洪融因此大鬧上影廠，頓時人人瞋目扼腕，疾言噴噴口沸目赤，尤其是洪融，幾度威脅潘虹要讓她身敗名裂，受到了驚嚇的潘虹為了平息事端，為了保全自己的家庭，只好主動找洪融賠罪，這也就是她為什麼要把自己的“不幸身世”告訴洪融、為什麼要乞求洪融“同情她、可憐她”的真實原因。可是洪融還是沒有放過潘虹，被視為“第三者”的也受到了廠裡的嚴肅批評，潘虹只好和米家山離開上影廠；當然，妻子洪融的做法傷透了楊延晉的心，楊延晉不久與洪融離婚。這件事在她純潔的心裡打下了深深了烙印，其實這件事也或多或少地影響到了她與米家山之間的感情。
潘虹常說自己很想做個上海的小女人，能常對愛人撒嬌和發嗲，可是米家山卻不接受她的思想，他不會寵女人，所以就擔心他不夠體貼老婆，離婚後她經常在電話裡教他如何愛護別人，其實潘虹現在敢對他老婆說，她對米家山是最好的，沒有人能夠相比。至此，可以說在中國影壇上，潘虹沒有劉曉慶那樣迎風踏浪的輿論風頭，也沒有斯琴高娃那樣瑞士公民的聲勢激揚，潘虹的生活卻充滿著神秘與傳奇色彩，時常會讓大家感覺到她的那種遙遠和隱現感，或許就像俗話所說的距離產生美感，總之潘虹的人生傳奇色彩，也增添了她在影壇的風采光芒。
