因为潘安性格急躁,喜爱趋炎附势,这也是他文人生涯中的几处败笔之一,他因为站错了队伍,得罪了权贵而被株连三族。除了爱附会权贵,潘安同历史上其他怀才不遇的文人墨客并没有什么区别,都是才华横溢而不得志,但潘安似乎什么都是极致的,不论是相貌、才华,还是为人处事,都能被人津津乐道。
说起潘安,人们第一时间想到的就是他的容貌,貌比潘安和掷果盈车都是形容他容颜俊美的。潘安可以说是魏晋时期有名的实力和颜值兼具的大明星了,他不仅容貌姣好,气质上佳,而且还非常有才华,因此特别受到人们的追捧,当时的潘安,出门一次便会被姑娘们和少妇们扔满整整一车的手帕和香果,可见他的国民度之高。
潘安也是一个至情至孝之人,他对妻子的深情也曾一度为后人称道。在魏晋那个生性风流的朝代,条件极好的潘安能够拒绝三妻四妾,为了妻子从一而终,本就是一段难得的佳话。有个成语叫做是“潘杨之睦”,说的就是潘安和杨容姬,潘安同杨容姬自小订亲,从来都不同旁的女孩亲近,一心一意只爱她,在她病逝后潘安也从未再成过亲,不知道多少女孩为了潘安心碎却又忍不住痴迷,甚至还将潘安的小名檀郎叫成了心上人的代名词。
潘安对自己的母亲也很孝顺,每当花开之际,他总要亲自带母亲去他种植的桃林中观赏游玩,在母亲回乡养病时,他也随之辞官回乡照拂,他对母亲不可谓不孝顺,但是由于他不听母亲劝告趋炎附势而被诛三族,使得潘母没能安享晚年,他的段落也被人从《二十四孝》中删去了。