為人心狠手辣、為達目的不擇手段、霸道固執、思想封建、最重視家聲和門戶之見、是家中的一言堂。
出身官宦家庭,自幼已深諳政治手腕,在動盪的時局中,很快已辨明了方向,明白大勢所趨,故在見証了清朝的覆亡後,得以在民國政府中攀上舉足輕重的位置。
仕而優則商,他看中了西關家的財力,故為兒子潘兆棠說成了西關家大小姐莊鳳儀的親事,利用潘家在政壇的權,再結合了西關家的財,雙劍合璧下,聯及其他財閥開辦私營銀行,幹盡了官商勾結的行當,令潘家的風頭一時無倆。