1. 出自姬，為周文王子畢公高后。畢公高封其子季孫于潘，附庸于畢國。據說其地在今陜西省北部，子孫以采邑命氏。

2. 出自羋，春秋時楚國有潘氏，見于家傳者始租為潘崇。潘崇官拜楚穆王太師。 《 通志。氏族略三》 ："潘氏，羋，楚之公族，以字為氏。潘崇之先，未詳其始或言畢公高之子季孫食采于潘，謬矣。潘岳家風詩自可見。晉亦有潘父，恐自楚往也。漢有潘瑾，后漢有潘勉。"

3. 出自北方鮮卑族，后魏時，代北鮮卑有破多羅者，后改潘氏。

4. 由于《史記》載有潘崇的事跡,故潘氏大多以潘崇為始祖。潘崇的兒子潘尪，為楚大夫；孫子叫潘黨，繼為大夫。

分佈地區

1.春秋戰國時，潘姓主要在今湖北省境內發展，此後，有向山東、湖南遷徙的少數潘姓人。漢時，有潘姓北遷至滎陽中牟（今屬河南省）的，至三國時發展興旺而為滎陽郡一大望族，以東漢獻帝時尚書左丞潘勖為始祖。東漢靈帝有潘幹因仕宦而遷江蘇溧陽，此地以潘幹為始祖。

2.吳國有右將軍潘璋由發幹（治在今山東省冠縣）而遷建康，而吳國還有瀏陽侯潘?，為漢壽（今湖南省常德）人，而孫權妻潘夫人為浙江會稽人，這說明在三國以前，潘姓已播遷於上述地方，其中以中牟潘姓最為興旺，晉時，潘勖之裔孫潘才因任廣宗太守，而落籍廣宗（今河北省威縣），後又發展成為潘姓歷史上第二大郡望，此期亦有潘姓人播遷廣東。

3.宋時有潘節後人遷廣東、雲南。元明清時，潘姓已分佈於全國各地。如今，潘姓人分佈廣泛，尤以山東、廣東、江蘇、安徽、內蒙古、河南、四川、湖北、浙江等省區多此姓。上述九省潘姓約占全國漢族潘姓人口的百分之六十九。潘姓是當今中國姓氏排行第三十六位的大姓，人口眾多，約占全國人口的百分之零點四二。

家族名人

潘崇，中國春秋時期楚國的重臣，助楚穆王商臣逼殺父親楚成王有功，被穆王封為太師，兼掌環列之尹。

潘璋，三國時期東吳名將。著名事蹟為抓住走麥城的武聖關羽。

潘岳 (文學家)（俗稱潘安），西晉文學家，是一位有名的美男子。成語「貌比潘安」，形容男性英俊瀟灑，容貌可與潘安相比。

潘漢年，中共著名作家、間諜、上海副市長。

潘光旦：近代中國著名的社會學家、優生學家和民族學家，對於優生學、教育制度、婚姻制度、家庭問題、人才分佈等等均有研究。

潘天壽：現代畫家、美術教育家。精於寫意花鳥和山水，偶作人物，兼工書法、詩詞、篆刻等。

潘承彪：潘承洞胞弟，亦為著名數學家，兩人曾合著出版數學專著《哥德巴赫猜想》。

潘承孝：內燃機專家、教育家，中國內燃機和汽車工程教育的奠基人之一。

潘際鑾：焊接學家，中國科學院院士。被稱為中國焊接事業的奠基者。

潘鏡芙：船舶工程專家，中國工程院院士。被譽為「中國飛彈驅逐艦之父」。

潘建偉：中國物理學家，中國科學院院士，中國科學技術大學副校長、教授。

潘石屹：SOHO中國董事局主席。

潘虹：中國大陸著名演員。

潘曉婷：中國撞球花式九球打法女選手，被譽為「九球天后」。

潘源良：香港填詞人，知名的作品包括《一生何求》、《祝福》、《真真假假》等。