1. 出自姬，为周文王子毕公高后。毕公高封其子季孙于潘，附庸于毕国。据说其地在今陜西省北部，子孙以采邑命氏。

2. 出自芈，春秋时楚国有潘氏，见于家传者始租为潘崇。潘崇官拜楚穆王太师。 《 通志。氏族略三》 ："潘氏，芈，楚之公族，以字为氏。潘崇之先，未详其始或言毕公高之子季孙食采于潘，谬矣。潘岳家风诗自可见。晋亦有潘父，恐自楚往也。汉有潘瑾，后汉有潘勉。"

3. 出自北方鲜卑族，后魏时，代北鲜卑有破多罗者，后改潘氏。

4. 由于《史记》载有潘崇的事迹,故潘氏大多以潘崇为始祖。潘崇的儿子潘尪，为楚大夫；孙子叫潘党，继为大夫。

分布地区

1.春秋战国时，潘姓主要在今湖北省境内发展，此后，有向山东、湖南迁徙的少数潘姓人。汉时，有潘姓北迁至荥阳中牟（今属河南省）的，至三国时发展兴旺而为荥阳郡一大望族，以东汉献帝时尚书左丞潘勖为始祖。东汉灵帝有潘干因仕宦而迁江苏溧阳，此地以潘干为始祖。

2.吴国有右将军潘璋由发干（治在今山东省冠县）而迁建康，而吴国还有浏阳侯潘?，为汉寿（今湖南省常德）人，而孙权妻潘夫人为浙江会稽人，这说明在三国以前，潘姓已播迁于上述地方，其中以中牟潘姓最为兴旺，晋时，潘勖之裔孙潘才因任广宗太守，而落籍广宗（今河北省威县），后又发展成为潘姓历史上第二大郡望，此期亦有潘姓人播迁广东。

3.宋时有潘节后人迁广东、云南。元明清时，潘姓已分布于全国各地。如今，潘姓人分布广泛，尤以山东、广东、江苏、安徽、内蒙古、河南、四川、湖北、浙江等省区多此姓。上述九省潘姓约占全国汉族潘姓人口的百分之六十九。潘姓是当今中国姓氏排行第三十六位的大姓，人口众多，约占全国人口的百分之零点四二。

家族名人

潘崇，中国春秋时期楚国的重臣，助楚穆王商臣逼杀父亲楚成王有功，被穆王封为太师，兼掌环列之尹。

潘璋，三国时期东吴名将。著名事迹为抓住走麦城的武圣关羽。

潘岳 (文学家)（俗称潘安），西晋文学家，是一位有名的美男子。成语「貌比潘安」，形容男性英俊潇洒，容貌可与潘安相比。

潘汉年，中共著名作家、间谍、上海副市长。

潘光旦：近代中国著名的社会学家、优生学家和民族学家，对于优生学、教育制度、婚姻制度、家庭问题、人才分布等等均有研究。

潘天寿：现代画家、美术教育家。精于写意花鸟和山水，偶作人物，兼工书法、诗词、篆刻等。

潘承彪：潘承洞胞弟，亦为著名数学家，两人曾合着出版数学专著《哥德巴赫猜想》。

潘承孝：内燃机专家、教育家，中国内燃机和汽车工程教育的奠基人之一。

潘际銮：焊接学家，中国科学院院士。被称为中国焊接事业的奠基者。

潘镜芙：船舶工程专家，中国工程院院士。被誉为「中国飞弹驱逐舰之父」。

潘建伟：中国物理学家，中国科学院院士，中国科学技术大学副校长、教授。

潘石屹：SOHO中国董事局主席。

潘虹：中国大陆著名演员。

潘晓婷：中国撞球花式九球打法女选手，被誉为「九球天后」。

潘源良：香港填词人，知名的作品包括《一生何求》、《祝福》、《真真假假》等。