胥姓来源有三种说法，分别是学者说、典籍说、家谱说。学者说主张胥姓是上古氏族华胥氏、赫胥氏后代，典籍说主张胥氏祖先为晋国大夫胥臣，而家谱则显示胥姓来源于姬姓。

在古代，胥姓的望族大多出自于吴兴，是中华传统汉族姓氏之一，在《百家姓》中排名第285位。

胥姓古代来源地是山西。春秋时期，晋国大夫胥臣官拜司空，其子孙后代都在晋国任官职，使得胥氏家族发扬光大，一朝得名。

南北朝、宋、明之际，胥氏族人向今甘肃、山东、河北、江西、江苏、湖南、安徽、河南、东北、四川、黑龙江、新疆等地拓展，汉唐之间以琅琊吴兴为郡望。

典籍《百家姓》把胥氏的郡望定在琅琊郡：春秋时期（公元前770～前256年）指齐地琅琊（今山东胶南）。南北朝（公元420～479年）时期中原居民南迁，白下（今江苏南京幕府山）为客籍，也叫琅琊郡。《百家姓》编纂于宋朝，说明当时胥氏望族琅琊郡，不是在山东胶南就是在江苏南京。