庐陵胡氏的基本情况
庐陵胡氏为三国时胡质的后裔，传至唐末的胡贇，先是居于金陵，后一度居长沙。五代马殷之乱，胡贇的后裔胡杲(字公霸)、胡暹(字公贞)、胡昊(字公阳)兄弟三人居于吉州。胡杲居庐陵值夏，宋资政殿大学士胡铨为其后裔；胡暹居泰和南冈，宋朝奉大夫胡衍为其后裔；胡昊开始居住在泰和禾溪，再迁居黄漕，宋南城县丞胡笺是其后裔。三族皆繁衍茂盛，且都以文学德义重于当时。庐陵胡氏的后代，明朝学者胡直，在其撰写的《胡氏世叙》中说：“胡氏之先卫国公贇自金陵避地来吉，伯公霸居庐陵，至资政殿学七铨而著；仲公贞、季公阳，居泰和，至屯田员外郎衍，南城县丞笺而著。”
梁潜在《庐陵胡氏族谱序》中记载：胡盛，又作胡胜，即胡公霸的儿子，因父亲仕南唐为吉州刺史，便从居庐陵芗城，并占籍于此。其子孙数传之后，随着北宋政局的稳定和社会经济的发展，繁衍不衰，丁口日甚。北宋时便已出现析家、迁居他地而各自发展的趋势，以寻求更大的家族生存空间。有胡观，徙县邑滩下厦米，其一子又迁居儒林乡上头山、胡家苍；有胡杞，先是迁居南半，后迁南城，成为健胡之祖。
到两宋之交，胡公霸的值夏之胡出了南宋著名的文学家、政论家胡铨，他以力主抗金复仇，反对妥协投降，上疏乞斩奸相秦桧而名动一时，结果被贬琼州(今海南)，受尽折磨，但其忠义刚直之气却名扬天下。胡铨官至资政殿学士，死后谥忠简。
胡铨的曾祖父胡琏，为胡公霸的曾孙。祖父胡恺，父亲胡载，生母曾氏。从曾祖到父亲，胡氏三代不仕，而以耕读为业。胡载曾经参加过科举考试，但一试不中就弃而归农了。自胡铨开始，胡氏大振，其子孙多以忠义自勉，并逐渐成为世家大族。胡铨以后，其族人或仕于朝廷，或教于乡里，或以诗文自娱，或力耕自给。当时庐陵胡氏与南宋的一些名家如张拭、李光、杨万里、周必大等人都有较多的交往，因而在这些名人的笔下或多或少能找到胡氏家族的影子。周必大于南宋庆元元年(公元1195年)为庐陵胡氏裔孙胡昌龄写的墓志铭中写道：“江西多名士，吉(州)为冠。自古言之，庐陵胡氏为大族。”其族在科举业上相继承递，“秋榜殆无虚榜，它姓莫敢争衡”，尤其是胡铨，“益宏厥家”。
胡铨有兄弟多人。兄胡铸，自幼读书力学，师从名儒萧楚。曾与胡铨一起在乡里洞岩筑精舍，自号蓬山居士。铸子胡浦，字几道，居家以孝友闻名乡里。南宋乾道九年以叔父胡铨的恩荫授迪功郎，监潭州衡山县户部赡军酒库，病故于任所。胡铨的堂弟胡锷，字廉夫；从弟胡镐，字从周，绍兴十五年进士及第，历任新淦县尉、靖州判官、赣县县丞、大理寺主簿等，后出任荆湖南路参议官。
胡铨有5个儿子：胡泳、胡澥、胡浃、胡焉、胡冲。胡冲早夭。胡浃、胡焉官承务郎。长子胡泳，字季水，小字苏郎(取过姑苏而生之意)。6岁时随父亲贬谪新州，记忆力过人，能背诵《春秋》，诗人陈元忠目之为春秋生。后胡铨被流放到琼州，他又随父渡海到贬所，为被贬放琼州的名臣李光所看重，把孙女许配给他为妻。胡铨在海岛聚徒授业，胡泳也受到熏陶。奸臣秦桧死后，胡铨的冤案得以平反昭雪，全家返回内地。绍兴三十一年(公元1161年)，胡泳回到庐陵故里。孝宗隆兴初因奏荐为右承务郎，后调淮西江东总领。次子胡澥，号伯图，以父荫 人官，为承务郎，监南岳庙，转任奉议郎，为沿海制置司干办公事。大诗人杨万里称他修洁博习，能世其家。
胡铨的孙子有10余人。胡槻，胡永长子、胡铨长孙，宋宁宗嘉定十二年以右文殿修撰经略安抚使知静江，在任4年，有政绩。胡榘，字仲方，胡泳次子。曾任枢密院编修官，累官至工部、兵部尚书，出知福州。宝庆二年，被任命为焕章阁学士、知庆元府兼沿海制置使，以龙图阁直学士致仕。其他孙子有胡代、胡桯、胡杋、胡楛、胡梃、胡机、胡校、胡價、胡构、胡桦、胡檖、胡椅等。
在胡铨家族中，他的叔祖父胡谅一派也较为显赫。胡谅有2个儿子：胡登臣、胡方中。登臣字正平，在其家族同辈中排行第十九，故胡铨称呼他为十九叔。