胡居仁幼时聪敏异常，时人谓之"神童"。稍长，胡居仁从安仁干淮游先生学习《春秋》，日千言。他兴趣广泛。博览群书，左传公羊、诸子百家、楚辞汉赋、唐诗宋辞等，无不涉猎。成年后，师从崇仁硕儒吴与弼，饱读儒家经典，尤致力于程朱理学。常与友人陈献章、娄谅、谢复、郑侃等人交游，吟诗作赋。人谓之崇仁学派，名闻当时，影响后世。胡居仁学业上主张以忠信为先，以求放心为要;行为上持敬，认为"操存勿失，莫大乎敬"。他端庄凝重，对妻子如严宾。手置一册，详书得失，用作自考。鹑衣箪食，晏然自在。筑室山中，读书处取名"敬斋"，四方来学者甚众，皆告之曰:"学以为己，勿求人知。"语治世，则曰:"惟王道能使万物各得其所。"同时，他还坚决放弃科举，身居山野，除侍亲和讲学外，不问世事。后为扩展见闻，四处访学，与同乡娄谅、罗一峰、张东白论学于弋阳的龟峰和余干的应天寺。曾主持白鹿洞书院，又讲学于贵溪涧源书院和淮王府，专讲穷理尽性至命，是明代程朱学派主要代表人物之一。明成化年间，胡居仁东游钱塘、太湖等地，寻访名贤;遍览金陵、浙江、福建等地的风景名胜，与人交流探讨学术。
胡居仁在世时曾经历了"土木之变"，英宗被俘，代宗朱祁任继位，后来英宗朱祁镇发动"夺门"之变并杀害爱国将士于谦等重大事件。故而看淡政治，远离官场，淡泊自处，以布衣终身。平日生活十分俭朴，唯以著述讲学为念。他致力于教育，从教二十余年，治学严谨，制订学规并亲自讲学，务求学生学以致用。胡居仁认为，学习是为了提高自己，不是为取功名求闻达。胡氏著述甚丰，有《胡文敬公集》、《易象抄》、《居业录》及《居业录续编》等书行世。
总之，胡居仁暗修自守，布衣终身，一生致力于钻研学术，栽培后生，其思想影响于后世非常的深远。胡氏享年五十一岁，万历十三年(1585)，被崇祀孔庙，追谥，号"文敬"。恪守新安，不逾尺寸
胡居仁与陈献章皆出吴与弼之门。吴与弼，字子傅，号康斋，明初抚州崇仁(今江西抚州市崇仁县)人，少年时至京师金陵求学，后归故里躬耕食力，弟子众多，著名的有娄谅、胡居仁、陈石斋、杨杰、周文、魏校、陈献章等。吴与弼的学问介乎朱、陆之间，献章上继金，下启姚江。胡居仁则恪守新安，不逾尺寸，故以敬名其斋。在吴与弼的众多弟子当中，最能谨守师业的是胡居仁(人称敬斋先生)，当时最不能容忍陈献章(号白沙)之异见新说的也是这位敬斋。
胡居仁认为，陈献章对理学只是"窥见些道理本原，"在功夫践履方面，只是笼统地讲静坐体验，没有循序渐进格物致知的细节规定，故其立说"遂成空见。"又指出，陈氏"物有尽而我无尽"的主张，乃是禅佛教的心性之说，有违儒门宗旨，陷入异教。胡氏之所以要对陈白沙提出批评，乃在于其学问宗旨的不同。敬斋主"敬"，左绳右矩，严毅自律，属保守型的理学家，学问气象与白沙迥然有别。敬斋的另一位同门娄谅(本书前面已作介绍)因"遗文散失"，学
