文革期间，胡荣贵是昆明军区副政委。昆明军区和云南省军区的领导，绝大多数来自陈谢大军，其渊源一是出自红四方面军红31军─129师386旅，二是出自山西新军决死1纵队，叁是出自秦基伟的9纵。出自山西新军决死1纵队的将领，一部分是红军干部，由中国共产党党派往山西工作，另一部分是山西、河北参加新军的进步青年，昆明军区副政委王砚泉少将、昆明军区副政委张子明少将、昆明军区政治部主任雷起云少将和胡荣贵均属于后者。胡荣贵是山西省定襄县人，1936年参加中国共产党，1937年参加山西青年抗战决死队，历任干事、工作队长、连指导员、股长。1941年8月，386旅和决死1纵队组成太岳纵队，决死1纵队改称决1旅，张子明是25团政治处主任，胡荣贵是38团政治处主任，王砚泉是旅司令部队列科科长，雷起云是旅政治部组织科科长。1943年，胡荣贵升任38团政委，1944年，王砚泉升任第1军分区参谋处长，1945年，雷起云升任10旅政治部主任，胡荣贵升任11旅政治部主任，1947年，王砚泉升任11旅参谋长，1948年，胡荣贵升任11旅政委，雷起云升任10旅副政委，1949年，胡荣贵升任4兵团政治部副主任，此时王砚泉是14军40师副师长，雷起云是13军37师政委，张子明是14军42师政委。文革期间，阎红彦上将自杀后，中央指定昆明军区第二政委李成芳中将主持云南，李成芳出任云南省军管会主任。1967年5月28日和29日，“八派”和“炮派”发生武斗，事后“炮派” 围住昆明军区大门口，强烈要求李成芳严惩“八派”，并提出“逮捕张子明！”“枪毙张子明！”的口号。5月30日，中央军委、中央文革小组来电，其中有“对军区副政委张子明、胡荣贵的历史问题，由军委总政治部进行调查，尔后在进行实事求是的处理”的内容，从此胡荣贵销声匿迹。胡荣贵和秦基伟、李成芳、张子明、张力雄、王蕴瑞被送到一个农场劳动，后送到湖南364医院休息。1973年，秦基伟、李成芳、张力雄、王蕴瑞去北京，胡荣贵和张子明回云南。
1983年，胡荣贵出任第六届全国人大常委会委员。
