《遗稿》由扬州图书馆古籍部用钢版誊写毛边纸油印，封面上由许瘦峰题签（见书影），在卷末注明“非卖品”。“诗、词”中有不少是胡氏的题画诗词，如：《题梁公绝（?）画芍药》：“风流儒雅梁公约，与我论交已廿年。不胜黄缶卢今昔感，广陵花枝暮春天。”又《为松?研弟画并录旧作》；词有如：《百字令·寄溥心?（儒）》等。在“论画”中，所辑虽仅其一生谈艺之点滴，然从中亦能窥得作者的真知灼见。如云：“雅俗之分，不在用色，而在用笔，虽涂深红浓绿而含雅气。”“读石涛画如读南华经，几不知天地为何物。其题语亦莽莽苍苍，非有满肚皮伤心泪者不能为。后人偏喜学之，无病呻吟，徒为识者齿冷。”在“联语”中，除了集宋人词句之外，尚有哀悼友人赵古泥（石）、谢玉岑（觐虞）的挽联。“附录”辑录了胡氏殁后，其生前友好钱名山（振钅皇）、裘可桴（廷梁），门人孙伯亮（晴梅）、许瘦峰的挽联、挽诗。又有吴观岱（宗泰）、顾鹤逸（麟士）、廉南湖（泉）等为《湖汀鹭画集》题的诗赋。纵观全编，从中可概见胡氏的文艺修养和平生交游等情况，因此该书册不失为从事画家个案研究的好材料。