《桐阴论画》全书三编,共6卷。初编序于同治五年(1866)，二编、三编序于光绪六年(1880)。初编共品评明末清初画家 170余人。大体按时间先后排列，但分为“大家”与“名家”。卷首列“大家”17人，卷上卷下列“名家”106人，卷末附妇女名家4人。二编、三编继初编之后增补而成。二编品评明末清初画家120人,三编品评清中叶以来画家120人,体例与初编相同。该书以逸、神、妙、能四品评议画家之法，并列小传，沿自北宋黄休复《益州名画录》。但从作者对画家的品评中，以及从作者在《例言》所称“有神而兼逸，有能而兼逸，有神与能兼擅而仍无失为逸”等话语中，可见其运用四品原则殊有别于前人。今观全书，其列于逸品者多至238人，几占全书2/3，而一向被人们尊为逸品的董其昌、王时敏等，他却列为神品。说明他在沿用以四品论画当中，确实提出了自己的见解。