明憲宗十四年(1478),新都才子楊廷(ting)和(狀元(yuan)楊升庵之父)赴京應考(kao)路經閬中,應僧人之請為該庵題(ti)寫“云林”大匾,此匾保存到(dao)民國(guo)時期。后,庵毀于大火。
孔家(jia)在(zai)庵側修建(jian)了這座孔家(jia)大(da)院。明、清時(shi),孔氏為大(da)戶人(ren)家(jia),以教書為生(sheng),兼營其它(ta)產業,后家(jia)道衰落。1912年、1939年,時(shi)任(ren)川北宣慰使(shi)和川康建(jian)設期成會閬中辦事(shi)處主任(ren)的張瀾先生(sheng)在(zai)此(ci)設署衙(ya)。國(guo)民(min)黨29軍軍長羅廼群也看中此(ci)院,長期居(ju)住。