漁山與石谷同邑，相友善，而畫亦相埒，惟漁山老年，好用西洋法作畫，雲氣綿渺凌虛，迥異平日。相傳其後竟從西教，故有浮海不歸之說，然無確證也。故友王潤甫汝玉，昔嘗語人雲︰“昭文張約軒通守元齡，曾得楊西亭所寫漁山小像，出以索題，上有上海徐紫山跋雲︰余嘗于邑之大南門外，所謂天主墳者，見臥碑，有漁山字，因剔叢莽視之，乃知即道人埋處。命工扶植之，碑中間大字雲︰天學修士漁山吳公之墓。兩邊小書雲︰公諱歷聖，名西滿，常熟縣人，康熙二十一年入耶穌會，二十七登鐸德，行教上海嘉定，五十七年在上海，疾卒于聖瑪第亞瞻禮日，壽八十有七。康熙戊戌季夏，同會修士孟由義立碑。蓋道人入彼教久，嘗再至歐羅巴，故晚年作畫，好用洋法。西亭此像作于辛酉，其時猶未入教也，余憶張浦山《畫征錄》，稱石谷因漁山借其所撫大痴畫幅不還，遂與絕交。今觀此事，知石谷之絕交，蓋因漁山入彼教，而非為借畫不還。石谷事親至孝，人品本高，舊交割席，不忍顯言，故特假細事為藉口耳。”
