吴宅位于学士街梵门桥弄8号，1982年被列为苏州市文物保护单位。
据资料介绍，此宅原为明代正德间大学士王鏊故居的一部分，后几经辗转，方归吴氏。清同治四年（1865年）曾暂借作紫阳书院，俞樾一度寓
此。梵门桥弄原称杨衙前，因明末复社名士杨廷枢及其字杨无咎曾居此而得名，今吴宅为该巷最典型之古宅，是否即为杨廷枢故宅，尚待进一步研究考证。
此宅现存建筑面积2360平方米，占地1600平方米。原有建筑两路五进，坐北朝南，形式古朴，气势宏伟。正路建筑偏西，依次为门厅、大厅及两进楼厅。可惜前面三进已于1981年拆除。仅存的第四进楼厅，面阔七间29米，进深九檩八架14米，东西厢楼各三间，阔10米，深5米。内柱均用楠木，用材规格较大。楼下有前后轩，前檐船棚轩进深较宽，弧度平缓。圆作梁，矮柱圆滑朴素，颇具特色。楼板采用通长宽大本色白木板，承接板搁栅同样采用原色，不施油漆，较为罕见。
纵观此楼规模宏大，形式简朴，具有较强的明代建筑风格。与楼相对紧贴厢楼有一大型砖细照壁，中为一砖雕门楼，采用硬山顶，垛头用小型薄砖细平砌，下枋、兜肚至上枋全为素面，上为较简洁的一斗三升砖细仿木斗拱。两侧照壁采用大块面形成，分上下两节，下部砖细勒脚平素，上部块面在整体砖墙中部做出砖细须弥座，座下带圭脚，较为少见。整体造型体量宏大，古朴简洁，制作精良，为明代遗构无疑。东路房屋全为三开间，依次为偏门厅、旱船式书房、花厅及后楼厅。前、中、后部用封火墙隔断，自成院落。偏门厅与后楼为一般苏州传统形式的建筑。唯中部为一小庭院布局，以湖石假山居中，北有朝南花厅，建筑用料较粗壮，做工较精细。明间为抬梁式，边贴以抬梁式与穿斗式相结合。前架为一船蓬轩，山墙面采用整体水磨砖起边线贴面，工艺水平较高。与花厅相对为一旱船式书房，歇山顶，内为满堂轩，屋角微翘，出檐椽做成微向上弯曲反翘，小巧玲珑，颇具特色。西有小型攒尖顶方亭，制作精巧，使用搭角梁做出八角形藻井。原亭内开门与正路相通。书房、小亭与花厅以廊相连，中间东边为湖石假山，形成一和谐的格局，供主人读书休闲，充分反映出苏州传统的第宅庭院的特色，具有较高的保护价值。