王尔烈纪念馆原名“翰林府”，“翰林府”在1991年
辽阳市城市建设中，由市政府出资复建。复建后，布局有所变化。王尔烈纪念馆有东西方向两进院子，大门朝东，占地面积3250平方，一律为仿清式建筑，瓦房32间，于1996年辟为王尔烈纪念馆。目前，该纪念馆有三个展区对外开放，即
王尔烈生平事迹展、王尔烈诗书艺术展和王尔烈故居陈列。
这座翰林府第在建筑布局上，不同于封建时代那种对称封闭式官宦人家的公馆，府第并不大，东西两院，房屋20余间。西院为住宅，东院为书房、花园。门朝南开，门上有马石、
影壁，一间小门楼，
外挂“太史第”，内挂“传胪”两匾，蓝地金字，由
大学士王杰题写。
门里第一趟5间前厅，房脊左右斜插“钢刹寿”，表示为官显赫。第二趟5间后堂，是祭拜祖宗之所，堂里收藏
王尔烈画像和谱书，王尔烈七十和其母九十大寿两架寿屏，在夹壁墙里收藏，作为王氏世代传家之宝。现在，两架寿屏，珍藏在
辽阳博物馆。