林則徐紀念館原是林則徐祠堂，建于清光緒三十一年。

進入林則徐紀念館，屏墻左右兩邊的石拱門上，橫額分別為“中宗宗袞”及“左海偉人”。祠門外圍屏墻內壁有浮雕虎門銷煙圖，大門上額刻著“林文忠公祠”，儀門兩側回廊陳列了20多面執事牌。

儀門廳后有石道可以直達御碑亭，內有光緒三十一年立的道光三十年“圣旨”、“御賜祭”、“御制碑文”等3塊青石碑。御碑亭的北邊為樹德堂，里面有林則徐坐像。樹德堂的西面為南北花廳，廳的西面有兩層的曲尺樓，原為林家子弟讀書的地方，樓前有草坪、魚池、假山、花木等。

全館為古典式園林建筑，現如今，堂、廳、樓均辟為林則徐生平展室，分林則徐生平事略、林則徐與鴉片戰爭、林則徐與救災、水利，放眼看世界第一人、林則徐手跡等部分。