戦国時代、当地を治めていた多賀谷氏の居城（館）をイメージして設計されています。館内は、常設展示室、企画展示室、講座室、体験学習室等から成り、常設展示室では、「歴史」「水とのたたかい」「農家のくらし」「くらしの道具」「ゆかりの人々」等のコーナーに分け、実物資料、パネル、映像等でわかりやすく展示しています。さらに「横瀬夜雨記念室」では、詩人として多大な業績を残した、横瀬夜雨の人物像を直筆の原稿、パネル、映像等で紹介しています。