На территории музея - усадьбы сохранился двухэтажный кирпичный дом, построенный в 1886 году отцом художника, Михаилом Сафроновичем Герасимовым. В этом доме А.М. Герасимов провел свои детские и юношеские годы и жил здесь вместе со своей семьей после революции, с 1918 по 1925 год.

Мемориальный дом-музей народного художника СССР А.М. Герасимова, включает экспозицию которая создана из подлинных мемориальных экспонатов, когда-то принадлежавших семье художника. В двух комнатах первого этажа размещена документальная экспозиция, рассказывающая о детстве и юности А.М. Герасимова, годах учебы и козловском периоде творчества художника. В витринах архивные документы, биографические материалы, фотографии, рассказывающие о детстве и юности А.М. Герасимова.В большой комнате размещена мебель конца 19 - начала 20 века. В книжном шкафу хранятся книги из его личной библиотеки - издания по искусству, истории, словари по иностранным языкам. А.М. Герасимов самостоятельно овладел английским, французским, немецким, польским и украинским языками и изучал испанский язык. В шкафу, стоящем рядом, - посуда, которой пользовалась семья художника.В гостиной дома-музея - изящный ломберный столик, диван, два кресла, обитые плюшем и немецкий рояль "Арнольд Фибигер". На стене, над роялем, - зеркало в лепной раме. На фоне этого зеркала А.М. Герасимов часто писал женские портреты и цветы. В комнате второго этажа, где раньше размещалась столовая, находится экспозиция рассказывающая о жизни и творчестве А.М.Герасимова, начиная с 1925 года. Здесь же представлены репродукции известных произведений, находящихся в ведущих музеях нашей страны. В гостиной второго этажа находится резной мебельный гарнитур 19 века в стиле модерн, на стене висит портрет матери А.М. Герасимова (1936), ещё при жизни Герасимова в гостиной находился его графический портрет, исполненный Г.С. Верейским (1944).Из гостиной маленькая дверь ведет в комнату родителей художника.

Выйдя из дома-музея, посетители попадают во двор мемориальной усадьбы, на территории которой сохранились хозяйственные постройки конца XIX начала ХХ века: каретный сарай, погреб и амбар, приспособленный в 30-х годах под мастерскую. В мастерской сохранились два мольберта, стол, подставка для натурщика, кисти, краски - все это экспонируется в одной половине мастерской. Во второй половине мастерской предметы утвари и быта, принадлежащие семье художника, а также плуг и подплужник, которыми отец художника обрабатывал землю в с. Панском, близ Козлова. Именно в этой мастерской А.М. Герасимов написал более ста произведений.

12 августа 1981 года, когда исполнилось 100 лет со дня рождения А.М. Герасимова, на площади перед домом-музеем был установлен бронзовый бюст художнику.