Краснодарский государственный историко-археологический музей-заповедник ведет свою историю с 1879 г., когда региональным историком, войсковым старшиной Е. Д. Фелицыным (1848-1903) 22 июля 1879 г. был основан Кубанский областной статистический комитет и музейная комната при нем.
Первыми экспонатами Кубанского Войскового этнографического и естественно-исторического музея стали подарки, пожертвования населения и личные собрания Е.Д. Фелицына по археологии, этнографии, палеонтологии.
Экспозиция «Кабинет редкостей. История войскового музея» рассказывает о заведующих музея в дореволюционный период и лицах, принимающих самое активное участие в его развитии и деятельности. Также выставка иллюстрирует многогранность и необычайную широту направлений в экспозиции Войскового музея, самими яркими предметами которой были предметы его дарителей. Сегодня на выставке из коллекций дарителей представлены археологические и палеонтологические находки, этнографические предметы, вооружение, домашний обиход китайцев и японцев, китайское серебряные ювелирные украшения эпохи середины XIX века.