4 июня. 4 июня 1903 года открылся Пятигорский краеведческий музей, основанный членами Кавказского горного общества, научно-просветительской организацией начала XX века. В этот же день в 1916 году в Ставрополе на ул. Параллельной открылась новая соматическая больница (сегодня ул. Ломоносова, 46, корпус филиала краевой клинической больницы). При больнице находился первый губернский родильный дом.
Первоначально музей назывался Горным, включал в свои фонды минералогические и геологические образцы, коллекции монет и оружия, чучела животных, собрание литературы по истории, географии и этнографии Кавказа и Кавказских Минеральных Вод.
Первая выставка Горного музея была представлена взорам посетителей в 1905 году. В 1906 г. Кавказское горное общество получило разрешение на проведение археологических раскопок на Северном Кавказе. Благодаря этому фонды музея значительно пополнились коллекциями археологических предметов. Также в фонды музея были включены экспонаты из музея древностей под открытым небом.
В 1922 г. произошла национализация музея, учреждение стало называться Терский губернский музей. Тогда же от Народного комиссариата по просвещению поступила коллекция художественных произведений русских и зарубежных художников XVIII–XIX веков.
В период оккупации Пятигорска в годы Великой Отечественной войны 1941–1945 гг. фонды музея были значительно разрушены: разграблены этнографические и нумизматические коллекции, пострадали отделы истории и природы, были утрачены полотна выдающихся художников. Но с освобождением города от оккупантов сотрудники музея приступили к восстановлению фондов и возобновлению выставочной деятельности.
Изначально музей размещался в доме Р. Р. Лейцингера, одного из основателей музея (в настоящее время Центр детского и юношеского туризма и экскурсий по ул. Теплосерной, 52). С 1961 г. современное помещение — ул. Братьев Бернардацци, 2. Это памятник архитектуры XIX века — здание бывшей Казенной гостиницы. Здесь был первый круглогодичный санаторий на Кавказских Минеральных Водах, в нём отдыхали самые богатые гости. В настоящее время в этих залах размещаются музейные выставки.
В Пятигорском краеведческом музее хранится более ста тысяч предметов по истории, этнографии, природе, культуре.