Plungės kultūros centro įkūrimo metais laikomi 1939-ieji. Tuomet Prelato Povilo Pukio rūpesčiu Plungėje buvo pastatyta dviaukštė parapijos salė pritaikyta kultūros reikmėms. Šiuo metu šis pastatas grąžintas bažnyčiai.

Naujieji kultūros namai, kurie 2003 metais pavadinti kultūros centru, buvo pastatyti 1990-aisiais ir užima 4216 kvadratinių metrų plotą. Tai išties modernus, šiuolaikinis pastatas, pritaikytas kultūros reikmėms.