Sous l'ancien régime, la paroisse se divisait en sept confréries :
Tresangle, Kerfôret, La Ferrière, Trescoet, Luminan, Boternic et Grenil.
De cette période, Plumelin a conservé 2 chapelles Saint-Jean-Du-Poteau et Saint-Quidy. Au siècle dernier est venue s'y ajouter celle des Filles de Jésus à Kermaria.
Depuis le 21 novembre 1997, la commune de Plumelin a adopté les armoiries suivantes :
la symbolique rappelle deux familles importantes de la commune : la famille De Langle possesseur de plusieurs seigneuries sur le territoire de Plumelin et la famille Gibon de Plumelin.