Muzej se nalazi u palati Bujović, prelepom kamenom zdanju iz 1694. godine. Već i sama arhitektura zgrade muzeja dovoljan je razlog da se poseti i vidi. A u muzeju se nalaze pisana i slikana svedočanstva, kao i predmeti koji od zaborava čuvaju bogatu istoriju ovog kraja. Interesantno je da je muzejska zbirka najvećim delom prikupljena donacijom građana koji su na taj način doprineli da zaostavština njihovih predaka ne bude zaboravljena. Muzej danas ima pomorsku, istorijsko-umetničku i etnografsku zbirku, sa više od 2000 izloženih predmeta. Najveći broj eksponata potiče iz perioda XVII i XVIII veka, kada je Perast bio na vrhuncu svoje moći.