Het museum is gevestigd in een gebouw dat in 1607 als tehuis voor oude mannen werd geopend. Later werd het gebouw een weeshuis en sinds 1913 is het museum. Het Frans Hals Museum bezit de grootste verzameling schilderijen van Frans Hals ter wereld. Behalve schilderijen van Hals, heeft het museum werk van voorlopers en tijdgenoten. Ook meubels, keramiek, glas en zilver staan in het museum opgesteld.