Kolmest küljest merega piiratud Haapsalu mahub 10,59 km2 suurusele maatükile. Vanalinn asub kahe oosiga poolsaarel, mis jätkub loodes mandriga ühinenud laidude ahelikuna - holmidega. Holmide vahel on madalad veekäärud - Suur ja Väike Viik.

Haapsalu miljööväärtusliku vanalinna võib jagada keskaegseks ja 20. saj. alguse kuurordipiirkonnaks. Keskaegne osa on piiskopilinnuse ala koos keskaegse Kooli, Jaani, Vee, Linda, Rüütli ja Väike-Mere tänavavõrgu ja ehitistega. Seda ümbritseb kuurordi kõrgajast pärinevate puitpitsiliste majade vöönd koos Promenaadi, Aafrika ranna ja parkidega.