Vestborgen blev grundlaget for byen Kalundborg, som opstod omkring den. Den ældste bydel, kaldet [[Højbyen (Kalundborg)|Højbyen]], ligger umiddelbart øst for Vestborgen. Kalundborg blev befæstet i flere faser i 1200- og 1300-tallet med flere fæstningsmure.<ref name="fortæl"/> I den forbindelse blev også [[Kalundborg Slot]], der ligger øst for Højbyen, opført. Dette skete i 1300-tallet, og sandsynligvis med [[Valdemar Atterdag]] som bygherre. Ny forskning og arkæologiske fund har dog fået [[Kalundborg Museum]] til at komme med en teori om, at Kalundborg Slot allerede blev opført i sidste halvdel af 1100-tallet, hvilket vil have betydet, at de to borge har eksisteret samtidig allerede fra byens tidlige historie.<ref>[http://sn.dk/Kalundborg/Teori-Oestborgen-og-vestborgen-var-samtidige/artikel/409524 Teori: Østborgen og vestborgen var samtidige]. [[sn.dk]]. Hentet 13/6-2017</ref>  Det nyere Kalundborg Slot har dog haft størst betydning og allerede omkring år 1600 var Vestborgen forsvundet.<ref name="by-borg">''Kalundborg by- og borgruiner'' en del af ''Danmarks Runer 10'' (1992) [[Miljøministeriet]] og [[Skov- og Naturstyrelsen]]. S. 18-21</ref>
Historie Bygninger,_konstruktioner_og_anlæg