Esta parte de Xàbia aún hoy conserva su peculiar entramado de calles salpicadas de fachadas blancas, portales arqueados, ventanales góticos y forjados, todo ello rematado por la característica piedra tosca de la zona.
En la época medieval era un pequeño recinto cerrado por una muralla del s.XIII, con torres cantoneras, una probablemente la de En Cairat, que aún se conserva, y que parece que formaba parte de una construcción anterior.
Esta muralla fue derribada en el s. XV para abrir nuevos viales, y se efectuó entonces el nuevo trazado de la murallas con sus puertas: Porta de la Mar, de San Vicent o de la Ferrería y la de Sant Jaume o del Clot.
Cerca de la “Porta del Mar”, se levantó para servir a la gente del mar la Iglesia del Loreto (1515-derribada en 1870), hoy “Jardín del Loreto” con una pequeña construcción de tosca.
Destaca la Iglesia-Fortaleza de San Bartolomé, del S.XIV al XVI, con ampliaciones en los s.XVIII y XIX. La obra principal se encuadra dentro del gótico isabelino. Su importancia y significación hizo que en 1931 fuese declarada Monumento Artístico Nacional.

Su historia comienza en 1304 con la construcción del actual presbiterio. Pero el crecimiento de al población y los ataques de los corsarios berberiscos desde el s. XV aconsejan agrandar la fortaleza. Así en el 1513 comienzan las obras dirigidas por el maestro navarro Domingo Urteaga.

Se trata de una gran nave gótica, encabezada por un ábside, con tres capillas en cada lateral enmarcadas por los contrafuertes. Posteriormente se añadieron a los lados del ábside diversas dependencias (Sacristía vieja, la nova, la Capella de la Comunión).
En el lado norte, en la unión entre el ábside y la nave, está el campanario terminado en el s. XVII, también utilizado como torre de vigilancia.
Su techo formado por bóvedas de crucería. Sobre las capillas corre una galería o triforio con arquitos abiertos a la nave interior y grandes ventanales al exterior debido a su finalidad defensiva.

El principal elemento de construcción es la piedra tosca, siendo sus elementos decorativos en el interior son escasos. También son excasos lo elementos arquitectónicos ornamentales del exterior , destacando los escudos heráldicos sobre las puertas de acceso, las decoraciones vegetales de las impostas, las hojas de cardo, y las bolas de las portaladas. El conjunto está rematado por almenas y dispone de saeteras, vanos para los morteros y dos balcones amatacanados sobre las puertas y otros desaparecidos que conformarían un baranda en parte superior del edificio.
Cumplía perfectamente sus dos objetivos: cubrir las necesidades religiosas del pueblo y defender a la población contra los ataques de los corsarios berberiscos.

En el subsuelo del actual pavimento, existe un desconocido conjunto de criptas y vasos funerarios , por descubrir probablemente del s. XVI.  Confrontando con la fachada lateral de la Iglesia encontramos el Ayuntamiento, del siglo XIX al XX. Su fachada tiene un estilo neoclásico. Son característicos sus “porxens” de la fachada posterior, donde se hacía mercado. En el lado derecho del Ayuntamiento podemos observar un portal de arco ojival, probablemente acceso al primitivo recinto amurallado. Aquí se encontraba la Capilla de San Cristóbal. (S.XVII) que fue levantada sobre un antiguo osario (s. XIII – XV). La ermita acogió la escuela pública. Después se estableció allí la Capilla de la Virgen de los Desamparados que se mantuvo hasta el año 1890. Casi nada queda de esta capilla situada dentro del edificio del Ayuntamiento. A pocos metros de la Pl. de la Iglesia, en la C/ Primícies, encontramos Casa-Palacio de Antonio Bañuls, miembro de la corte y mayordomo de Felipe III. Actualmente alberga el “Museo Arqueológico y Etnográfico Municipal Soler Blasco”. Se trata de un bello palacio del siglo XVII pero con importantes reformas en la 2ª mitad del siglo XIX. Construido en piedra tosca, destaca su galería superior con clara influencia castellana ("porxens").

Conserva el pavimento de baldosas de barro y “mocadorets” verde y blanco (sala VI). Otra necesidad, debido a los brotes de peste tan habituales en la época, era el Hospital (1502), del que sólo se conserva su capilla, la Capella de Santa Ana, en el Carrer d´Avall. Se trata de un pequeño edificio gótico de planta rectangular, realizado en piedra tosca. Destaca un arco de medio punto en su entrada y una bóveda de crucería. Durante la Guerra Civil se produjeron muchas pérdidas en el patrimonio cultural de Xàbia, como es el caso del primer Convento de la Agustinas Descalzas del s. XVII, donde reposaba el cuerpo de Sor María Gallard (fundadora de la Comunidad). Fue destruido en 1936 y sobre este solar se construyó en 1946 el actual Mercado Municipal de Abastos, buscando cierto estilo que no desentonara con la cercana iglesia. También fue destruido en 1936 el Convento de los Mínimos del s.XVII en la Placeta del Convent, y sobre su solar se levantó en 1946 el actual Convento de la Agustinas Descalzas.

En él hay varias pinturas de Soler Blasco. Además de estos monumentos, el Casco antiguo es un entramado de calles estrechas y encaladas, repletas de tosca, enrejados de forja y móbila, donde abundan importantes ejemplos de las edificaciones tanto de la burguesía como de la oligarquía local en sus respectivas épocas que eligieron los alrededores de la iglesia para levantar sus casas.

Existen varios ejemplos de casa casas góticas s.XV al XVII, destacando el Palau dels Sapena (s.XV), con arcos carpaneles en la galería y ventanas geminadas y trilobuladas. Ya del s. XIX, destacan otros edificios propiedad de la burguesía mercantil local dedicada a la exportación de la pasa, y de los propietarios agrarios.

Estos son la Casa dels Bolufer , Casa de Primícies, Casa Abadía, Casa de la Senyoreta Josefina, Casa de Montalbán (Capitán de la flota de pailebotes de la familia Bolufer), y la Casa de Tena (construida en 1857 y rehabilitada recientemente para su uso como Sala de exposiciones.

En 1873 se derriban la murallas de nuevo y se plantea l´eixample (ensanche), con amplias avenidas que favorecerán el tránsito de mercancías hacia el puerto, enlazándolo con la Placeta del Convent, y el crecimiento del pueblo. Ejemplo son las casas de la burguesía local y de los agricultores enriquecidos por el comercio de la pasa construidas en las Av. Principe de Asturias y Av. de Alicante. En este período predomino el estilo ecléctico.