Los orígenes del puerto de Xàbia, ubicado a los pies del Cap de Sant Antoni, se remontan en el siglo XV, pero es a mediados de XVI cuando adquiere cierta importancia, que irá acrecentándose en siglos posteriores, siendo en el siglo XIX cuando consigue mayor éxito por la exportación de la pasa. Datan de 1871 el primer rompeolas y embarcadero conocidos. Cuando este comercio entró en crisis, a finales del siglo, pasó a desarrollar una actividad meramente pesquera.
Alrededor del Puerto creció el barrio de fuerte carácter marinero con antiguas casetas de pescadores encaladas de planta baja y de calles estrechas.
La llegada de los barcos y posterior venta de pescado en la Lonja se han convertido en un reclamo imprescindible para nuestros visitantes.