Silves è una città bella e attraente con una ricca storia costruita sulle rive del fiume Arade. Il fiume era navigabile in epoca storica e rappresentava un importante legame tra l'entroterra e la costa.
La città, che è costruita sulla cima di una delle più grandi falde acquifere sotterranee nel sud del Portogallo, la falda acquifera Querenca-Silves, a cavallo del fiume e conserva una porta in stile medina, la Porta de Loule, e parti delle pareti di cemento versato che risalgono al tempo di Occupazione moresca
L'area è stata abitata fin dal Paleolitico, ma la città ha raggiunto il suo apice dopo l'invasione moresca della penisola iberica nel 713. Nel X secolo, Silves, allora chiamata Xelb, era la capitale dell'area ora conosciuta come l'Algarve.
Oggi Silves è un luogo attraente e affascinante di caffè all'aperto e profumati aranceti dominati da uno dei castelli meglio conservati dell'Algarve. La Moresca Fortaleza, che vanta una serie completa di mura di arenaria e torri indipendenti, occupa dodicimila metri quadrati in cima alla collina che si affaccia sulla città. Resti dell'Età del Ferro sono stati trovati, insieme a un pozzo, un palazzo del governatore e la Cisterna Grande, una cisterna d'acqua del XIII secolo che un tempo serviva l'intera città. La Cisterna si erge a dieci metri di altezza, è sostenuta da sei colonne e si dice che sia perseguitata dal fantasma di una fanciulla moresca. Un giardino in stile moresco è stato recentemente ricreato ed è aperto tutti i giorni ai visitatori, insieme al resto della Fortaleza, le cui mura offrono una vista impressionante sulla città e sulla campagna circostante.
Sotto la Fortaleza si trova la cattedrale di Silves, costruita sul sito di una grande moschea e fiancheggiata da ampie torri gotiche. La cattedrale conserva parte della sua grandezza originale. Lungo le mura della cattedrale si trovano tombe di vescovi e crociati che morirono riprendendo Silves dai Mori. Di fronte alla cattedrale, molti dei quali risalgono al XVIII secolo.
Una defunta fabbrica di sughero conosciuta come Fabrica do Ingles (fabbrica dell'inglese) ospita un paio di musei e un gruppo di bar, caffè e fontane che prendono vita nel mese di agosto durante l'annuale festival della birra della città. C'è un mercato sul lungofiume, vicino a uno stretto ponte del XIII secolo, ogni mattina dal lunedì al sabato.