Muy cerca del Rio Miño, que separa en esta parte de la región a Portugal, se levantan los restos del Castillo de Fornelos. Se emplazaba muy cerca del Río Miño, a tan solo 1 km de la frontera con Portugal. Se levantó en una loma a 118 m, aprovechando la defensa del natural del pequeño valle del Río Ribadil. Sin embargo, el otro flanco se encontraba más desprotegido por la falta de elementos naturales defensivos. Por lo tanto es posible que la fortaleza estuviera pensada, no para resistir, sino para vigilar "a raia" con Portugal
Hoy observamos en total estado de ruína los restos de la torre de homenaje de unos 19 m de altura. Alrededor, diversos muros de sillería asoman entre la maleza. Según cuentas las guías del concello, sobre estas piedras se levantó anteriormente una edificación romana de la que no hemos encontrado ninguna información. Lo único que nos hace pensar en algo romano es la presencia de una vía romana en el concello de Crecente que se dirigía a Tui. Se dice que sobre el siglo X se erigió un monasterio templario, el cual fue destruído para construir esta Torre en el siglo XI. La primera referencia escrita data del año 1158. Su situación, en el límite con el país de Portugal, fue escenario de grandes batallas como las, Alfonso VII contra su primo Alfonso Enriquez rey de Portugal.
Siglos después (s. XV) fueron los Irmandiños los que la destrozaron para que pocos años después la volivera a construir el belicoso Pedro Madruga, quién mantendría aquí grandes batallas contra el Obispo de Tui, Diego de Muros, aliado de los Reyes Católicos, enemigos estos de Pedro Madruga. En una de las batallas, el Obispo sitía la fortaleza con 400 hombres contra una defensa de tan sólo 15. Pedro Madruga y sus hombres se resisten de tal manera con las nuevas armas traídas de Italia, que vencen y vuelven a encarcelar al Obispo de nuevo. Más adelante, la torre fue donada por Sancho I de Portugal a Doña Aldonza Vázquez de Fornelos y Fernán Pérez Castro fundadores de la Casa de Fornelos.
