L'ancien castrum des Obertenghi, datant peut-être des premiers habitants lombards du septième siècle, fut la première colonie défensive de Monterosso. Probablement utilisé par les seigneurs locaux comme les Lagneto, c'est la République de Gênes au début du XIIIe siècle qui fortifia le village pour le protéger des raids sarrasins. Après une brève dispute avec Pise, le château de Monterosso revient en 1254 à Gênes.
Le système défensif génois était impressionnant. Au XVIe siècle, en plus du château, il en vint à inclure treize tours et une courtine, dont reste aujourd'hui l'actuel clocher de l'église de San Giovanni Battista, une ancienne tour de guet, la tour Aurora, située au pied de la colline de San Cristoforo, sous le château et une tour près de la statue du Géant.
Aujourd'hui, le château, surplombant la mer, a presque complètement disparu et sert de cimetière municipal. Trois tours restent en ruines, des pans de murs avec quelques créneaux, vestiges de la citadelle.