Accanto a palazzo Ferrero, sorgeva la Chiesa e il convento di San Domenico, costruiti sui ruderi del castello del Vescovo Uguccione. Probabilmente, la storia del borgo del Piazzo ebbe inizio da questo castello.