Matteo non ebbe altro partito da prendere, se non quello di ritirarsi a Peschiera presso il lago di Garda, indi a Nogarola nel Veronese, dove con pochi beni di fortuna si pose a vivere una vita libera e campestre, lontano da ogni cura pubblica. Galeazzo si rifugiò colla moglie presso il marchese suo cognato, ed in Ferrara diventò padre di Azzone Visconti. Ho risparmiato al lettore il racconto delle zuffe datesi con varia fortuna in questa ed in altre occasioni, e lo risparmierò sempre; fuorché non siavi qualche circostanza che sembri meritevole di essere conservata nella memoria degli uomini. Matteo non si mostrò mai buon soldato. Galeazzo aveva impeto, ma non condotta. Dovettero perciò soccombere a forze assai preponderanti.
      (1302) Ritornati alla patria i signori della Torre l'anno 1302, dopo venticinque anni d'esilio, mostrarono ne' primi cinque anni d'essere alieni da ogni vita ambiziosa, e di volere essere cittadini di una patria libera; non ottennero dignità alcuna. La città si reggeva co' soli magistrati, il podestà e il capitano del popolo. Si nominava ogni anno il consiglio degli ottocento; e sarebbe stata libera la patria, se i consiglieri avessero ricevuta la loro dignità dall'elezione del popolo. Nondimeno la rispettosa opinione verso de' signori della Torre non era svanita. Morì in Milano Mosca della Torre, e il di lui funerale si celebrò con pompa sovrana, vestendo di porpora il cadavere, e trasportandolo sotto un baldacchino alla chiesa di San Francesco. (1307) Guido della Torre rimase il capo della sua casa, e a lui venne offerta la carica di capitano del popolo per un anno, e l'accettò il giorno 17 dicembre 1307. Fu tanto gradito il governo di Guido alla città, che, al terminare dell'anno, per acclamazione pubblica, non solo venne creato capitano perpetuo del popolo, ad esempio di quanto si era fatto con Martino, con Filippo e con Napo dello stesso casato, ma di più gli venne data la facoltà di fare nuovi statuti; il quale attributo, costituendolo legislatore, gli dava la vera sovranità. Guido si mostrò sorpreso da un impensatissimo avvenimento, quando vide attorniata la sua casa dai popolari applausi; e accondiscese quasi a stento a portarsi alla sala, ove il popolo lo volle accompagnare; ed ivi dagli ottocento radunati consiglieri era aspettato per dare il giuramento della dignità. Quasi crederei sincera la sorpresa, e sincera la renitenza in Guido della Torre, il quale, dimenticando le gabbie orrende che avevano rinchiusi Napo suo zio e il marchese di Monferrato suo amico, non pensò mai a tessere insidie a Matteo Visconti, che, privo di denaro e di forze, viveva tranquillamente alle sponde dell'Adige.