Il tono di quei dialoghi, le accuse prodigate ai pontefici e alla Chiesa indignarono molti, e il mantovano Baldassar Castiglione, famoso autore del Cortigiano, che nel 1524 era ito nunzio del papa in Ispagna, e che morì a Toledo il 1529, si credette in dovere di denunziar severamente il Valdes al papa e all'imperatore. Lagnossene egli, quasi fosse venuto meno alla cortesia mostratagli, e avesse condannato il libro senza conoscerlo. Il Castiglione gli rispondeva una lunga lettera, professando d'avere denunziato quel libro con piena conoscenza, e perchè vi côlse un mar di errori e di calunnie contro le cerimonie, le reliquie, la religione stessa. E qui ragionando punto per punto, non gli perdona il dichiarare empietà che uno dica la messa in peccato. Se un prete è malvagio, se celebra appena levatosi d'accanto a una donna, forse ciò giustifica il rubare gli ostensorj e gl'incensieri? Le ricchezze sono bene spese in onor di Dio, e lo credeano persino i Pagani: ond'è mal gusto quel suo cuculiare le magnificenze del culto. Nè minor torto ha quando scusa Lutero, e trova bisognasse, prima di condannarlo, correggersi delle colpe ch'egli rinfacciava. Di rimpatto il Valdes non v'è obbrobrio che risparmii a Clemente VII, e ciò per discolpare l'imperatore; quell'imperatore che al papa professava affezione e ossequio, al tempo stesso che lo lasciava depredare e oltraggiare in tal guisa, che agli Spagnuoli stessi dolse di quella tragedia. Solo il Valdes esortava Carlo V a tenere cattivo il papa, e giacchè l'aveva in mano, non perdere sì propizia occasione di emancipare la cristianità. «Voi dunque, nuovo riformatore degli ordini e delle cerimonie cristiane, nuovo Licurgo, nuovo conditor di leggi, correttore de' santissimi concilj approvati, nuovo censore de' costumi degli uomini, dite che l'imperatore riformi la Chiesa con tener presi il papa e i cardinali? e che facendolo, oltre al servizio di Dio acquisterà ancora nel mondo gloria immortale?