Nel 1317, quando per costruire il castello di Filippo d'Acaja si decise di prelevare materiali dalle porte romane, quella meridionale era già in rovina, invasa dal fango e dalle immondizie, tanto che furono recuperate pietre anche dalla volta, dopo aver puntellato con travi l'edificio. È evidente quindi che all'inizio del Cinquecento, quando Giuliano da Sangallo eseguì il disegno, della porta antica doveva rimanere molto poco.

Il disegno del Sangallo rappresenta più probabilmente la Porta Palatina, se pure in una versione "interpretata" e con qualche aggiunta di fantasia come le iscrizioni S.P.Q.R.