Aquesta plaça porta precisament el nom de Piazza di Pietra en al·lusió a les imponents columnes de l' Temple d'Adriano construït l'any 144 pel seu successor, Antonino Pío. En 1696, durant el pontificat de Papa Inocencio XII, la part supervivent de el temple es va constituir en un gran edifici dissenyat per Carlo Fontana per a albergar el Centre d'Oficina de Duanes per als béns que arribaven per terra a Roma. A la fi de segle XIX, l'edifici de Fontana va ser modificat i la seva decoració d'estil barroc va ser substituïda per una altra més senzilla.
El gran monument d'aquesta plaça és sens dubte el Temple d'Adriano, construït sobre una base que avui està oculta sota terra. Un gravat de segle XVI mostra com el temple va ser convertit pràcticament en una casa fortificada. Avui dia l'edifici pertany a la Cambra de Comerç de Roma i l'interior es fa servir per a conferències i petites exposicions.
El temple estava envoltat per un pòrtic. L'estàtua de l'emperador es va col·locar a l'interior, decorat amb baix relleus que mostraven diverses escenes de les províncies de l'Imperi Romà, potser en reconeixement de el temps que va passar Adriano visitant tots i cada un d'aquests llocs. Alguns d'aquests relleus es poden veure precisament en els Museus Capitolins.
Un altre dels edificis d'aquesta plaça és el Col·legi dei Bergamaschi. En 1729, la comunitat d'habitants de Bèrgam que vivien a Roma va construir un enorme bloc entre la Piazza Colonna i la Piazza di Pietra. A més d'una església, Sant Bartolomeo dei Bergamaschi, el bloc comptava amb un hospici i un col·legi per a estudiants de Bèrgam. També tenia alguns pisos que es llogaven i que deixaven uns ingressos addicionals a la comunitat.
Cal destacar en aquesta plaça també el Palau Ferrini, Dissenyat per Onorio Longhi a principis de segle XVII. El nom dels propietaris, la família Ferrini, està escrit a la façana, en la qual apareix un altre nom: Iosef Cini, que al·ludeix a el Comte Giuseppe Cini, que va viure aquí al segle XIX.