KJP edendas ka Eesti kujutavat kunsti, teda peetakse Eesti esimeste karikatuuride autoriks. Tema päevaraamatust on leitud akvarelljoonistusi, mida ta oli oma kaastudengitest joonistanud, nende põhjal tehti hiljem puulõiked. Karikatuurid ilmusid Tallorahwa Postimehes 7. augustil 1859.
Tallorahwa Postimees ja esimesed karikatuurid.
Petersonile pühendatud mälestussammas asub Tartus Toomemäel ja rändurile omaselt on pronksist Petersonil käes matkakepp.
Mälestusmärgi autorid on skulptor Jaak Soans ja arhitekt Allan Murdmaa.
Toona ei lubatud alusele vaskkirjas kirjutada kuulsat nelikrida: kas siis selle maa keel / laulutuules ei või / taevani tõustes üles / igavikku omale otsida? – see keelati esialgu ära, sest aasta oli siis 1983.
Vaata ka postitust