Fra han var ni år gammel ble Kasimir utdannet av Jan Długosz og Filippo Buonaccorsi (også kjent som Filip Callimachus). Da han var 13 år gammel ble han tilbudt Ungarns kongekrone av fraksjoner som satte seg opp mot kong Mattias Corvinus. Kasimir, ivrig etter å forsvare kristendommen mot angripende tyrkere, aksepterte tilbudet og dro til Ungarn for å motta kronen.
Hans onkel Vladislav III, konge av Polen og Ungarn, hadde blitt drept tidligere i slaget ved Varna i dagens Bulgaria i 1444. Kasimir lyktes ikke i sin tronovertagelse og kom tilbake som en flyktning. Hans far, Kasimir IV, fikk ham godt utdannet i offentlige affærer og da hans bror Vladislav ble konge i Böhmen, ble Kasimir gjort til kronprins og arving til Polens trone.
Mellom 1479 og 1484 tilbrakte hans far det meste av sin tid i Vilnius for å ta seg av sine affærer i Litauen. I mellomtiden og farens fravær fungerte Kasimir som viseregent i Polen. Mellom 1481 og 1483 administrerte han staten med stor klokskap og rettferdighet, heter det. Hans far forsøkte å arrangere et ekteskap med en datter av keiser Fredrik III av Det tysk-romerske rike, men Kasimir foretrakk å være enslig. Svekket av overdreven faste utviklet han alvorlige lungeproblemer, muligens tuberkulose. På en reise til Litauen i 1484 ble han syk og døde i Grodno.
Hans levninger ble gravlagt i Vilnius, og hviler i barokkapellet som bærer hans navn i katedralen i Vilnius.
Den hellige Kasimir levde og regjerte med stor verdighet og utøvde stor sjarm og karakter. Flere mirakler er blitt tilskrevet ham.
Helligkåring
Han ble helliggjort av pave Hadrian VI i 1522 og er skytshelgen for Litauen. Den 11. juni 1948 navnga pave Pius XII den hellige Kasimir som en særskilt helgen for alle unge mennesker.