Sy teenstander Hippolitus beskryf sy jeug. Callixtus was as jong slaaf die bestuurder van ‘n bank, maar het geld verloor. Hy het uit Rome gevlug, maar is by die see naby Portus gevang en na sy meester Carpophorus in Rome teruggestuur. Sy krediteure het egter gevra dat hy vrygelaat moet word in die hoop dat hy genoeg geld sou verdien om hulle terug te betaal. Callixtus is egter gearresteer toe hy in ‘n sinagoge met Joodse geldskieters baklei het. Weens sy geloof is hy na die soutmyne van Sardinië gestuur. Op voorspraak van Marcia, ‘n minnares van die keiser Commodus is hy saam met ander Christene in 190 vrygelaat. Omdat sy gesondheid sleg was het Pous Victor I hom onderdak verskaf.