A jégmadarak az első évben költik, és a párképzés általában februárban kezdődik. Ha a hímnek és a nősténynek szomszédos territóriumai vannak, ezek a költési szezonra egyesülhetnek.
A fészeküregét mindkét madár egy alacsony patakpart kőmentes homokos talajába ássa, általában a tetejétől kb. 0,5 m-re. A madarak a növényzettől mentes, függőleges partot választják, mivel ez megfelelő védelmet nyújt a ragadozókkal szemben.
A fészekalagút általában 60-90 cm hosszú, és 6 cm átmérőjű, a madárnál alig szélesebb. A fészekkamra végén egy enyhe mélyedés van, hogy a tojások ne guruljanak ki, de a fészekbe nem visznek anyagot. Gyors egymásutánban 2-3 fészekaljat nevelnek, általában ugyanabban a fészekben.
A 6-7 tojásból álló első fészekaljat március végén vagy április elején rakják le. A tojásokat mindkét felnőtt kelteti, és a fiókák 19-21 nappal később kelnek ki. Minden fióka naponta 12-18 halat képes megenni, és felváltva etetik őket, amint egy fióka megetetett, a fészek hátsó részébe húzódik, hogy megeméssze az ételt, így a többieknek előrébb kell költözniük.
A fiókák általában 24-25 napos korukban készek elhagyni a fészket, de ha a halellátottság rossz, akár 37 nap is eltelhet. A fészekből kikerülve a kicsinyeket mindössze négy napig etetik, mielőtt a felnőttek elűzik őket a területről, és megkezdik a következő költést.