hänen isänsä, kauppias, muutti perheasuntonsa Shiraziin vähän ennen Hafizin syntymää ja kuoli varhain pojan ollessa vielä lapsi. Setä vei hänet äitinsä luo. Vaikka isän kuolema jätti perheen hyvin epävarmaan tilanteeseen, Hafez onnistui saamaan hyvän koulutuksen, puhumaan sujuvasti arabiaa ja persiaa ja opettelemaan Koraanin ulkoa hyvin nuorena. Hän painoi myös ulkoa Shirazilaisen Saadin sekä kirjailijoiden Farid-uddin Attarin, Jalal al-Din Muhammad Rumin ja Nezami Ganyavin teoksia.
kerrotaan, että 21-vuotiaana hän piti neljänkymmenen päivän valvojaiset yöineen vuonna 1050 kuolleen runoilija Baba Kuhin haudalla, joka oli kirjoittanut, että se, joka vartioi hänen hautaansa neljäkymmentä päivää ja neljäkymmentä yötä, tavoittaisi rakastetun sydämen. Näiden jatkuvan läsnäolon päivien jälkeen hän tapasi Suufimestari Attarin ja hänestä tuli hänen opetuslapsensa.
hän työskenteli kopistina ja leipurin oppipoikana ennen kuin sai tukea merkittäviltä sponsoreilta. Myöhemmin hänestä tuli uskontotieteen professori . Ennen kuin hän täytti 30 vuotta, hänestä tuli Abu Ishakin hovirunoilija, joka saavutti paljon mainetta ja vaikutusvaltaa. Mubariz Muzaffar vangitsi Shirazin ja muun muassa erotti hafizin virastaan Koraanin tutkimuksen professorina yliopistossa. Siinä vaiheessa ilmestyivät tyrannin sortoa vastustavat ja protestoivat runot. Sha Shuya (diktaattorin poika) otti isänsä vangiksi ja palautti Hafizin entiseen tuoliinsa. Runoilija aloitti työssään suufilaisen hengellisyyden haaran. Hän menetti hallitsijan suosion, minkä vuoksi hän joutui muuttamaan turvallisuutensa vuoksi jo noin 50-vuotiaana ja joutui itse maanpakoon Isfahaniin. Hänen runonsa huokuvat melankoliaa. 52-vuotiaana Sha Shuian nimenomaisesta kutsusta hän päättää maanpakolaisuutensa ja palaa Shiraziin. Hänen myöhempien vuosiensa runous sisältää Jumalan kanssa yhdistetyn mestarin auktoriteetin.