Pelosi, som är den första och enda kvinna som varit talman, kommer dock att sitta kvar som ledamot i kongressen.
Beskedet kommer efter att Republikanerna under natten till torsdag säkrat 218 mandat, alltså majoritet, i det amerikanska representanthuset.
Under de senaste åren har den ilska som riktats mot Nancy Pelosi blivit hotfull. Under attacken mot Kapitolium den 6 januari 2021 sökte pro-Trump-upprorsmakare efter henne - och förra månaden attackerade en manlig angripare Paul Pelosi, talmannens make, med en hammare i parets hem i San Francisco, medan hon var i Washington, skriver CNN.
Demokraterna väljer nya ledare den 30 november och USA:s nya kongress svärs in den 3 januari.
Enligt CNN är Hakeem Jeffries, 52 år, en trolig efterträdare till Pelosi som ledare.