Lapsuuteni luuserina pohjautuu koomikko Chris Rockin nuoruudenkokemuksiin, ja kertojana on itse Chris Rock. Sarja kertoo kolmilapsisen mustan perheen arjesta Brooklynin kovilla kulmilla. Vanhemmat tekevät pitkää päivää elättääkseen lapsensa, joten pikkusisaruksista huolehtiminen jää varhaisteini-ikäisen Chrisin kontolle. Haastetta tarjoaa myös koulu, jossa Chris on ainoa musta. Erityistaidot ovat enemmän kuin tarpeen - ja niitä näppärällä Chrisillä riittää.