En "Cleanin' Out My Closet", Eminem se dirige a su madre, Debbie Mathers, e intenta reconciliarse con ella. La canción habla sobre la ira que sintió cuando era niño, cuando era pobre y maltratado. También aborda el tema de su matrimonio fallido con Kim Scott. - La canción fue generalmente bien recibida por la crítica. Steve Huey de AllMusic la elogió, llamándola "un relato brutalmente honesto de la crianza del rapero". - "Cleanin' Out My Closet" es el segundo sencillo extraído del álbum, después de "Without Me". - A diferencia del sencillo anterior, "Cleanin' Out My Closet" es una canción seria inspirada en los eventos de la infancia y las relaciones de Eminem. - En la canción, Eminem expresa su ira hacia su madre, Debbie Mathers, por la forma en que lo crió. - En el estribillo, Eminem se disculpa sarcásticamente con su madre por lastimarla y hacerla llorar, pero se venga mostrando al mundo lo que él piensa que su madre era. - Se convirtió en el segundo sencillo entre los diez primeros del álbum, alcanzando el número cuatro en el Billboard Hot 100 en Estados Unidos.