For kundene og naboene på 125th Street i Harlem i New York, framstår Ray Carney som en hederlig møbelhandler. Han gjør sitt beste for å forsørge seg selv og familien sin, og kona Elizabeth venter deres andre barn. Hennes foreldre liker verken Carney eller den trange leiligheten deres ved T-banelinja, men det føles i hvert fall som et hjem. Få mennesker kjenner til Carneys bånd til den mer lurvete delen av øvre Manhattan, og at hans fasade av normalitet har skjulte sprekker. Sprekker som stadig blir større.
Harlem Shuffle er en kompleks krønike som utspiller seg i det tidlige 60-tallets New York. Det er en familiehistorie maskert som en kriminalfortelling, men også en samfunnsroman om rasisme og makt - og til syvende og sist, et kjærlighetsbrev til Harlem.