Go Down Death speelt zich af in een Afro-Amerikaanse gemeenschap, waar misdaadbaas Big Jim Bottoms (Spencer Williams) een succesvol restaurant runt. De komst van een nieuwe predikant (Samuel H. James) in de stad leidt ertoe dat veel van Big Jim"s klanten het jukeboard verlaten om naar de kerk te gaan. Big Jim laat de predikant op de foto gaan in re-enactments van compromitterende situaties met drie aantrekkelijke vrouwen. Tante Caroline, de adoptiemoeder van Big Jim, hoort van het plan en probeert Big Jim ervan te weerhouden zijn plan uit te voeren om de predikant in diskrediet te brengen.