한 가지 이유는 일부 노동자들이 노예들이 해방되면 북부로 와서 일자리를 두고 그들과 경쟁하게 될 것을 두려워했기 때문입니다. 그들은 이 경쟁이 임금을 낮추고 가족을 부양하는 것을 더 어렵게 만들 것이라고 걱정했습니다. 북부 노동자들은 최근 도착한 이민자들과의 경쟁 때문에 때때로 폭동을 일으켰으며, 해방된 노예들도 비슷한 편견과 공격에 직면할 것을 두려워할 수도 있습니다.
또 다른 이유는 일부 노동자들이 경제를 위해서는 노예 제도가 필요하다고 믿었기 때문입니다. 그들은 노예제도가 폐지되면 남부 경제가 붕괴되고 이것이 국가 경제에 부정적인 영향을 미칠 것이라고 생각했습니다. 그들은 노예제도 폐지로 인해 국가가 경기 침체에 빠지면 일자리를 잃을까 봐 걱정했습니다.
셋째, 일부 근로자들은 노예제도 문제가 자신의 삶에 직접적인 영향을 미친다고 생각하지 않았습니다. 특히 1830년대에는 노동 운동 내에서 경제적 또는 철학적 원칙을 바탕으로 노예제 반대 입장을 취한 여러 "자유 노동" 옹호 그룹이 있었습니다. 이러한 "자유 노동" 그룹은 당시 미국 최대 대도시 중심지였던 뉴욕 시의 장인들 사이에서 가장 두드러졌습니다. 그러나 더 넓은 노동 운동은 노예 제도 반대 운동에 덜 관여하는 경우가 많았습니다.
물론, 모든 북부 노동자들이 노예제 폐지에 반대한 것은 아니라는 점을 기억하는 것이 중요합니다. 북부의 많은 백인 노동자들은 노예제도 폐지 운동을 지지하고 노예제도를 종식시키기 위해 노력했습니다.