Не существует единого мнения о том, сколько мужчин, подписавших Конституцию США — или, в более широком смысле, делегатов Конституционного конвента 1787 года, — также были поработителями.
По данным Института американской истории имени Гилдера Лермана, из 55 делегатов, присутствовавших на заседании конвента в Филадельфии, «около 25» были поработителями. Фонд конституционных прав утверждает, что 17 из 55 делегатов были поработителями и в общей сложности содержали около 1400 порабощенных людей. В книге «Подписавшие Конституцию», опубликованной в 1976 году Службой национальных парков, помимо того, что Джеймс Мэдисон назван поработителем, отмечается, что еще 11 подписантов «владели или управляли плантациями или крупными фермами с рабами», а затем называются их имена: Ричард Бассет, Джон Блэр, Уильям Блаунт, Пирс Батлер, Дэниел Кэрролл, Дэниел из Сент-Томаса Дженифер, Чарльз Пинкни, Чарльз Котесворт Пинкни, Джон Ратледж, Ричард Доббс Спейт и Джордж Вашингтон. Также известно, что Бенджамин Франклин порабощал людей.