В Коларгон попадали те, кто отказывался идти на работу, а таких среди уголовников было много. Для «настоящего вора» работать было стыдно. Они этот принцип отстаивали последовательно, что было не так трудно, так как лагерное начальство смотрело на них сквозь пальцы.
Но горе тому политическому, который по какой-либо причине отказался бы выходить на работу! Среди политических это делали лишь те, кому запрещали работать религиозные убеждения. Существовало много всяческих сект, самих различных вероисповеданий, но больше всего было так называемых субботников. Впрочем, не все субботники отказывались от работы, хотя и могли отказаться работать на «антихриста Сталина». Когда обычные дисциплинарные средства, такие как карцер или урезанный паек и т. п., не помогали, их отправляли в Коларгон, где они должны была жить и трудиться среди опаснейших преступников.