Рассказ посвящен случаю в кабинете тюремного писаря, куда привозят корреспонденцию для политических заключенных. Писарь вместе со старшим надзирателем вскрывают и читают письма, зло посмеиваясь над адресатами и отправителями. Они находят письмо из Швейцарии, которого с нетерпением ждет арестант Козловский, но решают утаить его.
Рассказ «На досуге» основан на личных воспоминаниях Александра Грина о том, как в 1903–1905 годах он сидел в тюрьме в Севастополе и ждал писем от уехавшей в Швейцарию Екатерины Бибергаль.