Вспомнил. Такое было в raw http request в JMeter, который не поддерживает keep alive. Но если в заголовке запросов указать, что он поддерживает http 1.1 и keepalive, то сервер по спецификации не закрывает соединение с клиентом а течение таймаута, а клиент не поддерживает на самом деле keepalive, и ждёт ответа до закрытия.
Проблема конфигурации. Вряд-ли такая есть в locust