Проксирование куки nginx

Перевожу свои приложения на докер. Я имею 4 томката в контейнерах на машине, висят просто на разных портах, и nginx тоже в контейнере, стандартная балансировка.

Как правильно прописать проброс куки, чтобы не было ситуации, что я захожу авторизироваться на сайт, и после авторизации он меня перекидывает на другой томкат опять к странице авторизации, тем самым я не могу пройти дальше авторизации?

Если в nginx оставить один upstream, то все работает корректно. Я думаю что дело в печеньках =)