Да, в рамках виртуального окружения Python (virtualenv) вы можете устанавливать любые необходимые модули. Для этого соединитесь с сервером по SSH и выполните следующие команды:
. virtualenv/MyEnv/bin/activate # переключаемся в виртуальное окружение
pip install имя_модуля # устанавливаем модуль
В данном примере подразумевается, что у вас установлено виртуальное окружение в папке virtualenv/MyEnv. Как создать и использовать виртуальное окружение Python, описано здесь.