Многие хотят использовать ssh ключи в свох CI/CD (не одобряю), но давайте делать это правильно:

   before_script:
    - '[[ ! -d /root/.ssh ]] && mkdir /root/.ssh && chmod 700 /root/.ssh'
    - '[[ -f /.dockerenv ]] && echo -e "Host *\\n\\tStrictHostKeyChecking no\\n\\n" > ~/.ssh/config'
    - 'which ssh-agent || (yum install openssh-clients -y; yum clean all -y )'
    - eval $(ssh-agent -s)
    - ssh-add <(echo "$SSH_PRIVATE_KEY")
    - mkdir -p ~/.ssh

В $SSH_PRIVATE_KEY устанавливаем "protected" переменную в интерфейсе самого Gitlab (repo->settings->ci/cd-> vars )

Данный сниппет рассчитан на CentOS, но легко адаптируется по любую ОС, работает в докер окружении (см. строку #2). При таком подходе больше нет нужды помещать id_rsa в репозитории (ему там и не место).  

URL:
Обсуждается: http://www.opennet.dev/tips/info/3132.shtml

• Использование SSH-ключей в Gitlab CI,gg, 09:00 , 21-Фев-20
• Использование SSH-ключей в Gitlab CI,pXeL, 10:10 , 26-Фев-20
• Использование SSH-ключей в Gitlab CI,Аноним, 23:41 , 27-Фев-20
  • Использование SSH-ключей в Gitlab CI,Ano, 18:26 , 07-Мрт-20
    • Использование SSH-ключей в Gitlab CI,Аноним, 10:34 , 13-Мрт-20
• Использование SSH-ключей в Gitlab CI,Дмитрий, 14:14 , 11-Мрт-20
  • Использование SSH-ключей в Gitlab CI,Прыгающий Ленивец, 02:42 , 22-Мрт-23
• Использование SSH-ключей в Gitlab CI,burik666, 17:23 , 11-Мрт-20

https://docs.gitlab.com/ee/ci/ssh_keys/

были ситуации когда через агент очень не удобно работать с ключиком.
думаю кому надо, то тот и без этой трех-этажерки знает что делает :)))

Самое главное ты забыл:
export SSH_PRIVATE_KEY=WIPED;

А для чего это ? все делается в настройках репы

Чтобы во время сборки нельзя было угнать ключ через /proc/$pid/environ.

Есть намного проще вариант.
Добавляем ключ в CI переменных с именем SSH_KEY и типом "File"

chmod 600 "${SSH_KEY}"
ssh -i ${SSH_KEY} -o trictHostKeyChecking=no user@server "deploy cmd"

В этом варианте ключ оказывается на фс контейнера с раннером. В это время его оттуда можно прочитать да и после завершения пайплайна никто не обещал, что данные на диске не останутся. Правда вариант с ssh-add < (echo …) тож кривой, т.к. на время выполнения этой команды ключик будет красоваться в выводе ps, но тут оно хотя бы в персистентное хранилище не пишется

> StrictHostKeyChecking no

За это бить надо.