Проблема возникла после создания нескольких ssh ключей, сообщение стало появляться в момент попытки ssh подключения, самый быстрый способ - можно использовать параметр -o:
ssh -o 'IdentitiesOnly=yes' user@server1
Можно указать ключ в config файле - ~/.ssh/config:
Host server1
IdentityFile ~/.ssh/id_rsa_server1
Host server2
IdentityFile ~/.ssh/id_rsa_server2
Host demo.server3
HostName server3
PreferredAuthentications publickey
IdentityFile ~/.ssh/id_rsa_server3