centos 设置 git 服务器遇到的问题，求大佬解惑

想在自己的 VPS 上放一个 git 远程库，百度下基本步骤都差不多，打开 RSA 认证，创建 SSH 密钥对，导入公钥，一一照做了，唯独有一步，新建一个 git 用户用来运行 Git 服务，因为 vps 只有我一个人用，一直都是 root 登录，所以这一步我就省了，其它设置好后在客户端 clone 远程的库，还是提示要输入密码，是哪里出错了么，是不是我对这个创建 git 用户这一步理解错了，这一步是不能省的，求解？