要限制SSH用户仅能访问特定目录，可以通过使用chroot jail来实现。以下是在CentOS中限制SSH用户访问特定目录的步骤：

创建一个新的用户组，并将需要限制访问的用户添加到这个用户组中：

sudo groupadd restrictedsudo usermod -a -G restricted username

编辑sshd配置文件，指定chroot目录为需要限制的目录：

sudo vi /etc/ssh/sshd_config

在文件中添加以下内容：

Match Group restrictedChrootDirectory /path/to/restricted/directory

重启SSH服务以使更改生效：

sudo systemctl restart sshd

现在，限制用户将只能访问指定的目录，且无法访问其他目录。