A muito tempo eu andava atrás de um bom plugin para paginar comentários, uma vez achei o Paged Comments só que ele tinha um pequeno problema, dava pau no css dos comentários, imagina você  um site com mais de 500 comentários em uma notícia, sem não paginar fica muito ruim a leitura, fora que a página fica muito pesada e lenta para o carregamento.

Eis a solução do seu problema em paginar os comentários do wordpress. O Plugin WP Paged Comments resolve seus problemas e ainda dá a possiblidade de customizar o css da paginação que fica no estilo do wp pagenavi.

Faça o download e teste, você ganhara em organização e quem sabe na questão do SEO também, por criar mais páginas.

Para paginar páginas você pode usar o WP Page navi ou o WP Page Numbers