Os comentários são sempre importantes para um site, mas não são fundamentais, até porque são vistos pelos motores de busca como conteúdo secundário.
Se eu comentar num site (estou a falar de um comentário com pés e cabeça), e este ficar visível para tudo e todos. Caso alguém pesquise uma palavra chave ou uma frase em especifico, que se relacione e eu tenha referido no meu comentário, é possível que o artigo/página apareça nos resultados da pesquisa. Se vai aparecer nas primeiras páginas ou não, isso já vai depender do conteúdo principal do site e da sua qualidade perante o motor de busca utilizado.
se o teu site é sobre batatas, poderá fazer sentido uma pessoa com um site sobre tomates fazer um comentario no teu site.. pois ambos são sobre legumes ...
Os links que acompanham os comentários para além de terem quase sempre um péssimo "texto âncora", usam a tag no follow (ou geralmente usam), logo não têm valor nenhum para os motores de busca.