Segue aqui o tutorial de como voce pode limitar a quantidade de botões que aparecem quando eles são pesquisáveis.

Antes:

Depois

Na sua pergunta com botões

Habilite a Opções Pesquisáveis e adicione no ID CSS - Respostas o seguinte nome:

multiple-answer

Depois vá em Configurações > Customize o css e cole os seletores abaixo:

@media screen and (width > 764px) {
	#multiple-answer {
    	max-height: 110px; /* Para Desktop */
    	overflow: hidden;
  }
}

@media screen and (width <= 764px) {
	#multiple-answer {
    	max-height: 300px; /* Para Mobile */
    	overflow: hidden;
  }
}

Caso queira exibir mais ou menos linhas, pode alterar a altura nos valores com comentários.

E PRONTO, seu componente está configurado.