А что не так? Если открыт листинг директорий через веб, запросто может наиндексироваться такое, что потом волосы дыбом встнут, уже встречали, индексируются всякие кэши плагинов, куски html файлов и т.п. тысячами файлов
Если это тот кэш который должен индексироваться, например кэш картинок, он проиндексируется по ссылкам на сайте. Robots тут не при чем
Окей, может я чего не так понял или разные понятия)
Просто листинг директорий = перечень директорий. Так же как листинг товаров = перечень товаров. А директория = папка.
То есть совет "закрыть листинг директорий" = закрыть перечень директорий на сайте = закрыть сайт весь) по крайней мере так можно его понять)