В спецификации robots.txt нет директивы Allow (противоречивую директиву поддерживает только бот ПС Яндекс), инструкции со звездочкой (Disallow: *.gif) так-же нет. А символ # служит для объявления комментария
Если у вас индексируются ссылки, содержащие #, значит вы непосредственно ссылаетесь на них. Можно попробовать закрыть их от индексации добавив атрибут rel="nofollow" к тегу <A>:
<a rel="nofollow" href="/store/#!/Грунты-и-субстраты/c/4322197/offset=0&sort=priceAsc"></a>
Но не факт. https://help.yandex.ru/webmaster/controlling-robot/html.xml#nofollow
Мы избави
Transformer reacted to a post in a topic:
запретить индексировать #!