Показываю свой рабочий процесс: как собрать корректные robots.txt и llms.txt для поисковиков и AI-краулеров, какие правила я закладываю и какие ошибки дорого стоят.