Disallow robots from indexing /interact/ (#10666) · c4f2433300 - asonix/mastodon - Forgejo: Lion approved

asonix/mastodon

Ответвление 1

Disallow robots from indexing /interact/ (#10666)

Просмотр исходного кода

This does not provide any new information and may just triple the number
of crawled pages

Этот коммит содержится в:

ThibG

2019-05-02 00:10:19 +02:00

коммит произвёл

Eugen Rochko

родитель 0db269f3dc

коммит c4f2433300

1 изменённых файлов: 1 добавлений и 0 удалений

1

public/robots.txt

Просмотреть файл

 @ -2,3 +2,4 @@
 User-agent: *
 Disallow: /media_proxy/
 Disallow: /interact/