Marc, Dave, webmasters et al...
Just a thought, it might be a good idea to add robots.txt entries to the
sites, so that pages like:
http://developer.postgresql.org/docs/pgsql/src/test/regress/expected/flo
at4-exp-three-digits.out
are not indexed.
Including cvsweb interfaces, as was pointed out on IRC almost took down
the new server when google hit it.
Regards,
John
Есть вопросы? Напишите нам!
✖
Сайт использует файлы cookie для корректной работы и повышения удобства. Нажимая кнопку «Принять» или продолжая пользоваться сайтом, вы соглашаетесь на их использование в соответствии с Политикой в отношении обработки cookie ООО «ППГ», в том числе на передачу данных из файлов cookie сторонним статистическим и рекламным службам. Вы можете управлять настройками cookie через параметры вашего браузера