HyperNewsBot
HyperNewsBot — це читач, який стоїть за Hyper News. Воно отримує новинні звіти, перелічені на The GDELT Project, та читає їх, щоб підрахувати, що відбулося. Воно ідентифікує себе як HyperNewsBot в своєму агенті користувача.
Що воно робить зі сторінкою
- Воно читає текст, щоб знайти цифри (загиблих, поранених, затриманих тощо), місце та час.
- Hyper News ніколи не показує текст, заголовок, слова автора чи фотографії. Воно показує своє власне речення для кожної цифри та посилання на речення у звіті.
- Текст зберігається не більше 30 днів, щоб його можна було прочитати знову після виправлення, потім видалити.
Як воно поводиться
- Воно підкоряється robots.txt для
HyperNewsBotта для*. - Воно поважає резервації тексту та даних: заголовок
tdm-reservation: 1,<meta name="tdm-reservation" content="1">, файл/.well-known/tdmrep.json(W3C TDMRep) або тег мета-роботів зnoai. Резервована сторінка взагалі не читується. - Воно запитує кожен сайт не більше однієї сторінки кожні кілька секунд та відступає, коли сайт відповідає 429 або 503.
- Воно не реєструється, не проходить за платними стінками та не запускає скрипти сайту.
Як зупинити його
Додати до robots.txt:
User-agent: HyperNewsBot Disallow: /
або резервувати текст та дані, як вище. Щоб посилання на ваші звіти також були видалені, використовуйте Виправлення та видалення та виберіть "Я видавець".