Веб-краулер AppleBot существует

В довідковому центрі корпорації Apple з’явилася сторінка, присвячена веб-краулер (пошуковому роботу) AppleBot, який використовується для збору даних для Siri і Spotlight. Раніше в Мережі ходили численні чутки про його існування, але в Купертіно коментарів на цю тему не давали.В довідковому центрі корпорації Apple з’явилася сторінка, присвячена веб-краулер (пошуковому роботу) AppleBot, який використовується для збору даних для Siri і Spotlight. Раніше в Мережі ходили численні чутки про його існування, але в Купертіно коментарів на цю тему не давали.

При зборі даних Apple буде дотримуватися правил robots.txt і мета-тегів robots. Якщо AppleBot не згадується в robots.txt, то корпорація буде слідувати вказівкам для GoogleBot. Для блокування AppleBot і GoogleBot веб-майстру досить заблокувати тільки GoogleBot.

У Купертино підкреслили, що якщо веб-майстер помітить незвичайну активність з боку AppleBot, то йому рекомендується зв’язатися з фахівцями компанії по email: Apple-NOC@apple.com

Також Apple Insider повідомив, що корпорація «стрімко розширює внутрішню групу пошуку» для побудови власної версії пошукової системи на базі Spotlight.

Читайте также:

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *