Webtun.com - веб обозреватель

Веб-краулер AppleBot существует

23-05-2015, 15:27 Разное Автор: ALupen

В справочном центре корпорации Apple появилась страница, посвященная веб-краулеру (поисковому роботу) AppleBot, который используется для сбора данных для Siri и Spotlight. Ранее в Сети ходили многочисленные слухи о его существовании, но в Купертино комментариев на эту тему не давали.

При сборе данных Apple будет придерживаться правил robots.txt и мета-тегов robots. Если AppleBot не упоминается в robots.txt, то корпорация будет следовать указаниям для GoogleBot. Для блокировки AppleBot и GoogleBot веб-мастеру достаточно заблокировать только GoogleBot. 

В Купертино подчеркнули, что если веб-мастер заметит необычную активность со стороны AppleBot, то ему рекомендуется связаться со специалистами компании по email: Apple-NOC@apple.com

Также Apple Insider сообщил, что корпорация "стремительно расширяет внутреннюю группу поиска" для построения собственной версии поисковой системы на базе Spotlight.

• 
• 0
• 

Комментариев (0) Просмотров: 1 932

Ключевые теги:

КОММЕНТАРИИ

ВОЗМОЖНО ВАС ЭТО ЗАИНТЕРЕСУЕТ

Каким не должен быть сайт?
Каждый вебмастер мечтает о том, чтобы создать такой сайт, который нравился бы пользователям, имел большую посещаемость и вообще был самым лучшим на просторах Рунета. Очень хорошо, если сайт еще и
Покупки в популярном интернет-магазине сумок
Ни одна девушка не может позволить себе выйти на улицу без элегантной сумочки. Причем, неважно, куда она отправляется, на прогулку с друзьями, в театр или на деловую встречу. Модные аксессуары
Стильное оформление жилища
На данный момент каждый человек старается оформить свое жилище не только в соответствии с модными тенденциями, но и привлекательно. Для этого существует огромное количество отделочных и облицовочных
В чем секрет хорошей посадочной страницы?
Посадочные страницы помогают продавать, продвигать бренд, собирать базу потенциальных клиентов. Каков бы ни был профиль фирмы – создание сайтов в Мытищах или оказание парикмахерских услуг, landing
Windows 8: выбор браузера
Выход Windows 8 стал неожиданностью для многих пользователей, привыкших работать с ОС 7-ой версии и ХР. Как сбросить пароль в windows, где находится кнопка «пуск», нужен ли дополнительный антивирус –