Днями в офіційному блозі Яндекса для вебмайстрів з'явилася новина про зміну правил використання сервісу Яндекс.XML. Якщо раніше при підтвердженні телефону для облікового запису надавався ліміт в 1000 запитів на добу, то тепер добовий ліміт парсинга розраховується на основі популярності підтверджених в Яндекс.Вебмастере сайтів. Акаунти з відсутніми підтвердженими сайтами не мають тепер можливості використовувати сервіс.
З одного боку зрозуміло бажання Яндекса знизити навантаження на свій сервіс і дати можливість використовувати його більше за призначенням. Однак, Яндекс.XML був єдиним легальним способом знімати позиції в пошуку, не зачіпаючи при цьому пошукову видачу, не навантажуючи її і не впливаючи на дані показників Wordstat. На даний момент працюють також старих лімітів, але через 3 місяці залишаться лише ті, які позначені новими правилами Яндекс.XML.
Зважив чи Яндекс всі плюси і мінуси даного нововведення або відділи Яндекс.XML працюють, не погоджуючи зміни з відділом веб-пошуку?
видимі плюси
- Розвантаження кількох веб-серверів
Як вказав автор новини, ліміти вводилися з метою найбільш раціонального використання ресурсів сервісу веб-майстрами.
видимі мінуси
- Збільшення навантаження на пряму видачу Яндекса
Великі компанії та аналітичні сервіси, що використовують Яндекс.XML для знімання позицій, переорієнтуються на парсинг основний видачі Яндекса, таким чином, навантажуючи її замість xml.yandex.ru .
- Вплив на показники Яндекс.Wordstat
У вордстат з'явиться більшу кількість накручених запитів, що спотворить дані не тільки для оптимізаторів, а й для рекламодавців. Зміна правил Яндекс.XML побічно вплине на ціни реклами в Яндекс.Директ.
- Вплив на поведінковий фактор
CTR видачі по ряду комерційних запитів значно знизиться, так як багато хто з них будуть автоматичними. Це може торкнутися і ранжир формулу, впливаючи на якість пошукової видачі.
- Ринок проксі і антікапчі збільшиться
Своїм нововведенням Яндекс породжує збільшення ринку проксі і антікапчі, замість створення легальних платних інструментів для знімання важливих аналітичних даних.
Що думають аналітики і власники аналітичних сервісів з приводу дій Яндекса?
думки експертів
Станіслав Ставський , Екс-менеджер антіробота в Яндексі
Я думаю, що головною метою Яндекса в даному випадку є рішення внутрішньої проблеми "зниження роботне навантаження в години пік". Те, що заодно зі зниженням навантаження можна завдати неприємностей сервісів парсинга - лише один з плюсів прийнятого рішення. Але, в принципі, не здивуюся, якщо одночасно з анонсованим запуском посилиться алгоритм фільтрування роботів на видачу і капча стане показуватися роботам частіше. Адже завдання "подорожчання парсинга" безпосередньо пов'язана з завданням "зниження навантаження".
Все одно, звичайно, будуть парсити - через проксі, антікапчі, додавати в вебмастерскіе акаунти "ліві" сайти, але я допускаю, що в самий найближчий час можна чекати підвищення цін на послуги сервісів, парся видачу Яндекса.
Цікаво відзначити, що за останні кілька місяців Гугл також сильно ускладнив життя подібних сервісів, ускладнивши парсинг своєї видачі. Цілком допускаю співпрацю двох пошукових систем по даному питанню і обмін інформацією про роботів. І на місці менеджерів пошукових систем, що відповідають за роботів, прагнув би до цього.
Євген Пошібалов, керівник біржі посилань Sape.ru
Очевидно, що до поточної схемою роботи інтернет-сервіси і seo-компанії (як основні споживачі) вже давно адаптувалися і створили собі аккаунти по 1000 запитів. Нові правила "гри" практично повторюють цю досить "сумну" схему, тільки з іншого ракурсу. Особисто я вважаю як цю, так і попередню ідею в корені невірної. Про що навіть пару раз розмовляв з А.Садовскім 2-3 роки тому.
Найоптимальніший для Яндекса шлях вирішення цього питання або відключити взагалі цю історію, так як частини вебмайстрів це просто не потрібно, а другий частини виділеного обсягу точно не вистачить, або ж зробити це в цивілізованій формі, причому з фінансовою вигодою для Яндекса. Це дуже просто, береться технологічна компанія - наприклад це може бути будь-який більш-менш великий сервіс з напрацьованою репутацією - як Sape.ru і закінчуючи Драйвлінком і іншими невеликими сервісами. Далі ця компанія отримує прямий канал до XML, забезпечує створення зручних інструментів для роботи з ним і надає їх в публічний доступ вебмастерам і сервісів - певний обсяг - безкоштовно, при перевищенні - платно (але дуже недорого), з агрегированной передачею грошей Яндексу за вирахуванням% .
В даному випадку компанії буде вигідно стежити за тим, щоб не було "халявщиків" з сотнями акаунтів, а з Яндекса знімається головний біль з управління цим бардаком і забезпечується додатковий дохід, який я б оцінив у 1-3 млн. Дол на рік. Щось типу ЦОП XML. Ну або закривати цю історію, так як ні до чого хорошого воно знову не приведе. Проте, керівництво Яндекса поки ігнорує цю можливість як заробити, так і зняти з себе купу певних проблем, таких як парсинг природної видачі і так далі.
Михайло Сливинський, керівник відділу пошукової аналітики компанії Wikimart
На жаль, поки не видно розширення можливостей для веб-майстрів і оптимізаторів. Шкода. Досить очевидно, що оптимізатори дуже різні і далеко не всі прагнуть заробити свій шматок хліба, погіршуючи екосистему спамние посиланнями або бредотекстамі.
При цьому ринку вкрай потрібна маркетингова інформація і аналітика. Зокрема, це і результати пошуку, і статистика запитів, і позапросная конверсійних і багато іншого. Зрозуміло, якийсь фільтр в будь-якому випадку потрібен. Але чому цей фільтр реалізується через спроби заборони парсинга, а не через комерційну продаж доступу до сервісів - мені не зовсім зрозуміло.
Станіслав Поломарь, керівник напрямку пошукового просування і аналітики компанії webit
Якщо розглядати дане зміна з точки зору вебмастера, у якого один або кілька сайтів, то в середньому його це не сильно зачепить. Виходячи зі статистики в кілька сотень сайтів - середній корпоративний сайт, який має певну посилальної масою і трафіком, отримує ліміт 490. Сайти з великим індексом при інших рівних можуть отримати 1000. А великі проекти 2900. Таким чином при наявності 1-2 подібних сайтів той ж ліміт в 1000 запитів збережеться.
А ось агентства або компанії, робота яких пов'язана з пошуковою оптимізацією, - явно програють. Тут потреби значно вище, так як компанія банально сильно більше вебмастера займається аналітикою (видимість своїх проектів і їх конкурентів, індексація та інше).
Наприклад, зараз наша компанія використовує тільки XML для роботи з видачею Яндекса, але при даних змінах ми змушені будемо використовувати парсинг видачі безпосередньо. Навіщо компанії підштовхувати до цього незрозуміло, так як (будь така можливість) ми могли б цілком користуватися платним тарифом (з розумним ціноутворенням звичайно;))
На підопічних проектах були помічені наступні значення лімітів: 10-34-150-490-1000-2900. З приємних «булочок» - піддомени великих проектів дають внесок 2900 нарівні з основним. Чи не відомо правда наскільки це довго не прикриють;))
Олександр Люстік, керівник проекту Key Collector (LegatoSoft). ведучий блогу SEOM .info
Нові ліміти явно чергова затягування вузла на зашморгу, примітивних методах знімання даних. Всі давним давно купували активовані акаунти, навіть не обтяжуючи себе купівлею сім-карт, як це було раніше. Збільшували ліміти. Купувалися десятки тисяч акаунтів, з збільшеними лімітами в XML. Яндексу це набридло 🙂 мабуть. Новий виток. З одного боку "законослухняним", почасти, лімітів вистачить. Хоча для більш-менш професійних завдань їх виявиться замало. Для "домогосподарок" піде.
"Дрочево" піде в видачу. Більше банів проксі, більше витрат на масові і промислові обсяги. Поки так, далі знову все буде добре і буде черговий вузлик на зашморгу 🙂 Я думаю такі репресії роблять ринок більш вузьким, ті хто не можуть адаптуватися будуть "прогинатися" під великих гравців. В цілому це добре, клієнти теж будуть платити трохи більше 🙂
Юрій Кушнеров, керівник сервісу SeoLib.ru
Як нам здається, на ринок в цілому це ніяк не вплине. Нововведення торкнуться лише сегмент SEO-сервіси, які активно використовують XML для парсинга видачі Яндекса. У цій ніші, можливо, буде переділ ринку, так як багатьом невеликим компаніям, дійсно, «перекриють кисень».
Позиція Яндекса в даному випадку ясна (і вони її не приховують). Це не «ще один камінь в оптимізаторів», а оптимізація власних ресурсів (саме тому в різний час доби кількість запитів буде змінюватися. Коли Яндекс вільний - Парс на здоров'я. Коли немає - вибачите). До речі, така ситуація спостерігається вже давно. У пікові години, часом, віддаються повністю порожніми.
Що ж стосується простих веб-майстрів, то для своїх власних потреб тієї кількості запитів, що видається, має вистачати. Але судячи з того, що ми спостерігаємо в панелі вебмастера xml.yandex.ru - система ще не дороблена і тестується, цифри не зовсім адекватні. Поки будемо чекати. Панікувати причин не бачимо.
Євген Трофименко, аналітик, власник сервісу tools.promosite.ru
До цього, очевидно, довели покупці сімок для парсинга ХМЛ. Ну нічого - зараз будуть створювати сайти не тільки під продаж посилань, але і під отримання лімітів ХМЛ. До речі, я на tools.promosite.ru попрошу людей делегувати не дуже потрібні їм ліміти на мене (просто так або в обмін на якісь сервіси, в іншому випадку доведеться обмежувати доступ - у мене ХМЛ використовується часто). Наприклад, можна замість цього доступу давати аналітику за встановленими посиланнями, я тут скачав всі сайти-донори і встановлені посилання.
А що ви думаєте з приводу даної новини?
XML працюють, не погоджуючи зміни з відділом веб-пошуку?Що думають аналітики і власники аналітичних сервісів з приводу дій Яндекса?
А що ви думаєте з приводу даної новини?
