Правильные апдейты Яндекса - пробивка апов от 2017-12-27
Апдейты Яндекса, проверка апов 30 раз до 8 утра (по популярности не чаще, чем раз в 5 минут), позже - не проверяется. Free tier ночной Яндекса:
28 декабря 2017
[1:50 RU+EN]
1:50 Текстовый апдейт: выложен индекс по 25 декабря 2017
6:43 Степень изменения выдачи: 4.1%
27 декабря 2017
[2:20 RU+EN]
2:20 Текстовый апдейт: выложен индекс по 24 декабря 2017
6:46 Степень изменения выдачи: 4.9%
26 декабря 2017
[4:00 RU+EN]
4:00 Текстовый апдейт: выложен индекс по 23 декабря 2017
4:00 Степень изменения выдачи: 4.4%
Комментарий: в Яндексе тщатся сделать инкрементальные апдейты, поэтому ломали оператор date. Все исправлено на основе других методов (поиск по экспериментальным сайтам) Число сайтов за сегодня (2024-11-21). Список всех апдейтов.
Ниже приводится число найденных сайтов страниц по запросам вида date:YYYYMMDD и группам "языков". В левой колонке - день и час, в который был сделан запрос. Когда в базе появляются страницы с прошлыми датами - это "текстовый" апдейт, выкладывание в индекс данных по страницам. 2017-12-25 2017-12-26 [2017-12-27] 2017-12-28 2017-12-29 |
2017-12-27 час пробивки\дата | 2017 12 27 | 2017 12 26 | 2017 12 25 | 2017 12 24 | 2017 12 23 | 2017 12 22 | 2017 12 21 | 2017 12 20 | 2017 12 19 | 2017 12 18 | 2017 12 17 | 2017 12 16 | 2017 12 15 | 2017 12 14 | 2017 12 13 | 2017 12 12 | 2017 12 11 | 2017 12 10 | 2017 12 09 | 2017 12 08 | 2017 12 07 | 2017-12-27 23:00 | 0.9M | 31K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 22:00 | 2M | 31K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 21:00 | 2M | 31K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 20:00 | 0.7M | 31K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 19:00 | 2M | 31K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 18:00 | 1M | 31K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 17:00 | 2M | 32K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 16:00 | 1M | 31K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 15:00 | 0.5M | 32K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 14:00 | 2M | 33K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 13:00 | 2M | 32K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 12:00 | 0.8M | 32K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 11:00 | 1M | 33K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 10:00 | 2M | 35K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 09:00 | 2M | 35K | 25M | 115M | 15M | 0.1M | 0.1M | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 08:00 | 0.6M | 35K | 17M | 77M | 8M | 0.1M | 61K | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 07:00 | 1M | 36K | 8M | 27M | 8M | 45K | 27K | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 06:00 | 0.8M | 36K | 31K | 8M | 1M | 19K | 7K | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 05:00 | 1M | 38K | 31K | 30K | - | 2 | 4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 04:00 | 1M | 42K | 31K | 30K | 1000 | 2 | 4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 03:00 | - | 1M | 32K | 30K | 6K | - | 6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 02:00 | - | 1M | 31K | 30K | 28K | - | 6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 01:00 | - | 1M | 31K | 30K | 27K | - | 6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | 2017-12-27 00:00 | - | 2M | 32K | 30K | 29K | - | 6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - |
Степень изменения выдачи (взвешенная и невзвешенная) с группировками по степени конкурентности запросов и по длине запроса в словах.
В каждой группе от 30-40 до сотни запросов.
В выдаче до и после апдейта ищутся совпадающие упорядоченные пары урлов (1-2), и смотрится, какая доля из 49 таких пар осталась в выдаче. Это вычитается из единицы = степень изменения выдачи. Так, с парами, сделано для того, чтобы бан какого-нибудь сайта их топа не был принят за изменение выдачи (он просто сдвинет очередь вверх, а если бы учитывались не пары - то все 50 сайтов изменили бы позиции).
Взвешивание - это еще вес каждой измененной пары в общей массе: вес(pos)=0.074*2(-pos/10)
28 декабря 2017
[1:50 RU+EN]
1:50 Текстовый апдейт: выложен индекс по 25 декабря 2017
6:43 Степень изменения выдачи: 4.1%
27 декабря 2017
[2:20 RU+EN]
2:20 Текстовый апдейт: выложен индекс по 24 декабря 2017
6:46 Степень изменения выдачи: 4.9%
26 декабря 2017
[4:00 RU+EN]
4:00 Текстовый апдейт: выложен индекс по 23 декабря 2017
4:00 Степень изменения выдачи: 4.4%
Комментарий: в Яндексе тщатся сделать инкрементальные апдейты, поэтому ломали оператор date. Все исправлено на основе других методов (поиск по экспериментальным сайтам) |