Запускаем поток id 61978 с настройками id 1092 Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=11 -1602440484.8749 По данному URL обнаружено 28 объявлений. Попытка добавления объявления id: 242098409 URL объявления: https://www.cian.ru/sale/flat/242098409 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239587891 URL объявления: https://www.cian.ru/sale/flat/239587891 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242098408 URL объявления: https://www.cian.ru/sale/flat/242098408 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241920296 URL объявления: https://www.cian.ru/sale/flat/241920296 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239804023 URL объявления: https://www.cian.ru/sale/flat/239804023 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 236953897 URL объявления: https://www.cian.ru/sale/flat/236953897 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241348144 URL объявления: https://www.cian.ru/sale/flat/241348144 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 235521332 URL объявления: https://www.cian.ru/sale/flat/235521332 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242098502 URL объявления: https://www.cian.ru/sale/flat/242098502 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 237878099 URL объявления: https://www.cian.ru/sale/flat/237878099 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242023018 URL объявления: https://www.cian.ru/sale/flat/242023018 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 237676848 URL объявления: https://www.cian.ru/sale/flat/237676848 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241007976 URL объявления: https://www.cian.ru/sale/flat/241007976 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241671207 URL объявления: https://www.cian.ru/sale/flat/241671207 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 234265993 URL объявления: https://www.cian.ru/sale/flat/234265993 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 238367457 URL объявления: https://www.cian.ru/sale/flat/238367457 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 236344247 URL объявления: https://www.cian.ru/sale/flat/236344247 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 216598231 URL объявления: https://www.cian.ru/sale/flat/216598231 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242071723 URL объявления: https://www.cian.ru/sale/flat/242071723 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240254912 URL объявления: https://www.cian.ru/sale/flat/240254912 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242098005 URL объявления: https://www.cian.ru/sale/flat/242098005 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239780299 URL объявления: https://www.cian.ru/sale/flat/239780299 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241556711 URL объявления: https://www.cian.ru/sale/flat/241556711 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 221062973 URL объявления: https://www.cian.ru/sale/flat/221062973 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240549954 URL объявления: https://www.cian.ru/sale/flat/240549954 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241081777 URL объявления: https://www.cian.ru/sale/flat/241081777 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 231012557 URL объявления: https://www.cian.ru/sale/flat/231012557 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241862438 URL объявления: https://www.cian.ru/sale/flat/241862438 Объявление уже добавлено в базу данных. Время получения кода всех объявлений согласно условиям: 7.5088748931885 Размер части файла логов log/11102020/61978/log_1.txt 6424 Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=12 -1602440492.3952 По данному URL обнаружено 28 объявлений. Попытка добавления объявления id: 241081777 URL объявления: https://www.cian.ru/sale/flat/241081777 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 231012557 URL объявления: https://www.cian.ru/sale/flat/231012557 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241862438 URL объявления: https://www.cian.ru/sale/flat/241862438 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 236796889 URL объявления: https://www.cian.ru/sale/flat/236796889 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241980129 URL объявления: https://www.cian.ru/sale/flat/241980129 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 228253054 URL объявления: https://www.cian.ru/sale/flat/228253054 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 236626378 URL объявления: https://www.cian.ru/sale/flat/236626378 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242023576 URL объявления: https://www.cian.ru/sale/flat/242023576 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242098616 URL объявления: https://www.cian.ru/sale/flat/242098616 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240557710 URL объявления: https://www.cian.ru/sale/flat/240557710 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241920289 URL объявления: https://www.cian.ru/sale/flat/241920289 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242093529 URL объявления: https://www.cian.ru/sale/flat/242093529 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240210113 URL объявления: https://www.cian.ru/sale/flat/240210113 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241920276 URL объявления: https://www.cian.ru/sale/flat/241920276 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240648286 URL объявления: https://www.cian.ru/sale/flat/240648286 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241514204 URL объявления: https://www.cian.ru/sale/flat/241514204 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240545488 URL объявления: https://www.cian.ru/sale/flat/240545488 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240596265 URL объявления: https://www.cian.ru/sale/flat/240596265 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241004031 URL объявления: https://www.cian.ru/sale/flat/241004031 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242006084 URL объявления: https://www.cian.ru/sale/flat/242006084 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239792385 URL объявления: https://www.cian.ru/sale/flat/239792385 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241464687 URL объявления: https://www.cian.ru/sale/flat/241464687 Объявление в базе данных не обнаружено, вносим первичную запись. Поиск пользователя сайта по телефону 79809772052 Пользователь не найден, создаем нового пользователя, ID нового пользователя: 11006668 Координаты метки определены как 39.741908, 43.578785 Строка с адресом была определена: Краснодарский край, Сочи, район Хостинский, микрорайон Светлана, улица Дмитриевой, 32 Запрос к api работающего на основе yandex geocoder https://8-index.onrealt.ru/api-geocoder/ используя данные из json массива https://geocode-maps.yandex.ru/1.x/?geocode=39.741908,43.578785&format=json&results=10 {"locality":{"name":"\u0421\u043e\u0447\u0438","data":{"GeoObject":{"metaDataProperty":{"GeocoderMetaData":{"precision":"other","text":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0421\u043e\u0447\u0438","kind":"locality","Address":{"country_code":"RU","formatted":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0421\u043e\u0447\u0438","Components":[{"kind":"country","name":"\u0420\u043e\u0441\u0441\u0438\u044f"},{"kind":"province","name":"\u042e\u0436\u043d\u044b\u0439 \u0444\u0435\u0434\u0435\u0440\u0430\u043b\u044c\u043d\u044b\u0439 \u043e\u043a\u0440\u0443\u0433"},{"kind":"province","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"},{"kind":"area","name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0421\u043e\u0447\u0438"},{"kind":"locality","name":"\u0421\u043e\u0447\u0438"}]},"AddressDetails":{"Country":{"AddressLine":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0421\u043e\u0447\u0438","CountryNameCode":"RU","CountryName":"\u0420\u043e\u0441\u0441\u0438\u044f","AdministrativeArea":{"AdministrativeAreaName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","SubAdministrativeArea":{"SubAdministrativeAreaName":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0421\u043e\u0447\u0438","Locality":{"LocalityName":"\u0421\u043e\u0447\u0438"}}}}}}},"name":"\u0421\u043e\u0447\u0438","description":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0420\u043e\u0441\u0441\u0438\u044f","boundedBy":{"Envelope":{"lowerCorner":"39.149676 43.395064","upperCorner":"40.010388 44.029925"}},"Point":{"pos":"39.723089 43.585472"}}}},"area":{"name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0421\u043e\u0447\u0438","data":{"GeoObject":{"metaDataProperty":{"GeocoderMetaData":{"precision":"other","text":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0421\u043e\u0447\u0438","kind":"area","Address":{"country_code":"RU","formatted":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0421\u043e\u0447\u0438","Components":[{"kind":"country","name":"\u0420\u043e\u0441\u0441\u0438\u044f"},{"kind":"province","name":"\u042e\u0436\u043d\u044b\u0439 \u0444\u0435\u0434\u0435\u0440\u0430\u043b\u044c\u043d\u044b\u0439 \u043e\u043a\u0440\u0443\u0433"},{"kind":"province","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"},{"kind":"area","name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0421\u043e\u0447\u0438"}]},"AddressDetails":{"Country":{"AddressLine":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0421\u043e\u0447\u0438","CountryNameCode":"RU","CountryName":"\u0420\u043e\u0441\u0441\u0438\u044f","AdministrativeArea":{"AdministrativeAreaName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","SubAdministrativeArea":{"SubAdministrativeAreaName":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0421\u043e\u0447\u0438"}}}}}},"name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0421\u043e\u0447\u0438","description":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0420\u043e\u0441\u0441\u0438\u044f","boundedBy":{"Envelope":{"lowerCorner":"38.996594 43.250258","upperCorner":"40.663697 44.127561"}},"Point":{"pos":"39.759515 43.709823"}}}},"region":{"name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","data":{"GeoObject":{"metaDataProperty":{"GeocoderMetaData":{"precision":"other","text":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","kind":"province","Address":{"country_code":"RU","formatted":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","Components":[{"kind":"country","name":"\u0420\u043e\u0441\u0441\u0438\u044f"},{"kind":"province","name":"\u042e\u0436\u043d\u044b\u0439 \u0444\u0435\u0434\u0435\u0440\u0430\u043b\u044c\u043d\u044b\u0439 \u043e\u043a\u0440\u0443\u0433"},{"kind":"province","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"}]},"AddressDetails":{"Country":{"AddressLine":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","CountryNameCode":"RU","CountryName":"\u0420\u043e\u0441\u0441\u0438\u044f","AdministrativeArea":{"AdministrativeAreaName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"}}}}},"name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","description":"\u0420\u043e\u0441\u0441\u0438\u044f","boundedBy":{"Envelope":{"lowerCorner":"36.52117 43.250258","upperCorner":"41.740426 47.03082"}},"Point":{"pos":"39.610422 45.544904"}}}}} Имя региона 'Краснодарский край' проверяем, используется ли данный регион. Регион был успешно идентифицирован, номер региона: 4 Населенный пункт Сочи был найден в базе данных id: 54 Проверка форм названия Сочи Определяем локацию типа 3, ключевое слово для поиска 'микрорайон': Локация типа 3 была обнаружена в ответе геокодера, имя локации: микрорайон Светлана Локация типа 3 была найдена в базе данных, id: 45 Улица была идентифицирована, имя: улица Дмитриевой ищем ее в базе данных. Улица была найдена, id улицы улица Дмитриевой: 549152 Номер был идентифицирован, имя: улица Дмитриевой, 32 ищем его в базе данных. Номер был найден, id номера улица Дмитриевой, 32: 131291 Имя сгенерировано: sochi-kypit-kvartiru-vtorichnoe-zhilje-ulitca-dmitrievoj-32 Делаем первичную запись в базу данных объявлений. Время обработки изображений объявления ID 241464687 равно 0.0041420459747314, всего было обработано 0 изображений. Завершаем процесс добавления объявления сменой статуса в таблицах ad_4_15 и indexed_ad на 1 https://onrealt.ru/sochi/kypit-kvartiru-vtorichnoe-zhilje/28312804 Проверка обработчиков опции требующих проверки. Расчет качества и рейтинга объявления. Общее время получения объявления ID 241464687 равно 4.0583479404449 Попытка добавления объявления id: 242098436 URL объявления: https://www.cian.ru/sale/flat/242098436 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241691022 URL объявления: https://www.cian.ru/sale/flat/241691022 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240826708 URL объявления: https://www.cian.ru/sale/flat/240826708 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242013561 URL объявления: https://www.cian.ru/sale/flat/242013561 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242380072 URL объявления: https://www.cian.ru/sale/flat/242380072 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241937060 URL объявления: https://www.cian.ru/sale/flat/241937060 Объявление уже добавлено в базу данных. Время получения кода всех объявлений согласно условиям: 10.494771003723 Размер части файла логов log/11102020/61978/log_1.txt 21925 Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=13 -1602440502.9024 По данному URL обнаружено 28 объявлений. Попытка добавления объявления id: 242371029 URL объявления: https://www.cian.ru/sale/flat/242371029 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241004014 URL объявления: https://www.cian.ru/sale/flat/241004014 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239139921 URL объявления: https://www.cian.ru/sale/flat/239139921 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240702103 URL объявления: https://www.cian.ru/sale/flat/240702103 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242010744 URL объявления: https://www.cian.ru/sale/flat/242010744 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 238437044 URL объявления: https://www.cian.ru/sale/flat/238437044 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242339110 URL объявления: https://www.cian.ru/sale/flat/242339110 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 238121447 URL объявления: https://www.cian.ru/sale/flat/238121447 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241609831 URL объявления: https://www.cian.ru/sale/flat/241609831 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 236066124 URL объявления: https://www.cian.ru/sale/flat/236066124 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240006511 URL объявления: https://www.cian.ru/sale/flat/240006511 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 237456942 URL объявления: https://www.cian.ru/sale/flat/237456942 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242098021 URL объявления: https://www.cian.ru/sale/flat/242098021 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240231775 URL объявления: https://www.cian.ru/sale/flat/240231775 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242159947 URL объявления: https://www.cian.ru/sale/flat/242159947 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240999883 URL объявления: https://www.cian.ru/sale/flat/240999883 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 238819206 URL объявления: https://www.cian.ru/sale/flat/238819206 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241977318 URL объявления: https://www.cian.ru/sale/flat/241977318 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241398471 URL объявления: https://www.cian.ru/sale/flat/241398471 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241631741 URL объявления: https://www.cian.ru/sale/flat/241631741 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239102389 URL объявления: https://www.cian.ru/sale/flat/239102389 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240932326 URL объявления: https://www.cian.ru/sale/flat/240932326 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239792383 URL объявления: https://www.cian.ru/sale/flat/239792383 Объявление в базе данных не обнаружено, вносим первичную запись. Ошибка получения массива данных объявления https://www.cian.ru/sale/flat/239792383 Попытка добавления объявления id: 242336157 URL объявления: https://www.cian.ru/sale/flat/242336157 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241157262 URL объявления: https://www.cian.ru/sale/flat/241157262 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242371032 URL объявления: https://www.cian.ru/sale/flat/242371032 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239161008 URL объявления: https://www.cian.ru/sale/flat/239161008 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241750311 URL объявления: https://www.cian.ru/sale/flat/241750311 Объявление уже добавлено в базу данных. Время получения кода всех объявлений согласно условиям: 7.9381151199341 Размер части файла логов log/11102020/61978/log_1.txt 28524 Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=14 Ответ: Test Ошибка 302, возможна проблема с куками 28. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=14 -1602440511.0983 По данному URL обнаружено 28 объявлений. Попытка добавления объявления id: 241508869 URL объявления: https://www.cian.ru/sale/flat/241508869 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239919050 URL объявления: https://www.cian.ru/sale/flat/239919050 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 238102520 URL объявления: https://www.cian.ru/sale/flat/238102520 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 236991563 URL объявления: https://www.cian.ru/sale/flat/236991563 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239756126 URL объявления: https://www.cian.ru/sale/flat/239756126 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 238188867 URL объявления: https://www.cian.ru/sale/flat/238188867 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 233202903 URL объявления: https://www.cian.ru/sale/flat/233202903 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240858312 URL объявления: https://www.cian.ru/sale/flat/240858312 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 237850557 URL объявления: https://www.cian.ru/sale/flat/237850557 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241624928 URL объявления: https://www.cian.ru/sale/flat/241624928 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241832454 URL объявления: https://www.cian.ru/sale/flat/241832454 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 236754368 URL объявления: https://www.cian.ru/sale/flat/236754368 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 232935795 URL объявления: https://www.cian.ru/sale/flat/232935795 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241449261 URL объявления: https://www.cian.ru/sale/flat/241449261 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241078123 URL объявления: https://www.cian.ru/sale/flat/241078123 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241765720 URL объявления: https://www.cian.ru/sale/flat/241765720 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241908813 URL объявления: https://www.cian.ru/sale/flat/241908813 Объявление в базе данных не обнаружено, вносим первичную запись. Ошибка получения массива данных объявления https://www.cian.ru/sale/flat/241908813 Попытка добавления объявления id: 240714160 URL объявления: https://www.cian.ru/sale/flat/240714160 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240067225 URL объявления: https://www.cian.ru/sale/flat/240067225 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241002772 URL объявления: https://www.cian.ru/sale/flat/241002772 Объявление в базе данных не обнаружено, вносим первичную запись. Поиск пользователя сайта по телефону 79584235797 Пользователь не найден, создаем нового пользователя, ID нового пользователя: 11006673 Координаты метки определены как 37.347431, 44.86998 Строка с адресом была определена: Краснодарский край, Анапа, улица Адмирала Пустошкина, 22к8 Запрос к api работающего на основе yandex geocoder https://8-index.onrealt.ru/api-geocoder/ используя данные из json массива https://geocode-maps.yandex.ru/1.x/?geocode=37.347431,44.86998&format=json&results=10 {"locality":{"name":"\u0410\u043d\u0430\u043f\u0430","data":{"GeoObject":{"metaDataProperty":{"GeocoderMetaData":{"precision":"other","text":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0410\u043d\u0430\u043f\u0430","kind":"locality","Address":{"country_code":"RU","formatted":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0410\u043d\u0430\u043f\u0430","Components":[{"kind":"country","name":"\u0420\u043e\u0441\u0441\u0438\u044f"},{"kind":"province","name":"\u042e\u0436\u043d\u044b\u0439 \u0444\u0435\u0434\u0435\u0440\u0430\u043b\u044c\u043d\u044b\u0439 \u043e\u043a\u0440\u0443\u0433"},{"kind":"province","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"},{"kind":"area","name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0410\u043d\u0430\u043f\u0430"},{"kind":"locality","name":"\u0410\u043d\u0430\u043f\u0430"}]},"AddressDetails":{"Country":{"AddressLine":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0410\u043d\u0430\u043f\u0430","CountryNameCode":"RU","CountryName":"\u0420\u043e\u0441\u0441\u0438\u044f","AdministrativeArea":{"AdministrativeAreaName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","SubAdministrativeArea":{"SubAdministrativeAreaName":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0410\u043d\u0430\u043f\u0430","Locality":{"LocalityName":"\u0410\u043d\u0430\u043f\u0430"}}}}}}},"name":"\u0410\u043d\u0430\u043f\u0430","description":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0420\u043e\u0441\u0441\u0438\u044f","boundedBy":{"Envelope":{"lowerCorner":"37.251976 44.858276","upperCorner":"37.375189 44.98518"}},"Point":{"pos":"37.31617 44.894965"}}}},"area":{"name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0410\u043d\u0430\u043f\u0430","data":{"GeoObject":{"metaDataProperty":{"GeocoderMetaData":{"precision":"other","text":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0410\u043d\u0430\u043f\u0430","kind":"area","Address":{"country_code":"RU","formatted":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0410\u043d\u0430\u043f\u0430","Components":[{"kind":"country","name":"\u0420\u043e\u0441\u0441\u0438\u044f"},{"kind":"province","name":"\u042e\u0436\u043d\u044b\u0439 \u0444\u0435\u0434\u0435\u0440\u0430\u043b\u044c\u043d\u044b\u0439 \u043e\u043a\u0440\u0443\u0433"},{"kind":"province","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"},{"kind":"area","name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0410\u043d\u0430\u043f\u0430"}]},"AddressDetails":{"Country":{"AddressLine":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0410\u043d\u0430\u043f\u0430","CountryNameCode":"RU","CountryName":"\u0420\u043e\u0441\u0441\u0438\u044f","AdministrativeArea":{"AdministrativeAreaName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","SubAdministrativeArea":{"SubAdministrativeAreaName":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0410\u043d\u0430\u043f\u0430"}}}}}},"name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u0410\u043d\u0430\u043f\u0430","description":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439, \u0420\u043e\u0441\u0441\u0438\u044f","boundedBy":{"Envelope":{"lowerCorner":"36.809439 44.561828","upperCorner":"37.655311 45.198486"}},"Point":{"pos":"37.378764 44.981177"}}}},"region":{"name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","data":{"GeoObject":{"metaDataProperty":{"GeocoderMetaData":{"precision":"other","text":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","kind":"province","Address":{"country_code":"RU","formatted":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","Components":[{"kind":"country","name":"\u0420\u043e\u0441\u0441\u0438\u044f"},{"kind":"province","name":"\u042e\u0436\u043d\u044b\u0439 \u0444\u0435\u0434\u0435\u0440\u0430\u043b\u044c\u043d\u044b\u0439 \u043e\u043a\u0440\u0443\u0433"},{"kind":"province","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"}]},"AddressDetails":{"Country":{"AddressLine":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","CountryNameCode":"RU","CountryName":"\u0420\u043e\u0441\u0441\u0438\u044f","AdministrativeArea":{"AdministrativeAreaName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"}}}}},"name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","description":"\u0420\u043e\u0441\u0441\u0438\u044f","boundedBy":{"Envelope":{"lowerCorner":"36.52117 43.250258","upperCorner":"41.740426 47.03082"}},"Point":{"pos":"39.610422 45.544904"}}}}} Имя региона 'Краснодарский край' проверяем, используется ли данный регион. Регион был успешно идентифицирован, номер региона: 4 Населенный пункт Анапа был найден в базе данных id: 55 Проверка форм названия Анапа Улица была идентифицирована, имя: улица Адмирала Пустошкина ищем ее в базе данных. Улица была найдена, id улицы улица Адмирала Пустошкина: 708758 Номер был идентифицирован, имя: улица Адмирала Пустошкина, 22к8 ищем его в базе данных. Номер был найден, id номера улица Адмирала Пустошкина, 22к8: 1450658 Имя сгенерировано: anapa-kypit-kvartiru-v-novostrojke-ulitca-admirala-pustoshkina-22k8 Делаем первичную запись в базу данных объявлений. Время обработки изображений объявления ID 241002772 равно 0.0035989284515381, всего было обработано 0 изображений. Завершаем процесс добавления объявления сменой статуса в таблицах ad_4_15 и indexed_ad на 1 https://onrealt.ru/anapa/kypit-kvartiru-v-novostrojke/28312814 Проверка обработчиков опции требующих проверки. Успешная проверка опции type_ad_sales Успешная проверка опции fine_finishing Успешная проверка опции deadline_quarter Успешная проверка опции deadline_year Успешная проверка опции type_sale Расчет качества и рейтинга объявления. Общее время получения объявления ID 241002772 равно 4.5682311058044 Попытка добавления объявления id: 240323198 URL объявления: https://www.cian.ru/sale/flat/240323198 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242127918 URL объявления: https://www.cian.ru/sale/flat/242127918 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239690543 URL объявления: https://www.cian.ru/sale/flat/239690543 Объявление в базе данных не обнаружено, вносим первичную запись. Ошибка получения массива данных объявления https://www.cian.ru/sale/flat/239690543 Попытка добавления объявления id: 239359655 URL объявления: https://www.cian.ru/sale/flat/239359655 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241024919 URL объявления: https://www.cian.ru/sale/flat/241024919 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239694585 URL объявления: https://www.cian.ru/sale/flat/239694585 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 231461632 URL объявления: https://www.cian.ru/sale/flat/231461632 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241538961 URL объявления: https://www.cian.ru/sale/flat/241538961 Объявление уже добавлено в базу данных. Время получения кода всех объявлений согласно условиям: 11.791243076324 Размер части файла логов log/11102020/61978/log_1.txt 44670 Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 29. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 28. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 27. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 29. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 28. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 27. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 29. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 28. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 27. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 29. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 28. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 Ответ: Test Ошибка 302, возможна проблема с куками 27. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=15 -1602440523.7887 По данному URL обнаружено 28 объявлений. Попытка добавления объявления id: 239359655 URL объявления: https://www.cian.ru/sale/flat/239359655 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241024919 URL объявления: https://www.cian.ru/sale/flat/241024919 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239694585 URL объявления: https://www.cian.ru/sale/flat/239694585 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 231461632 URL объявления: https://www.cian.ru/sale/flat/231461632 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241538961 URL объявления: https://www.cian.ru/sale/flat/241538961 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240718838 URL объявления: https://www.cian.ru/sale/flat/240718838 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241365130 URL объявления: https://www.cian.ru/sale/flat/241365130 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242645592 URL объявления: https://www.cian.ru/sale/flat/242645592 Объявление в базе данных не обнаружено, вносим первичную запись. Ошибка получения массива данных объявления https://www.cian.ru/sale/flat/242645592 Попытка добавления объявления id: 241708766 URL объявления: https://www.cian.ru/sale/flat/241708766 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 237871792 URL объявления: https://www.cian.ru/sale/flat/237871792 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239926551 URL объявления: https://www.cian.ru/sale/flat/239926551 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241993269 URL объявления: https://www.cian.ru/sale/flat/241993269 Объявление в базе данных не обнаружено, вносим первичную запись. Поиск пользователя сайта по телефону 79584604424 Пользователь не найден, создаем нового пользователя, ID нового пользователя: 11006675 Координаты метки определены как 39.006736, 45.01864 Строка с адресом была определена: Краснодарский край, Краснодар, Центральный, микрорайон Дубинка, улица Фурманова, 93 Запрос к api работающего на основе yandex geocoder https://8-index.onrealt.ru/api-geocoder/ используя данные из json массива https://geocode-maps.yandex.ru/1.x/?geocode=39.006736,45.01864&format=json&results=10 {"locality":{"name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","data":{"GeoObject":{"metaDataProperty":{"GeocoderMetaData":{"precision":"other","text":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","kind":"locality","Address":{"country_code":"RU","formatted":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","Components":[{"kind":"country","name":"\u0420\u043e\u0441\u0441\u0438\u044f"},{"kind":"province","name":"\u042e\u0436\u043d\u044b\u0439 \u0444\u0435\u0434\u0435\u0440\u0430\u043b\u044c\u043d\u044b\u0439 \u043e\u043a\u0440\u0443\u0433"},{"kind":"province","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"},{"kind":"area","name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440"},{"kind":"locality","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440"}]},"AddressDetails":{"Country":{"AddressLine":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","CountryNameCode":"RU","CountryName":"\u0420\u043e\u0441\u0441\u0438\u044f","AdministrativeArea":{"AdministrativeAreaName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","SubAdministrativeArea":{"SubAdministrativeAreaName":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","Locality":{"LocalityName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440"}}}}}}},"name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","description":"\u0420\u043e\u0441\u0441\u0438\u044f","boundedBy":{"Envelope":{"lowerCorner":"38.846791 44.969055","upperCorner":"39.153835 45.142987"}},"Point":{"pos":"38.975313 45.03547"}}}},"area":{"name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","data":{"GeoObject":{"metaDataProperty":{"GeocoderMetaData":{"precision":"other","text":"\u0420\u043e\u0441\u0441\u0438\u044f, \u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","kind":"area","Address":{"country_code":"RU","formatted":"\u0420\u043e\u0441\u0441\u0438\u044f, \u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","Components":[{"kind":"country","name":"\u0420\u043e\u0441\u0441\u0438\u044f"},{"kind":"province","name":"\u042e\u0436\u043d\u044b\u0439 \u0444\u0435\u0434\u0435\u0440\u0430\u043b\u044c\u043d\u044b\u0439 \u043e\u043a\u0440\u0443\u0433"},{"kind":"province","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"},{"kind":"area","name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440"}]},"AddressDetails":{"Country":{"AddressLine":"\u0420\u043e\u0441\u0441\u0438\u044f, \u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","CountryNameCode":"RU","CountryName":"\u0420\u043e\u0441\u0441\u0438\u044f","AdministrativeArea":{"AdministrativeAreaName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","SubAdministrativeArea":{"SubAdministrativeAreaName":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440"}}}}}},"name":"\u0433\u043e\u0440\u043e\u0434\u0441\u043a\u043e\u0439 \u043e\u043a\u0440\u0443\u0433 \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440","description":"\u0420\u043e\u0441\u0441\u0438\u044f","boundedBy":{"Envelope":{"lowerCorner":"38.647904 44.968214","upperCorner":"39.385178 45.219803"}},"Point":{"pos":"39.048328 45.071186"}}}},"region":{"name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","data":{"GeoObject":{"metaDataProperty":{"GeocoderMetaData":{"precision":"other","text":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","kind":"province","Address":{"country_code":"RU","formatted":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","Components":[{"kind":"country","name":"\u0420\u043e\u0441\u0441\u0438\u044f"},{"kind":"province","name":"\u042e\u0436\u043d\u044b\u0439 \u0444\u0435\u0434\u0435\u0440\u0430\u043b\u044c\u043d\u044b\u0439 \u043e\u043a\u0440\u0443\u0433"},{"kind":"province","name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"}]},"AddressDetails":{"Country":{"AddressLine":"\u0420\u043e\u0441\u0441\u0438\u044f, \u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","CountryNameCode":"RU","CountryName":"\u0420\u043e\u0441\u0441\u0438\u044f","AdministrativeArea":{"AdministrativeAreaName":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439"}}}}},"name":"\u041a\u0440\u0430\u0441\u043d\u043e\u0434\u0430\u0440\u0441\u043a\u0438\u0439 \u043a\u0440\u0430\u0439","description":"\u0420\u043e\u0441\u0441\u0438\u044f","boundedBy":{"Envelope":{"lowerCorner":"36.52117 43.250258","upperCorner":"41.740426 47.03082"}},"Point":{"pos":"39.610422 45.544904"}}}}} Имя региона 'Краснодарский край' проверяем, используется ли данный регион. Регион был успешно идентифицирован, номер региона: 4 Населенный пункт Краснодар был найден в базе данных id: 3 Проверка форм названия Краснодар Определяем локацию типа 3, ключевое слово для поиска 'округ': Локация типа 3 была обнаружена в ответе геокодера, имя локации: Центральный округ Локация типа 3 была найдена в базе данных, id: 10 Определяем локацию типа 4, ключевое слово для поиска 'микрорайон': Локация типа 4 была обнаружена в ответе геокодера, имя локации: микрорайон Дубинка Локация типа 4 была найдена в базе данных, id: 146 Улица была идентифицирована, имя: улица Фурманова ищем ее в базе данных. Поиск и проверка уникальности функцией checkLocationSystem() Была обнаружена одна локация с названием улица Фурманова, id: 1134 Улица была найдена, id улицы улица Фурманова: 1134 Номер был идентифицирован, имя: улица Фурманова, 93 ищем его в базе данных. Номер был найден, id номера улица Фурманова, 93: 2342671 Имя сгенерировано: krasnodar-kypit-kvartiru-vtorichnoe-zhilje-ulitca-furmanova-93 Делаем первичную запись в базу данных объявлений. Время обработки изображений объявления ID 241993269 равно 0.00094699859619141, всего было обработано 0 изображений. Завершаем процесс добавления объявления сменой статуса в таблицах ad_4_15 и indexed_ad на 1 https://onrealt.ru/krasnodar/kypit-kvartiru-vtorichnoe-zhilje/28312817 Проверка обработчиков опции требующих проверки. Успешная проверка опции parking_courtyard Расчет качества и рейтинга объявления. Общее время получения объявления ID 241993269 равно 2.2706959247589 Попытка добавления объявления id: 231460285 URL объявления: https://www.cian.ru/sale/flat/231460285 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 228208900 URL объявления: https://www.cian.ru/sale/flat/228208900 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 234250786 URL объявления: https://www.cian.ru/sale/flat/234250786 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 236226568 URL объявления: https://www.cian.ru/sale/flat/236226568 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 237870664 URL объявления: https://www.cian.ru/sale/flat/237870664 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 238095491 URL объявления: https://www.cian.ru/sale/flat/238095491 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 232979245 URL объявления: https://www.cian.ru/sale/flat/232979245 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 228206124 URL объявления: https://www.cian.ru/sale/flat/228206124 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241756108 URL объявления: https://www.cian.ru/sale/flat/241756108 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241353892 URL объявления: https://www.cian.ru/sale/flat/241353892 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 231462007 URL объявления: https://www.cian.ru/sale/flat/231462007 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 241919508 URL объявления: https://www.cian.ru/sale/flat/241919508 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 239845161 URL объявления: https://www.cian.ru/sale/flat/239845161 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 234420818 URL объявления: https://www.cian.ru/sale/flat/234420818 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 242151321 URL объявления: https://www.cian.ru/sale/flat/242151321 Объявление уже добавлено в базу данных. Попытка добавления объявления id: 240825670 URL объявления: https://www.cian.ru/sale/flat/240825670 Объявление в базе данных не обнаружено, вносим первичную запись. Ошибка получения массива данных объявления https://www.cian.ru/sale/flat/240825670 Время получения кода всех объявлений согласно условиям: 8.164941072464 Размер части файла логов log/11102020/61978/log_1.txt 63706 Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=16 Ответ: Test Ошибка 302, возможна проблема с куками 28. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=16 Ответ: Test Ошибка 302, возможна проблема с куками 27. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=16 Ответ: Test Ошибка 302, возможна проблема с куками 29. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=16 Ответ: Test Ошибка 302, возможна проблема с куками 28. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=16 Ответ: Test Ошибка 302, возможна проблема с куками 27. Открываем URL: https://www.cian.ru/cat.php?deal_type=sale&engine_version=2&offer_type=flat®ion=4584&totime=86400&location[0]=4584&p=16 Ответ: Test Ошибка 302, возможна проблема с куками 29. Получена команда завершения процесса индексации. Достигнуты условия завершения цикла. Общее время работы индексации: 47.491411924362