Злопамятность kh.google.com / 2007-08

Основной форум пользователей GPS (Global Positioning System)
Правила форума
Для предотврашения спама первые сообщения вновь зарегистрированных пользователей проходят ручную премодерацию.
A-5
Сообщения: 24
Зарегистрирован: 28 дек 2007, 00:48

Злопамятность kh.google.com / 2007-08

Сообщение A-5 » 04 авг 2007, 23:30

Ну вот наконец-то появилось (?) долгожданное забанивание с пространственным анализом запросов.

Даже медленное последовательное чтение 10х10-tiles прерывалось после трёх пачек. Чтение пачек вразброс из разных снимков вызвало сначала кратковременные местные баны, затем общий длительный (вероятно, суточный).

У кого какие варианты?


gorbva
Сообщения: 640
Зарегистрирован: 17 мар 2014, 07:55

Аналогично...

Сообщение gorbva » 06 авг 2007, 07:39

Пять минут работы с GoogleMV -и пипец, приходите завтра. Бан на сутки.
Я давно подозревал чтов гугле окопались Лица Нетрадиционной Сексуальной ориентации... Так сказать цитадель мирового педерастизма....


Hartmann
Сообщения: 253
Зарегистрирован: 30 июл 2004, 15:23

так......

Сообщение Hartmann » 06 авг 2007, 10:39

пишите название и версию проги, которую используете.
У меня GoogleMV 1.2 (допотопная) качает без вопросов, почти весь Днепропетровск выкачал.


Bushman
Сообщения: 2841
Зарегистрирован: 15 июл 2002, 16:44

Re: Аналогично...

Сообщение Bushman » 06 авг 2007, 11:10

Как уже говорилось - подобному поведению есть определенная причина.
Снимки гуглу не принадлежат, а передаются ему по лицензии, которая вовсе не такая же, как лицензия на Landsat ("раз купил - можешь свободно распространять дальше"). То, что гугл не обеспечивал невозможность дальнейшего использования данных, размещенных на maps.google, фактически было нарушением лицензии. Другой вопрос, что DigitalGlobe и пр. таким образом себе бесплатную рекламу нефиговую имеют, но не думаю, что у них вдруг стали дофига покупать снимки те, кому они раньше были не нужны.


A-5
Сообщения: 24
Зарегистрирован: 28 дек 2007, 00:48

Re: так...... (software)

Сообщение A-5 » 06 авг 2007, 13:23

Я качаю скриптом - четыре вложенных цикла {tileNumb2khURL -> wget} ((10х10)х10)x10) tiles. Раньше работало с паузами 0.25+2+60+540 сек, два часа перерыва между блоком 10000 tiles.

Сейчас работоспособно в варианте 5+60+60+(ручной выбор несмежной пачки 10x10); блочного интервала нет, и так очень медленное скачивание. Вчера забанилась (но не на сутки) схема 5+30+60+ручное, но 60 на 30 было изменено после продолжительного предыдущего считывания с того же статического IP. Одновременное чтение с одной машины по новой схеме разных снимков (чувствительность к общему трафику) пока не пробовал.



Bushman
Сообщения: 2841
Зарегистрирован: 15 июл 2002, 16:44

Re: так...... (software)

Сообщение Bushman » 06 авг 2007, 14:07

Мыслей проанализировать статистику запросов browser'ом при нормальном лазании по maps.google, а также поприкидываться им по полной программе (user agent, куки и т.п.) не было?


A-5
Сообщения: 24
Зарегистрирован: 28 дек 2007, 00:48

Re: так...... (software)

Сообщение A-5 » 06 авг 2007, 15:51

Куки до сих пор вроде бы не были критичны...
user agent - всегда для проформы стояло wget -U Mozilla/1.7.8 ...
Статистикой пока заниматься лень, т.к. даже количество уже имеющихся tiles вызывает депрессию - их скачивание намного проще, чем maintaining.


Bushman
Сообщения: 2841
Зарегистрирован: 15 июл 2002, 16:44

Re: так...... (software)

Сообщение Bushman » 06 авг 2007, 17:37

Вот я бы попробовал таки "прикинуться"...
Про скачивание - я тут попробовал зажать стрелку вправо, окошко чудесно слайдится влево, тайлы при этом (очевидно) подгружаются "заранее" (канал позволяет), меня никто не забанил, хотя прослайдился я так от середины Московской до середины Владимирской области по X. Zoom был максимальный для данных низкого разрешения.


lalex
Сообщения: 167
Зарегистрирован: 03 авг 2011, 00:08

Насчет лицензии

Сообщение lalex » 07 авг 2007, 11:46

были такие же мысли, когда только начинали Гугл раскручивать. Однако ни тогда никиках реальных "улик" не было найдено, ни впоследствии это не подтвердилось. Ходили слухи, не более. А вопрос, конечно, интересен: нынче ведь никто не секретит тайлы - недавно от этого отказался и Яндекс. Причина этому вряд ли пиарная: скорее, скорость доступа требует. Насчет скачивания - только недавно Регетом качал несколько раз по 100 и более штук, проблем не было. Отдельные тайлы задерживаются на несколько секунд, не более. Как начнешь MapBuilderoм или иным наколеночным софтом, сразу проблемы. Советую в первую очередь перейти на скачивание серьезными программами, тогда вопросы возможно отпадут или встанут, но по-другому. <A HREF="http://www.geofaq.ru">http://www.geofaq.ru</A>

Bushman
Сообщения: 2841
Зарегистрирован: 15 июл 2002, 16:44

Re: Насчет лицензии

Сообщение Bushman » 07 авг 2007, 12:04

Лицензионное соглашение для пользователей имеется тут http://www.google.com/intl/en_ALL/help/ ... ml если бы ситуация обстояла иначе, то многих пунктов в нем просто не было бы, т.к. они не были бы нужны.

Ответить

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 137 гостей