Страница 1 из 4

Злопамятность kh.google.com / 2007-08

Добавлено: 04 авг 2007, 23:30
A-5
Ну вот наконец-то появилось (?) долгожданное забанивание с пространственным анализом запросов.

Даже медленное последовательное чтение 10х10-tiles прерывалось после трёх пачек. Чтение пачек вразброс из разных снимков вызвало сначала кратковременные местные баны, затем общий длительный (вероятно, суточный).

У кого какие варианты?


Аналогично...

Добавлено: 06 авг 2007, 07:39
gorbva
Пять минут работы с GoogleMV -и пипец, приходите завтра. Бан на сутки.
Я давно подозревал чтов гугле окопались Лица Нетрадиционной Сексуальной ориентации... Так сказать цитадель мирового педерастизма....


так......

Добавлено: 06 авг 2007, 10:39
Hartmann
пишите название и версию проги, которую используете.
У меня GoogleMV 1.2 (допотопная) качает без вопросов, почти весь Днепропетровск выкачал.


Re: Аналогично...

Добавлено: 06 авг 2007, 11:10
Bushman
Как уже говорилось - подобному поведению есть определенная причина.
Снимки гуглу не принадлежат, а передаются ему по лицензии, которая вовсе не такая же, как лицензия на Landsat ("раз купил - можешь свободно распространять дальше"). То, что гугл не обеспечивал невозможность дальнейшего использования данных, размещенных на maps.google, фактически было нарушением лицензии. Другой вопрос, что DigitalGlobe и пр. таким образом себе бесплатную рекламу нефиговую имеют, но не думаю, что у них вдруг стали дофига покупать снимки те, кому они раньше были не нужны.


Re: так...... (software)

Добавлено: 06 авг 2007, 13:23
A-5
Я качаю скриптом - четыре вложенных цикла {tileNumb2khURL -> wget} ((10х10)х10)x10) tiles. Раньше работало с паузами 0.25+2+60+540 сек, два часа перерыва между блоком 10000 tiles.

Сейчас работоспособно в варианте 5+60+60+(ручной выбор несмежной пачки 10x10); блочного интервала нет, и так очень медленное скачивание. Вчера забанилась (но не на сутки) схема 5+30+60+ручное, но 60 на 30 было изменено после продолжительного предыдущего считывания с того же статического IP. Одновременное чтение с одной машины по новой схеме разных снимков (чувствительность к общему трафику) пока не пробовал.



Re: так...... (software)

Добавлено: 06 авг 2007, 14:07
Bushman
Мыслей проанализировать статистику запросов browser'ом при нормальном лазании по maps.google, а также поприкидываться им по полной программе (user agent, куки и т.п.) не было?


Re: так...... (software)

Добавлено: 06 авг 2007, 15:51
A-5
Куки до сих пор вроде бы не были критичны...
user agent - всегда для проформы стояло wget -U Mozilla/1.7.8 ...
Статистикой пока заниматься лень, т.к. даже количество уже имеющихся tiles вызывает депрессию - их скачивание намного проще, чем maintaining.


Re: так...... (software)

Добавлено: 06 авг 2007, 17:37
Bushman
Вот я бы попробовал таки "прикинуться"...
Про скачивание - я тут попробовал зажать стрелку вправо, окошко чудесно слайдится влево, тайлы при этом (очевидно) подгружаются "заранее" (канал позволяет), меня никто не забанил, хотя прослайдился я так от середины Московской до середины Владимирской области по X. Zoom был максимальный для данных низкого разрешения.


Насчет лицензии

Добавлено: 07 авг 2007, 11:46
lalex
были такие же мысли, когда только начинали Гугл раскручивать. Однако ни тогда никиках реальных "улик" не было найдено, ни впоследствии это не подтвердилось. Ходили слухи, не более. А вопрос, конечно, интересен: нынче ведь никто не секретит тайлы - недавно от этого отказался и Яндекс. Причина этому вряд ли пиарная: скорее, скорость доступа требует. Насчет скачивания - только недавно Регетом качал несколько раз по 100 и более штук, проблем не было. Отдельные тайлы задерживаются на несколько секунд, не более. Как начнешь MapBuilderoм или иным наколеночным софтом, сразу проблемы. Советую в первую очередь перейти на скачивание серьезными программами, тогда вопросы возможно отпадут или встанут, но по-другому. <A HREF="http://www.geofaq.ru">http://www.geofaq.ru</A>

Re: Насчет лицензии

Добавлено: 07 авг 2007, 12:04
Bushman
Лицензионное соглашение для пользователей имеется тут http://www.google.com/intl/en_ALL/help/ ... ml если бы ситуация обстояла иначе, то многих пунктов в нем просто не было бы, т.к. они не были бы нужны.