Злопамятность kh.google.com / 2007-08

Основной форум пользователей GPS (Global Positioning System)
Правила форума
Для предотврашения спама первые сообщения вновь зарегистрированных пользователей проходят ручную премодерацию.
A-5
Сообщения: 24
Зарегистрирован: 28 дек 2007, 00:48

Re: браузер+скрипт

Сообщение A-5 » 14 авг 2007, 17:12

2Bushman:
Не хотелось верить в плохое ( в куки т.е., точнее в НовыйГеморрой(ТМ) )...

2dyp:
<i>JSа по самые уши...</i> - при том, что какие-то ограничения по объёму всё равно имеются и тёплый сезон реверсному инженирингу не способствует...


Bushman
Сообщения: 2841
Зарегистрирован: 15 июл 2002, 16:44

Re: браузер+скрипт

Сообщение Bushman » 14 авг 2007, 17:35

А может таки просто облегчить процесс доставания куки из browser'а? 8) например, скриптом выкусывать куку из cookies.txt какого-нибудь Firefox?
В качестве временного костыля - почему нет?



dyp
Сообщения: 394
Зарегистрирован: 30 окт 2003, 16:58

Re: браузер+скрипт

Сообщение dyp » 15 авг 2007, 08:19

В качестве временного костыля можно вообще сделать возможность эту куку забивать вручную.


Bushman
Сообщения: 2841
Зарегистрирован: 15 июл 2002, 16:44

Re: браузер+скрипт

Сообщение Bushman » 15 авг 2007, 10:55

Забивать вручную - это как-то многоэтапно.
А тут - пропустить cookies.txt (лежащий в известном месте) через grep, вывести в отдельный временный файл, а потом его подставлять wget'у или еще чему - две команды всего.


A-5
Сообщения: 24
Зарегистрирован: 28 дек 2007, 00:48

Re: скрипт+кука

Сообщение A-5 » 15 авг 2007, 13:54

wget напрямую работает с файлом cookies.txt от Netscape и Mozilla, подстановки не требуется. В других случаях можно использовать <i>wget --cookies=off --header "Cookie: NAME=VALUE..."</i>.

Но куки, которые <i>"Expires: at end of session"</i> в файл cookies.txt не сохраняются. Вручную из окна Cookie_Manager перенёс параметры khcookie в новый файл для ключа --load-cookies с изменённым <i>"Expires: 17.01.2038 22:14:07"</i>. khcookie будут посылаться при каждом запросе - так ли это в случае работы браузера? (2<b>dyp</b>)

Закачка идёт, ждём-с... Надо было бы попробовать послать куку с другого IP (до того, как она будет забанена), но это оставим на другой раз.
Пять первых знаков во вчерашней и сегодняшней куках (с одного IP?/MAC?/без разницы?) одинаковы.


Bushman
Сообщения: 2841
Зарегистрирован: 15 июл 2002, 16:44

Re: скрипт+кука

Сообщение Bushman » 15 авг 2007, 14:31

https://addons.mozilla.org/ru/firefox/addon/2208 - вот эта фиговина часом не форсирует сохранение session cookie в cookies.txt при ее запуске?

A-5
Сообщения: 24
Зарегистрирован: 28 дек 2007, 00:48

Re: скрипт+кука

Сообщение A-5 » 15 авг 2007, 23:21

addon ставить пока не стал, надо посмотреть на предмет security.

10000 tiles скачалось на таймингах, позволявших ранее загрузку не менее 30000 tiles/сутки.

Кука обновилась, четыре первые знака не изменились, пятый уменьшился на единицу. Важнее, однако, появление двух новых символов - теперь их набор стал [-_0-9A-z], что с большой вероятностью говорит о Base64...


A-5
Сообщения: 24
Зарегистрирован: 28 дек 2007, 00:48

Re: куку за уши из JS

Сообщение A-5 » 21 авг 2007, 03:09

2<b>dyp</b>: Между прочим обнаружилось: 1. wget ... http://maps.google.com -> index.html 2. index.html содержит: ... <i>_mSatelliteToken = "строка в Base64"</i>... 3. sed-ом закавыченная строка выкусывается для вклеивания в cookies.txt 4. wget ... --load-cookies=cookies.txt ... http://kh.google.com/kh?n=404&v=... # понеслось

dyp
Сообщения: 394
Зарегистрирован: 30 окт 2003, 16:58

Re: куку за уши из JS

Сообщение dyp » 27 авг 2007, 10:02

Таки да. Похоже с GME проблема будет решена.


A-5
Сообщения: 24
Зарегистрирован: 28 дек 2007, 00:48

offtop: types in GME (2dyp)

Сообщение A-5 » 27 авг 2007, 13:51

Поинтересовался типами в исходниках GME (VTUTypes, например, и другими). Насколько они стандартны/общеупотребимы и опубликованы ли их источники? Я сейчас накапливаю данные в grass (пока простые "послойные" таблицы) для дальнейшего перевода в postgis. Типы на основе <A HREF="http://www.digest.org">http://www.digest.org</A>, совместимые с VPF (VMAP Level 0, на <A HREF="http://www.geoengine.nima.mil">http://www.geoengine.nima.mil</A>) - хотя устарело, но почти ничего не надо сочинять самому, уже готовая классификация.

Ответить

Кто сейчас на конференции

Сейчас этот форум просматривают: Google [Bot] и 132 гостя