>>4777
Собрал бы все рабочие качалки и поместил в оп-пост.

>>4779
Чиочую этого кот бы сделал-куна
еще один кот бы сделал-кун

Там уже просил, на всякий случай и здесь попрошу кодер-куна добавить поддержку http://ponibooru.413chan.net/

>>4784
Ух, ты. Какой хороший сайт. Запомнил.

Реквестирую поддержку http://www.zerochan.net

А с ii.booru.org ваша качалка работает?

>>4784
Здесь http://files.mail.ru/4SN7YX . Там косяк с explicit и questionable пикчами. Специально прога не лезет на страницу с подробностями, поэтому миссаются.

>>4787>>4788
Если не завтра (работаю), то послезавтра.

>>4789
Спасибо. А если в тэгах прописывать специально, всё равно не?

>>4790
Ссылка на пикчу определяется по тамбу, в тамбе пикча левая, а по ссылке на страницу пикчу не определишь (если, конечно, не загрузить эту страницу и не посмотреть, но для этого надо дофига допиливать, а так лень :/).

>>4791
Было бы кошерно напрячь тебя этим на досуге, но всё равно спасибо, не буду зажираться. Респект тебе от всех руброни.

>>4792
Да загонялся в свое время, сейчас только на доделках :) .

C g.e_hentai.org связаны две проблемы:

1) После поиска выдается предварительный список сетов, в котором нужно пометить нужные темы (сэты). Но их может быть много и неудобно каждый кликать чтобы поставить галочку. А кнопка "Check" в заголовке неактивна - серого цвета и не нажмается. То есть нельзя выделить все и нажать Check - нужно долго кликать мышкой на каждом чекбоксе.

2) g.e_hentai.org выдает такое сообщение из-за слишком быстрых запросов:
"Your IP address has been temporarily banned for using automated mirroring/harvesting software and/or failing to heed the overload warning. The ban expires in 57 minutes 0 seconds"
Можно ли ввести медленный режим, чтобы вставлять между запросами какой-то интервал (может даже в настройках подбирать его величину)?
На нем много всего хорошего, а скачать очень трудно.

Пишу g.e_hentai.org т.к. этот адрес здесь забанили и банят по айпи тех, кто его пишет... (маньяки)

imagegraber v. 10734, 10735, 10736
Никак не могу понять - почему 12.06.2011 картинки с g.e_hentai.org раскладывались по подкаталогам с именами сетов, а сейчас (15.06.2011) сваливаются в одну кучу в одном каталоге. И имена файлов другие.

Было бы очень здорово, если бы graber умел записывать все теги, связанные с картинками в какой-то текстовый файл (txt/xml/html)
Надежнее всего сохранять файл рядом с файлом добавляя расширение, например 01.jpg.xml - т.к. у некоторых картинок не уникальные имена. Но можно и записывать в один большой файл или один файл в каталоге. Главное - чтобы все теги сохранялись, а картинки не изменялись.

g.e-hentai.org убран из спамфильтра, если что.

>>4807
sqlite и md5/sha1.

Как обычно, когда ты имеешь планы, в советской россии планы имеют тебя. Поэтому задерживаюсь с ыыбурой и зерочаном.
>>4799>>4806
Проверю, поправлю.
>>4807
Вообще-то можно сохранять список, там формат csv.

>>4812
>Вообще-то можно сохранять список, там формат csv.
А, да, совсем забыл, там все тэги в куче, а для каждой пикчи указан порядковый номер тэга. Тогда придумаю что-нибудь.

Перезалил http://files.mail.ru/98XZA3

>>4787>>4788
Добавил.

>>4799
1) Теперь можно делать check
2) Добавил поле для ручного ввода минимального промежутка времени между запросами, но все-таки рекомендую уменьшить количество потоков.

>>4806
Нашел только проблему, при которой при сохранении грабер путал ехентай с е621 (следовательно после загрузки не правильно определял метод скачки), пофиксил.

>>4828
Спасибо!

Под вайном не работает. Жаль.

>>4828
С g.e_hentai.org оказалось проблема с настройками - как только удалил .ini файл, заработало - стало раскладывать по подпапкам.

Проблема у g.e_hentai.org в том, что когда программа пытается делать много запросов (даже просто к вебстраницам), то блокируется IP адрес.
То есть задержка должна быть даже когда собирается список изображений. А может вообще количество обращений с одного IP ограничено?

>>4811
База была бы неплохо, но труднее вытаскивать оттуда, да и поодержку базы данных лепить только ради этого имхо слишком. А вот сsv-подобный формат прост, даже лучше чем xml.

>>4830
Зачем тебе под вайном, когда в предыдущем треде тысячи нативных?

>>4834
>поодержку базы данных лепить только ради этого имхо слишком
>sqlite
>3 строчки кода и 1 дллка

http://files.mail.ru/E17E4C

>>4807
Можно сохранять список в виде цсв: имя файла;тэги через пробел.

Подправил баг, при котором с ыыбуры оценка и рейтинг попадали в тэги.

>>4834
Задержка между запросами во время загрузки 3 сек, качается в 1 поток (последовательно).
Скорее всего есть промежуток времени(прим. 1 мин.) при превышении которого считается, что человек на такое не способен.

Когда graber пытается создать подкаталог с именем альбома, которое содержит знак "?" или другие запрещенные символы, - он обламывается и пишет ошибку (картинка конечно пропускается).

>>4853
Странно, вроде делал проверку на запрещенные символы, проверю.

А можно сделать так, что с нескольких имеджборд прога скачивала?

>>4864
кажется можно 2 или 3 проги одновременно запустить

Можно, но не удобно =

Я к тому, что выделил нужные имджборды, поставил качать и ушел по делам/пошел спать...

>>4876
Так делать плохо, тупо. А вообще хотел замутить загрузку нескольких списков подряд, но забил со временем.

Ясно... А возможно ли устроить скачивание с http://minitokyo.net/ ?

Все-таки при скачивании с g.e-hentai.org graber пытается создавать папки со знаком вопроса в имени сета. Например при запросе:
Ookiku nattemo Fate
Получаются ошибки:

24.06.2011 15:51:11 Line: 0, http://kim9.hentaiverse.net/ehg/image.php?f=7b1c6f08665cd0ad0febf9e10b99368c00e4da09-189657-1200-841-jpg&t=363588-b3ab6f2a2c256b6d3daec0c9cfb0dd43e759
3bce&n=000.jpg Cannot create file "C:\graber\downloads\Ookiku nattemo Fate\g.e-hentai.org\(C79) [FASTEST LAP (MIO)] Ookiku nattemo Fate ga Sukidesuka? (Mahou Shoujo Lyrical Nanoha)\000.jpg". The filename, directory name, or volume label syntax is incorrect
...........
...........
...........
24.06.2011 15:51:33 Line: 26, http://kim9.hentaiverse.net/ehg/image.php?f=2cd5ebf44744eab96bcb60b16ec5f57e1b9330fd-321954-1119-1600-jpg&t=363588-3e73d7df78a1fefef01cd7f42fa8d78ced0
9822d&n=022.jpg Cannot create file "C:\graber\downloads\Ookiku nattemo Fate\g.e-hentai.org\(C79) [FASTEST LAP (MIO)] Ookiku nattemo Fate ga Sukidesuka? (Mahou Shoujo Lyrical Nanoha)\022.jpg". The filename, directory name, or volume label syntax is incorrect


И такое в очень многих сетах - там часто в названиях сетов используются вопросы и других недопустимые для названий папок символы.

Добавьте по возможности.
http://www.animepaper.net/
http://www.animewapers.com/

При работе в пиксивом прога создаёт список только на 10 страниц, т.е. всего 200 файлов. Раньше лимит был в 1000 страниц. Нельзя ли это как-то исправить?

>>4898
У меня все в порядке. Ключевые слова какие используешь?

>>4902
Странно, попробовала включить программку на другом компьютере, и там она действительно замечательно работает. А вот на моём компе создание списка по абсолютно любому тегу обрывается на 10 странице, и хоть ты тресни! У меня такое чувство, что мой IP был внесён в какой-то чёрный список, для которого ограничены некоторые функции. Ладно, придётся теперь через другой комп списки создавать…

Стив, проверь как у тебя качает со safebooru. У меня качает только миниатюры, которые даже не скачиваются корректно...

выдает "29.06.2011 1:02:43 Line: 5, /data/8d/6f/8d6f9be577bdb5ded2068f75623a4ab1.jpg Unknown Protocol" при скачивании с е621
пофиксите

>>4903
Сотри файл с настройками - у меня тоже были другие глюки пока не стер файл settings.ini

>>4913
Да, кажется именно safebooru подставляет для graber'a вместо картинок заглушку, а при открытии в браузере всё нормально.

И еще хотелось бы фикса для g.e-hentai.org с его недопустимыми именами сетов

Это потому, что в список добавляет локальные, а не абсолютные инет-адреса.
Наверное ты говоришь о e621.net - у меня то же самое. Исправить можно записав на диск список, потом заменив в текстовом редакторе /data/ на http://e621.net/data/ и потомзагрузить этот список - далее запустить скачивание и скачивать.
Но хотелось бы фикса в самой программе graber.exe
К сожалению автор где-то делся ;)>>4905

>>4914
Ой у меня все ответы перемешались в сообщении Ж) Придеца вам напрячь мосх чтобы прорчитать ;)

>>4914
Удаление settings.ini не помогает.

>>4917
Если это из-за слишком частых обращений, тогда попробуй увеличить интервал запросов на странице Download. А если его нет там, - тогда в текстовом файле settings.ini найди queryinterval=1 и увеличь цифру. К сожалению, я не знаю единицы в которых он задается. Если это секунды, то всё просто, а если миллисекунды - тогда умножай на 1000 чтобы получить секунды.

Возможно, твой богиньский инет на этом компе слишком хорош - и скорость скачиванияч или запросов превышает допустимые для pixiv.

Если не получится не огорчайся - вот тебе вместо картинок
---------/)/)-------
-------(':'=)------
----(")(")..)-----

Уезжал из города, постараюсь в ближайшие дни новый билд с фиксами запилить.
>>4920
Там пробрема с пиксивом, а не ехентаем. Не могу сказать, что не так, т.к. не могу воспроизвести ошибку. Я тоже тэстю на 8мбитах, так что скорость вряд ли имеет место.

>>4921
ой хорошо.

а мегабиты мегабитам рознь - это вот игроки хорошо знают. скорость иожет быть и 20 мегабит, а пинг слишком долгий.

http://thedoujin.com Вот здесь тоже как-бы сеты, но реализованы они как бы в виде цепочек следующий/предыдущий - если нажать Edit, то там в полях они указаны, а еще там указано название в полях Title или Source.

>>4921>>4925
Думаю, тут действительно не в интернете дело, ибо во-первых он у меня относительно медленный, а во-вторых когда я пробовала запускать на другом компьютере программу, выход в интернет был тем же самым, но тогда всё работало.

>>4925
Очевидно. Но если пиксив не чувствует разницы между 10мс между запросами, то и <1мс вряд ли будет ругаться. Да и не возможно такое, т.к. минимальное время запроса примерно ~200мс тупо из-за самого пиксива. Список же получается последовательно по 1й странице.

>>4928
Какой-то геморройный способ качать додзи. Ведь есть е-хентай.

Перезалил
http://files.mail.ru/F3Y8A0

>>4895
Внезапно, не оказалось вопросительного знака в валидаторе имен, поэтому он его пропускал. Починил.

>>4913
Раньше в е621 формат строго соответствовал донмаи и бехойми, сейчас же вместо полного пути ссылки они использую короткий (без доменного имени). Поправил.

Новых бур пока не добавлял.

Можно устроить скачивание определенного количества артов? Т.е. указал число, допустим 30, он и нашел тебе 30 картинок?

>>4937
Но зачем?

>>4937
Можно же просто в списке выделить 30 картинок или сколько захочешь

Что-то с g.e-hentai.org по-прежнему проблема блокировки айпи из-за скорости скачивания.
Я поставил задержку на максимум (10), но это совсем не заметно.
Особенно быстро перебираются страницы при пропуске уже имеющихся файлов. Тогда сайт блокирует доступ с сообщением

An Error Has Occurred
You are opening pages too fast, thus placing a heavy load on the server. Back down, or your IP address will be automatically banned. (Strike 0)

А у graber это показывается как статус MISS и он... продолжает пропускать изображения до конца списка.

Короче говоря - задержку нужно настраивать в Settings и в миллисекундах. И эта задержка должна касаться всех, абсолютно всех обращений к сайту, включая запросы вебстраниц и запросы GET. Это проще сделать в виде "фильтра", через который будут пропускаться все внешние запросы - фильтр будет притормаживать очередь запросов.

>>4941
Верно. Я забыл добавить задержку для пропускаемых файлов, мой фейл. Поправлю в ближайшее время.

>>4943
Нет, при пропуске паузу поставить я не забыл. Косяк оказался несколько глубже. Переработал процесс очередей, сейчас вроде все должно годно работать.

http://files.mail.ru/6QIQU9

Объясните плиз вот на danbooru.donmai.us если искать по тэгам shota или loli то выводятся куча страниц, но они пустые - без картинок. А картинки с этими тэгами точно есть. Почему так?

>>4948
Оплати преимум и будут картинки.

нет, серьезно? а почему именно эти тэги?

Привет программист-кун. Парочка вопросов:
1. К этой программе вообще планируется инструкция? Ничего непонятно же! .А если и понятно, то только некоторые вкладки.
2. Русификация планируется?
3. Не скачивает с фуррибоору е627. Что делать?
(Список файлов выкачивается, но он не верен)

>>4951
Серьёзно. За премиум ты получишь лолей и шот.

>>4952
это самая понятная прога которую я пробовал

>>4953
и давно такие ограничения на danbooru.donmai.us ?
особенно по этим тэгам?

>>4952
>3. Не скачивает с фуррибоору е627. Что делать?
Скачать последний билд. Как минимум в последнем билде все хорошо.
На ангийском ведь понятнее же! Даже инструкция не нужна! А вот если была на русском, то пришлось бы подробный гайд по работе писать.

>>4956
>Cute, work-safe images of fully clothed girls should not be tagged as loli -- that is what the <a href="/wiki/show?title=child">child</a> tag is for.</p><p>Images tagged as loli cannot be seen without a privileged account. This is due to the advertisers not wanting their ads being seen alongside loli images. See <a href="/forum/show/4987">forum #4987</a> for further details.</p><p>If you are not sure whether or not a post should be tagged as loli or shota, ask in the <a href="/forum/show/33650">loli/shota check thread</a>.

Хорошо скачивание пошло.
А теперь объясни как пользоваться 2й вкладкой с метаданными.

От мануала на английском/русском не откажусь.

>>4965 интерфейс интуитивно понятен же

>>4959
>А вот если была на русском, то пришлось бы подробный гайд по работе писать.

Тогда запили всплывающие подсказки на английском. Ну не знаю я о + и - вставки тегов в файл. И о метаданных ничего непонятно же

>>4968
Метаданные получаются только у стандартнобур (гелбуру, данбуру, имоута и т.д. на тех же движках). Для каждого тега ведется счет, сколько раз он попадал в список. Можно фильтровать по количеству совпадений (cnt. filter). После выбора нужных тегов можешь выбрать пикчи с этими тегами (check/uncheck->by tag), дадут выбрать 2 варианта выборки: присутствие хотя бы 1го тега (or) или всех (and).
Не сделал для остальных бур потому, что тэги необходимо было брать со страницы каждой отдельной пикчи, а это пиздец как удлиняет процесс загрузки и приводит к самым непонятным глюкам (на пиксиве у меня постоянно менялась кодировка, дня 3 пытался пофиксить и потом просто выпилил функцию).

>>4968
В общем случае "чтобы можно было и сохранять и не сохранять". Если учитывать определенный частный случай, то при сохранении тэгов в файле хэш будет отличаться от оригинала.

Мануал постараюсь на выходных запилить (на русском).

>>4968
кстати, арт по вакфу.

>>4969
и тэги не все сохраняются, а только те, которые в запросе были

>>4971
Нет, все, что заданные каждой отдельной пикче.

>>4973
а сохранение их отдельно в файл xml/csv/txt ожидается?

>>4959
а есть ли способ узнать что-нибудь о спрятанных картинках - имя, md5, тэги?

>>4974
>а сохранение их отдельно в файл xml/csv/txt ожидается?
С 38го билда есть. >>4838

>а есть ли способ узнать что-нибудь о спрятанных картинках - имя, md5, тэги?
Спрятанные пикчи, равно как и инфу о них, могут видеть только премиумы. Можно прикрутить возможность логиниться из-под проги. Кроме данбуры есть и другие борды.

http://cosplay.paheal.net/
http://rule63.paheal.net/

Может и их для коллекции добавить в список:?

>>4976
>>а сохранение их отдельно в файл xml/csv/txt ожидается?
>С 38го билда есть. >>4838

А я настройки для этого не вижу. Есть опции сохранять в JPEG и в имени файла. А в отдельном файле нету.

На gelbooru некоторые картинки названы по md5 хэшу, например
8dfe7c85f4bdbcc8d06077173dbb621a.jpeg
3ad6b72c31fa81b505b46b2667b12b10.jpeg
66852cb659c3a1bf79ea3260f569838b.png

а некоторые - по-непонятному:
1295987708ed59f54da288abc7d4602fed4ca28b.png
66b63fdb10c959a4efc46fe182f7bb385dfbd898.jpg
что это за хэш?

>>4982
Попробуй сохранять список, выбери вариант "имена с тэгами".

Почему при сканировании по тегу с большим кол-вом пикч(2к+) на гельбуре скан останавливается на 50-70% от их количества, указанного на самой гельбуре и показывает что сканирование завершено?

>>4989
Ух, а у тебя зоркий глаз! И точно - сейчас сравнил по тэгу eyes_closed - gelbooru.com показывает что картинок 40000+ , а graber находит только
Так что не половина, а даже меньше - по другим тэгам. Gelbooru дальше 10000 картинок искать не хочет, если попробовать в конец пройти - оно пишет
> Unable to search this deep in temporarily.
То есть временно не может искать так глубоко. Вот и вопросик - это временно когда - на месяц или на неделю, а может днем мало, а ночью больше находит? (Хотя вроде нет - я в разное время суток пробовал и 10000 с хвостиком - это предел.)
Можно ли как-то обойти это ограничение? Может через их API интерфейс больше доступно, чем через html?

http://rule34.booru.org/

>>4989

Хотя сейсас подумал - ведь одно дело ограничение порогом 10000, а другое - когда изображений меньше 10000, но все равно graber выдает еще меньше, чем показывает сайт

>>4995
Все просто - пролистай 10 000 страниц и посчитай картинки на каждой странице. На гелбуре тоже не все тэги отображаются, и получается как на данбуре - 100500 пустых страниц.

>>4990
Сделай запрос через API и сравни, можно ли больше 10 000 страниц получить. Думаешь API и html морда у них отдельно работают?

>>4996
А какие тэги запретные на Gelbooru?

>>4997
Программа просто вытаскивает картинки из текста страницы. Если в тексте страницы их нет, значит и в проге нет. Если найдешь то, что есть на буре, но не отобразилось в проге - скажи, автор пофиксит.

Выяснилось, что у g.e-hentai.org в одном альбоме могут быть разные картинки под одинаковыми именами (например 10.jpg в SAMpart1). То есть при создании списка нужно как-то разделять их по подпапкам альбома автоматически, чтобы пути стали уникальными. Причем желательно, чтобы путь был предсказуемым и повторяющимся при повторном создании списка.

И еще - при сборе страниц для создания списка g.e-hentai.org по-прежнему банит:
> Your IP address has been temporarily banned for using automated mirroring/harvesting software and/or failing to heed the overload warning. The ban expires in 59 minutes 7 seconds

Видимо обращения слишком уж частые. Я же говорю - нужно глобальный параметр в настройках сделать с задержкой в миллисекундах, иначе так и придется заплатки ставить все время.
К тому же это позволит вежливо скачивать с бур-сайтов, не напрягая их серверы (вон у некоторых проблемы с хостингом да и ошибки типа Bad Gateway частенько показывает - то есть сайт перегружен).

>>5006
Альбом и есть подпапка. Для такого случая было сделано "при совпадении: переименовать". Хотя по хорошему надо сделать, чтобы прога проверяла совпадения в списке перед скачкой.

>>5007
При получении списка перманентная 1 сек. Не думал, что потребуется больше.

>>5006
А, а так же если убрать галочку "create dirs for albums", то имена будут соотвествовать номеру пикчи, а не ее настоящему названию (типа 352986-2.jpg)

жду обновления
(запил новых борру и инструкции)

А можно добавить опцию, чтобы автоматически нажималась кнопка Retry? Оче нужно

А теги можно сохранять с rule34 ?
Очень хочется

В общем, выхожу на связь.
Новый релиз тут:
http://files.mail.ru/0AJ6RG
- прикрутил возможность выбрать интервал между запросами при получении списка с е-/эксхентая;
- починил закачку с девиантарта (там изменилась разметка для кнопок перехода);
- для руля34.пахеал теперь получаются тэги;
- произвел небольшой косметический ремонт;
- написал гайд. Лежит в двух фоматах: chm и txt в папке программы.

Собирался еще прикрутить 4 буры, но подумал, что и так уже дофига времени прошло с последнего релиза. В след. релизе тогда.

>>5045
Хоть я прогой не пользуюсь, всё равно ты няша.

>>5046
Вероятно, он няшнее няши.

<------------------
В подарок ОПу за новый релиз.

http://why-so-butthurt.ru/
http://welcome-to-omsk.ru/
http://www.oh-you-slowpoke.ru/
--------------------------------
http://macrochan.ru/
http://macrochan.org/
http://rmart.org/

А почему бы и нет? С понями в комплекте будет.

>>5067
Что это?

>>5045
Пулы лучше запили.

Было бы еще хорошо добавить
http://wildcritters.ws/

У автора грабера все плохо, происходит очень геморройный переезд офиса, в котором он работает, что за собой повлекло еще и перевытягивание сетевой и телефонной инфры, так что на досуг не очень-то времени хватает. Такие дела.

>>5094
i c wut u did dar

Реквест:
Файлы при скачивании с пиксива переименовываются во что-то наподобие "member-name - title (illust-id) pageХХ[ページ]" вместо айди.

>>5045
Добавь, пожалуйста, http://xbooru.com

>>5067
Не из той оперы.

>>5110
3д не нужно, тем более это не косплей.

>>5135
Если ты увидел на глагнэ пару 3д-шлюх, это не значит, что вся борда им посвящена.
Простейший пруф:
http://xbooru.com/index.php?page=post&s=list&tags=wagner_%28artist%29

>>5110
Удваиваю.

Внезапно, репортинг ин.
Новый релиз грабера http://files.mail.ru/DHMPI8

- пофиксил получение похожих тэгов с пиксива (в связи с новой мультиязычной мордой), а так же дублирование тегов;
- теперь с пиксива получаются имена авторов, на оригинальном языке. Позже сделаю селект по имени автора;
- добавил формат имени для названия файлов при скачке с пиксива (галочка "name format"): по дефолту "?a - ?n (?i?p)", где ?a - имя автора, ?n - название картинки, ?i - id-номер картинки, ?p - страница (в альбомах), ?t - используемая для поиска ключ-строка. В связи с чем удалил пункт "distrib by author name" (т.к. в формате можно так же указывать папку, используя "" как разделитель);
- теперь со всех бур, где есть пулы, и на странице пулов есть поисковая строка, можно их скачивать (галочка "pools"). Процесс получения списка идентичен получению списка с e/exhentai. Исключением является санкаку, у них на странице пулов поисковая строка не работает (или, возможно, требует регистрации, позже еще буду тестить);
- добавил новые борды:
+ http://cosplay.paheal.net/
+ http://rule63.paheal.net/
+ http://rule34.booru.org/
+ http://xbooru.com/
+ http://wildcritters.ws/
+ http://rmart.org/ (скачка аналогична e/exhentai, т.е. в списке указаны только ссылки на страницы, а ссылки на пикчи получаются уже в процессе скачки картинок, т.к. со страницы результатов поиска получить прямую ссылку нельзя);
- Т.к. в списке теперь аж 23 источника, немного подправил список, сделав возможность вводить название с клавы с автоматическим автозавершением (пишем "pi" сразу переходим на pixiv.net), чтобы было проще выбирать, вестимо;
- Переписал много текста, так что возможны новые баги там, где их не было.

Хав а нице евенинг!

>>5157
Ну и первый же хотфикс http://files.mail.ru/WOB3G4 :
- для name format добавил ключ ?l - логин автора, т.к. ник автора имеет свойство меняться время от времени, что пагубно влияет на распределение;
- подправил раздел settings, добавил пункты save note on closing (снять галочку если хотите, чтобы вас больше не спрашивали, сохранять ли файл перед закрытием) и debug mode (отображать загружаемые страницы в логах при получении списка и создавать копии страниц в папке logs в корне папки с программой, папку надо создать вручную). Кстати говоря, я забыл выключить дебаг мод в предыдущей версии =_="
- добавил http://hijiribe.donmai.us/

ОП, добавь rmart.org мне неоткуда куклопаки качать

>>5162
разуй глаза же
>>5157
>+ http://rmart.org/

опять фиксы http://files.mail.ru/2IWU82 :
- опять глюк с форматом имени у пиксива, теперь папки корректно создаются;
- добавил возможность добавлять приставку к странице (чтобы получить классический вид 123456_p0 надо написать ?i?p_p/, т.е. теперь ключ ?p имеет вид ?p[{приставка}/]), без приставки будет подставляться просто цифра страницы;
- пофиксил проблему, из-за которой при включении формата имени срабатывала автоматическая генерация пути;
- пофиксил проблему сохраняемого пути для списка, из-за которой не сохранялись иероглифы.

>>5157
>со страницы результатов поиска получить прямую ссылку нельзя
Можно так: "http://rmart.org/{picID}/Src/" - это и есть прямая ссылка, после "Src/" может идти любой текст или вообще ничего.

Не удается получить список картинок с pixiv.net, достает только 1 файл: http://source.pixiv.net/source/images/common/transparent.gif Логин и пароль вписал. ЧЯДНТ?

Вчера примерно в 21:00 по МСК были глобальные перемены в разметке на пиксиве (в связи с чем перестали работать все скрипты для фурифокса в том числе). Сегодня все починю.

>>5187
Совсем ничего не получается, нужна хотя бы 1 буква. Взял на заметку, спасибо, сегодня подправлю.

http://files.mail.ru/A0TH5Y
- собсно, пофиксил загрузку с пиксива;
- убрал двухстадийную загрузку пикч из рмарта;

>>5190
Вот ещё совет по рмарту: передавай в реквесте куку PageSize со значением 100, так будет возвращаться по 100 пикч на странице, вместо дефолных 30, что ускорит процесс.

И вот ещё бага: запускаем получение списка картинок, переключаемся на другую вкладку, снова возвращаемся на вкладку "Pics List", получаем ошибку "Critical error: Cannot focus a disabled or invisible window".

http://files.mail.ru/XB84IX
- пофиксил баг "Critical error: Cannot focus a disabled or invisible window";
- теперь список на рмарте пополняется по 100 пикч за раз.

как насчет функции выключения пека по окончании скачки?

мимокрокодил

ээх если бы ключевые слова к картинке сохранялись рядом с ней.
или хотя бы файл
search-keywords [danbooru.donmai.us] 2011-09-06.csv
клался в тот каталог куда скачиваются картинки из списка

>>5209
save list -> file format: names with tags (csv) -> save

08.09.2011 2:38:01 Geting pictures list from "http://e621.net/" by tag "wallpaper"
08.09.2011 2:38:05 Found 0 new pictures.
08.09.2011 2:38:05 List loading completed without critical errors

Сломалось - почини пожалуйста

>>5213
я знаю как сохранять - надоедает. хочется автоматизации...

>>5209
под "search-keywords" я имел в виду например
"breast_grab tentacles [danbooru.donmai.us] 2011-09-06.csv"
"dakimakura [danbooru.donmai.us] 2011-09-06.csv"
короче сочетание по которому был поиск

>>5218
by tag "wallpaper"
wallpaper
http://e621.net/post?tags=wallpaper&commit=Search

Принцесса одобряет

А эта штука может пулы с danbooru.donmai.us или sonohara.donmai.us или скачивать?
Вот к примеру Pool: Slice of life
http://danbooru.donmai.us/pool/show/2810

chan.sankakucomplex.com
выдает Access violation например при поиске по test

safebooru.org - находит, пытается скачать, но пишет, что не найдено (на сайте в ручную вроде всё находит)
>> 08.09.2011 6:23:18 Line: 2, http://thumbs2.booru.org/safe/160/14f6b229fe9b97844d8b376f4a3ac06093a200f7.jpg HTTP/1.1 404 Not Found
>> 08.09.2011 6:23:18 Line: 9, http://thumbs2.booru.org/safe/156/c1ab483a93f1dc205e70ea3e8e606726dc57af55.jpg >> HTTP/1.1 404 Not Found
08.09.2011 6:23:18 Line: 4, http://thumbs2.booru.org/safe/160/4046350b3b77151f177612ac9ce76f01c51ecfba.jpg HTTP/1.1 404 Not Found

Обновил http://files.mail.ru/5BLAL3

- добавил функцию выключения пека по завершении скачки пикч. По идее должно работать, неохота было выключать комп, не проверял, лол;
- добавил возможность автоматически генерировать csv-списки с тегами, изменив галочку "all tags in". Теперь можно выбрать: "в имени фалов" или "в csv файле". Если указать "в csv файле", то в папке куда сохраняются файлы, создастся файл с именем "{строка тэгов} [{источник}] {год-месяц-день}.csv", но только при полном завершении закачки;
- починил закачку с e621, сейфбуру и санкаки;
- добавил sonohara.donmai.us.

>>5221
Да, может.

>>5225
добавь ещё опцию Автоматически перезапустить при ошибке закачки количество раз

Вполне актуально с http://rule34.paheal.net/

Critical error: Invalid pointer operation

over 20k pics

>>5228
Ресурс, ключ-строка, при получении списка или при скачке, окно свернуто?

Ванга мод он
Если я правильно угадал проблему, то могу порекомендовать сворачивать окно при скачке пикч, т.к. прорисовка таблицы иногда выдает сбои из-за одновременной работы потоков и соответственного практически одновременного обращения к таблице.
ласт активетед мод офф

Перезалил грабер http://files.mail.ru/P2RRTF:
- пофиксил баг, из-за которого при авто-создании цсв-списка внезапно в имени подставлялся рандомный источник;
- добавил пункт в настройках, позволяющий настроить количество повторов "errors auto retry count".

>- добавил пункт в настройках, позволяющий настроить количество повторов "errors auto retry count".

А это к чему относится? К перекачиванию файлов или получение списка файлов?

>>5232
и т и д.

>errors auto retry count

Прикрутить прикрутил, но заставить работать нормально не смог.
В этой опции одна проблема - лимит. При достижении количества 50 ошибок, программа начинает требовать опять подтверждение на скачку. Не хотеть каждый раз жать на Retry.
Или допиливай до ума или введи ещё один чекбокс - игнорировать все ошибки и перекачивать в любом случае.

Я это всё проверял на выкачивании списка Final_Fantasy_VII с rule34.paheal.net

Докрутил количество потоков до 35 и поставил 50 попыток повтора - докачало до 70й страницы (это для списка). Далее все равно начало появляться окошко с просьбой прекратить или попытатся снова.

С файлами пока не тестировал.

Final_Fantasy_VII
6660 пикч
rule34.paheal.net
При огромных значениях в 35 потоков и количество допустимых ошибок в 50 выкачивается без проблем.

Слишком большие значения однако, но скачало всё с первого раза.

Жду :
чекбокс - игнорировать все ошибки

>>5234>>5235>>5236
Может, лучше руль34 удалить от греха подальше? Этот слоупочный ресурс как кость в горле.

ух сколько изменений клёвых :-)

>>5237
не надо. там иногда находится чего в других нет

Pы.Sы. а то что сайт глючный может и хорошо - так легче выявляются слабые места в программе и сразу лечатся

>>5239
Как очень бородатая цитата с баша про нового тестера, которая уже на столько бородатая, что даже найти ее могу: "всем хорош, то там баг найдет, то тут глюк отловит, но иногда, суку, придушить хочется".

>>5241
Можешь не сомневаться - я помню эту цитату про девушку тестера.

А у меня бесконечный поиск на DeviantArt'е, то есть все страницы с пикчами нашла, и продолжает дальше искать?

>>5243
ключевое слово / категории?

Перезалил http://files.mail.ru/IXS6TW

- пофиксил косяк с ретраями. Привязал ретраи к текущей закачке, т.е. при начале следующей каунт обнуляется, и на каждую пикчу/страницу свой счетчик. Увеличивать диапазон ретраев не стал, т.к. просто не представляю, каково это 50 раз подряд повторять попытку.

C пиксива не качает.

>>5267
Разметка, поменявшаяся на странице поиска, теперь распространилась и на авторов. Починил.

http://files.mail.ru/PTJIRM

О, Великий Стив: А можешь добавить поддержку командной строки, например:
graber.exe вебсайт ключевые слова через пробелы....
graber.exe chan.sankakucomplex.com blue_eyes brown_hair
или
graber.exe /site=chan.sankakucomplex.com /keywords={blue_eyes brown_hair}
Просто первый вариант проще реализовать, а второй - для расширения лучше (но это расширение может и не понадобится, так что стоит ли трудится)
И конечно не стоит спрашивать Abort/Retry если запущена из командной строки - т.к. это остановит всё, а это ведь для автоматического обновления.


И еще просьбочка: может ли грабер научиться скачивать флэшки .swf ? В них иногда анимированные картинки бывают, типа замена GIF. Ну и разные ролики, игрушки тоже...

>>5310
>И еще просьбочка: может ли грабер научиться скачивать флэшки .swf ? В них иногда анимированные картинки бывают, типа замена GIF. Ну и разные ролики, игрушки тоже...
Суть в том, что ссылки на пикчи получаются со страницы результатов. Для флеш-роликов у пикч ссылка представляет из себя что-то вроде "preview.jpg". Конечно, можно к записи приделать метку как "флеш", сохранить ссылку, затем перейти на страницу и отпарсить, но я уже надел пижаму возни много. В этой версии грабера вряд ли будет.
По поводу команд придумаю что-то.

>>5269

Обновил свою версию.
А можно как-нибудь автоматизировать проверку на наличие новых версий? Ну там программа сама просматривает фтп каталог и ищет что нибудь новое в нём.

>>5335
и тогда конец анонимности.
Да ладно тебе, - заглядывай сюда время от времени, советуй автору что-нибудь полезное. И всем профит. Поставь в закладки как я.

Странно - при скачивании с g.e-hentai.org пишет MISS (то есть пропускает) для некоторых картинок. Странно потому, что это не повторная загрузка, а первая! То есть что-то не так в алгоритме - при первой загрузке ведь не должно быть пропусков. Может файлы с одинаковыми именами?

>>5350
MISS - значит совпало имя файла. Судя по всему, по разным ключам нашел ту же картинку.

Нет, там же раскладываются по альбомам (подкаталога с названием альбома). В каждом альбоме свой набор картинок. Возможно, что в одном альбоме могут быть файлы с одинаковыми названиями. Я думаю, что такие файлы ошибочно пропускаются после того как первый с дублированным именем скачался. Картинки разные, а файлы с одинаковыми именами.

>>5352
А так бы сразу и сказал, что с е/х-хентая качаешь же. Там да, надо либо ставить "rename" в "on exists" либо снимать галочку на раскидывание по альбомам, тогда будут браться имена страниц, а не файлов.

Реквестирую поддержку http://rule34.booru.org

Pixiv. Грабер не всегда загружает самую большую версию изображения из "манги". Нужно ХХХХХХХ_big_p1.jpg, но скачивается ХХХХХХХ_p1.jpg. Насчёт одиночных изображений - не знаю, может быть такая же ситуация.

>>5157
Суп, бро. Ты как-нибудь узнаешь, поддерживается ли что-то в программе прежде, чем реквестировать реализации поддержки этого чего-то? (>>5157)

>>5357
Тоже известная проблема, префикс big применим только к страницам альбома, и вариант big есть далеко не у каждой страницы. В обычных пикчах все нормально. Впрочем, попробую как-то поправить.

При помощи каких программ можно рассортировать картинки по тегам, сохраненным в метадате?

>>5363
Что ты имеешь ввиду под "рассортировать по тегам"? ЧТо если у файла больше 1 тэга? Что если файл не jpg?

>>5363
при помощи базы данных. но ее надо сделать или написать для этого специальную утилиту. или можно использовать движок booru, поставив его себе на комп. кстати как это сделать?

Новый апдейт: http://files.mail.ru/KMGHDG
- добавил пункт "original filenames" при скачке с е/эксхентая, если снято, то будут использоваться названия страниц (проблема совпадающих оригинальных имен файлов). При установке галочки автоматически предлагает поставить режим переименовывания файлов;
- сделал, чтобы по дефолту из альбомов пиксива качались big пикчи;
- изменил систему запоминания пароля и логина чтобы при добавлении новых борд они не путались;
- переработал механизм отображения статистики в таблице, попробовал привести к виду "как правильно", по идее теперь никаких access violation при долгом наблюдении за процессом не сворачивая окна не должно происходить;
- добавил поддержку внешних строковых команд при запуске программы, так же можно изменить у формата igl "открыть с помощью" и поставить грабер. Подробности смотрите в гайде (guide.chm - Командная строка).

>>5374
А, и еще:
- Проапгрейдил процедуру замены html-спецсимволов, добавил все известные википедии мнемоники, так что теперь все названия должны получаться нормально.

В гайде ошибка в списке констант
RP_SANKAKU_IDOLRP_DEVIANTART = 11
на самом деле должно быть так
RP_SANKAKU_IDOL = 11
RP_DEVIANTART = 12
следовательно все, что ниже, тоже на 1 больше. А еще там маааленький косяк со скриптом в спойлере для констант. Ощем, перезалил гайд под версию 1.0.8.51 http://files.mail.ru/831XUW

Не могу составить список c deviantart. Программа просто работает вхолостую до бесконечности: составляет список до 105-ой страницы, после чего перестаёт находить картинки, но поиск продолжается, программа перебирает страницы дальше, но количество найденных пикч не меняется. При этом остановить вручную невозможно, так как список при этом не сохраняется. Нельзя ли что-то с этим сделать?

Вот как запускать из батника, например download.bat :
>> start /b /wait "" "c:imagegrabergraber.exe" resname=gelbooru.com tag="test" close
>> start /b /wait "" "c:imagegrabergraber.exe" resname=danbooru.donmai.us tag="test" close

>>5380
Кстати, я еще заметил, что иногда скачивание зацикоивается, если были проблемы со связью или еще что-то не так, а Cancel не всегда работает - он чего-то начинает ждать после нажатия и подтверждения Cancel и так никогда и не завершается. Помогает только закрытие программы вручную.

>>5383
Блин, пропали обратные слэши в пути.
Попыткаа номер два:
>> start /b /wait "" "c:\imagegraber\graber.exe" resname=gelbooru.com tag="test" close
>> start /b /wait "" "c:\imagegraber\graber.exe" resname=danbooru.donmai.us tag="no sex if mastrubated" close

Было бы классно, если бы грабер научился распознавать когда g.e-hentai.org начинает подсовывать вместо настоящих картинок картинки-заглушки и сразу же прекращал дальнейшее скачивание.
Вот эти заглушки:
509.gif - размер 28658 байт (эта картинка - первое предупреждение, что начался временный бан).
509s.gif - размер 1009 байт (это заглушка, котороая выдается вместо всех картинок в дальнейшем).
Здесь важено не только название файла, но и размер, потому что среди сотен тысячь картинок вполне может попасться с именем 509.gif но другого размера.

Еще немного о том же g.e-hentai.org - так как интервал ожидания вычисляется между началами загрузок картинок, а не между концом загрузки и началом следующей, то если картинка скачивалась долго, следующая начинает скачиваться совсем без задержки - и это приводит к бану айпи.

>>5380
Ключ, категории?
>>Кстати, я еще заметил, что иногда скачивание зацикоивается
Есть такая проблема, просто у стандартной компоненты для скачки по хттп небольшая проблема с таймаутом ожидания, кенцел дает сигнал на отмену потокам, а потоки ждут ответа от компоненты, которая ждет ответа от источника, который не отвечает из-за потери связи х) Попробую прикрутить форс дисконнект в качестве временного решения.
>>5387
Не замечал, что обращение за рисунком тоже влияет на лимит, поэтому в очередь становятся только запросы на страницу. А уж чтобы и завершение закачки требовало задержки, так совсем жара х) А картинки бы залить куда, распознание по мд5 бы замутил.

>>5383
>Вот как запускать из батника, например download.bat
А в чем, собсно, проблема?

>>5389
Про deviantart. Ищу по тэгам. К примеру homestuck.

>>5391
И не будет качать:
>Sorry, deviantART does not serve more than 2500 results for any term search query. (You asked for results starting from 2520)
Качай частями по категориям, либо уточни запрос. Проверку на эту ошибку прикручу в следующем релизе.

>>5392
Ты извини, если я несу всякую чушь, я слабо в программировании соображаю. Но всё-таки, неужели нельзя сделать так, чтобы прога просто останавливала составление списка когда перестают находиться новые картинки? Ну, или хотя бы возможность ручной остановки составления списка без потери этого списка. Ведь до 105-ой страницы всё нормально собирается, а использовать этот список нельзя, обидно ((

>>5393
Программа не предназначена для скачки незавершенных списков, по той же причине, почему нельзя делать список по пустому тэгу. Делай более конкретные запросы.

>>5389
Да там пофиг что скачиваешь - серверу все файлы одинаковые и- что картинки, что страницы. Надо для всего одинаковый интервал делать. Вот поставил я интервал 10 секунд и банить перестало - т.к. промежуток достаточный даже для больших картинок - после их скачивания пауза остается. Но конечно 10 сек между картинками ОЧЕНЬ замедляет процесс. Надо отсчитывать паузу от момента завершения скачивания до начала следующего. Тогда проблем не будет. Просто из-за разного размера и разной скорости время скачивания картинок сильно варьируется. Поэтому нельзя от начала до начала считать.

Deviantart не работает даже если категорию выставить.
Кто бы починил...

>>5396
/vanga mode on
После 105 страницы зацикливается?

>>5398
UGUU~
На популярных тегах находит свыше 2к картинок а дальше зацикливается. Только я не пойму, почему те же 1700 пикч захватывает и качает нормально а уже после 2к встаёт колом?
Что-то ты наомичил со скриптом, ОП. Сделай принудительный вывод всех найденных ссылок, и не морочь анонам голову, что это невозможно осуществить.

>>5399
Я не говорил, что это не возможно сделать, я говорил, что специально сделал это невозможным.
http://browse.deviantart.com/?q=homestuck&order=5&offset=2520
>Sorry, deviantART does not serve more than 2500 results for any term search query. (You asked for results starting from 2520)
>>5392
>Проверку на эту ошибку прикручу в следующем релизе.
Количество результатов чтобы заранее оценить предел можно под строкой "search"
>Newest of 119483 deviations for homestuck
Количество результатов по деварту и проге не совпадают потому, что
>Программа не качает флэш-ролики и текст, в случае их наличия они будут проигнорированы.
А так же программа пропускает закрытые картинки, которые отображаются в результатах, но нельзя их просмотреть.

nekobooru.net

http://ubuntuforums.org/showthread.php?t=1444822&highlight=asus+k53e

гелбору выебывается, не всегда получается скачать все картинки. вместо 6 страниц только 1 или 2

Собрался качать большое количество картинок сразу по нескольким тегам, и возник вопрос, как потом их сортировать и быстро находить. Есть ли программы, умеющие распознавать сохраненные в картинки теги, и как отличить специальные теги вроде имени автора или названия тайтла? Было бы офигенно, чтобы грабер их узнавал и дополнял приставкой artist:, title: и т.п. (особенно касательно gelbooru).
Обнаружил в новом билде функцию записи тегов в таблицу, но не знаю, как, если не вручную, при помощи неё раскладывать с каждой загрузки файлы в папочки по авторам или персонажам.

Почему zerochan.net тоже зацикливается?

>>5407
Это, это... охуенно! Как мне теперь скачать все эти пикчи, ОП? :3

Привет, подскажите, пожалуйста, как быть со следующей проблемой. Создаю листы с gelbooru, и почти каждый раз они обрываются на случайной странице. Для эксперимента запустил два поиска, результат на пикрелейтед: полный список выдал только один. Это временные проблемы на сервере, или листам не стоит доверять? есть подозрение на ковычку в теге, но замена на код не помогла

>>5409
Попробуй скачать http://half-open.com/home_ru.htm и выставить лимит подключений на 100. Не знаю в чем проблема у тебя, но мне помогло.

>>5410
Спасибо. Но семёрка говорит, что и так их не ограничивает.
Кстати, сегодня вообще дальше первой страницы не ищет, от 0 до 28.

Инструкция, как надо писать сообщение, если у вас возникла проблема:

ВО-ПЕРВЫХ: разработчик должен знать, как воспроизвести проблему чтобы ее исправить. В ИДЕАЛЕ: надо расписывать все действия до возникновения ошибки. КАК МИНИМУМ: надо указывать источник и тэг. Автор не Ванга и сходу не может прозреть, почему у вас в очередной раз зациклилась закачка.

>>5408
Никак. Тебе 110к пикч не нужны. Такие скрины наталкивают на мысль, что надо создать ограничение на скачку в 50к пикч за раз, чтобы лицо у пользователей от жадности не трескалось.

>>5409
Есть проблема, теперь рандомно во время просмотра гелбура заставляет смотреть порно-баннеры, для этого делает редирект на другую страницу, т.к. ссылки на следующую страницу не получается, программа считает, что закачка завершена. Надо будет как-то обрабатывать яву, буду что-то придумывать.

>>5406
Планировал реализовать категории тэгов в будущем, пока что только общая тэговая масса.
guide.chm: >>...если в "all tags in" выбрать "csv file", то по завершении процесса скачки в указанном каталоге будет создан csv файл с именем "{строка тэгов} [{источник}] {год-месяц-день}.csv", в котором будет список имен файлов и соотвествующих им тэгов.

>>5413
>Никак. Тебе 110к пикч не нужны.
Orly? Ну это я сам решу, что мне нужно, а что нет, okay?
>что надо создать ограничение на скачку в 50к пикч
Лучше бы вы нормальный stop-error создали, чтобы скрипт не работал в холостую, и не находил сотни тысяч картинок из воздуха.
А так конечно спасибо за программу. Ты няша, ОП. Не теряй энтузиазма и продолжай работать в том же духе.

>>5415
Никому не нужны 100к пикч, а воровать плохо!
Я не раз повторял, что программа не предназначена для скачки неисчислимого количества пик, и еще не раз повторю (хотя исправлю все ошибки, да).
По дефолту прога останавливается тогда, когда перестает появляться кнопка "next page". Во всех описанных выше случаях эта кнопка не появляется никогда, просто висит надпись "извините, слишком много результатов", при этом кнопки навигации остаются на месте, или вообще начинает бесконечно прокручиваться первая страница. Сложно предвидеть такие частные случаи, и всплывают они обычно когда кто-то начинает ругаться на тупо сделанную программу.

>>5417
Мне нужны. Я уже 308 тыс насобирал. :) Правда без дублей будет где-то 170 тыс. Ну подумайте - ведь вводят ограничения по тегам по тихоньку.

>>5417
Главное ни кто сколько скачает - на здоровье, тем более, что FUKKED SAVED полезно для всех на всякий случай.
Главное - чтобы серверы не перегружали при этом.

>>5417
>Во всех описанных выше случаях эта кнопка не появляется никогда
Вестимо, имеется ввиду не исчезает.

С командной строкой обнаружился баг: если ничего по тегу на сайте не найдено то программа не закрывается. Её нужно закрывать вручную. То есть всё остальное останаливается из-за этого.

Tще одна странность с командной строкой: если между опциями командной строки больше одного пробела, то все последующие опции не обрабатываются. Не важно сколько пробелов перед опциями или после опций, но если МЕЖДУ опциями, то дальнейшие опции не видятся.
Например, если перед опцией close больше чем один пробел, то программа не закрывается после скачивания. Или например, если перед опцией tag=blue_eyes поставить два пробела вместо одного, то программа откроется, но искать не будет, так как она не увидит опции с тэгом поиска.

И так, наконец-то запилил новый апдейт: http://files.mail.ru/GRFMCD

- починил зацикливание на зерочане и девиантарте, при достижении лимита лист завершается (т.е. доступен для схоронения);
- настройку интервалов для запросов вынес в настройки, там можно настроить размер интервала, и где он должен возникать (перед получением ссылки, перед закачкой пикчи, после закачки пикчи), но чтобы работало на вкладках листа и даунлойда должны быть поставлены галочки "query interval" (по дефолту стоят);
- прикрутил форс стоп при "зависании" скачки после нажатия кнопки cancel;
- починил глюк с пробелами в командной строке;
+ проблему с гелбурой пока не пофиксил, если ничего не качается, то можно зайти на гелбуру с браузера по тем же тегам, полистать пару страниц и активировать порно-баннер вручную. В раздумьях, как чинить;
+ Новых бур пока не добавлял, и так график забит, в след. релизе;
- Куча всякой ненужной косметической ерунды.

Спасибо за грабер. Но кажется я не понял как работает скачивание с Пиксива по автору... Например я хочу скачать все арты, но такое, кажется, невозможно, ибо без тега он не ищет. Можно это пофиксить? Или я что то делаю не так?

>>5427
При скачке по автору пустая строка тэгов допустима.

>>5428
Ммм... Очень странно. Перезапустил грабер - нашел арты. До этого выдавало "Nothing found"

Можно ли запилить папку с именем автора при скачивании с пиксива по автору, конечно?

>>5432
guide.chm >Также теперь можно задавать формат для сохранения изображения, для этого надо поставить галочку "name format" и назначить его в соотвествующем поле (по умолчанию "?i?p_p/" т.е. классический; где ?a – никнейм автора (может меняться); ?l – логин автора (не меняется) ?n – название изображения; ?i – id-номер изображения; ?p[{приставка}/] – номер страницы (для альбомов), чтобы добавлялась приставка типа " page " надо написать ее после ключа и изолировать знаком "/"; ?t – используемая для поиска ключ-строка).
Очевидно, если в маске использовать знак "", то получится папка.

>>5433
Спасибо, няша, все получилось.

Ты бог

>>5433
>сли в маске использовать знак ""
бэкслэш -_-

бэкслеши надо два раза повторять "\\", чтобы они были видны - парсер комментов глючит

Последний релиз на этой неделе: http://files.mail.ru/9SIWWM
- пофиксил обработку ошибок при получении списка из командной строки, и за одно обработку 404 ошибки (чтобы не пытался повторять попытку и не предлагал retry). Заметил особенность на зерочане - если не удается ничего найти возвращается 404;
- добавил nekobooru.net.

ураааа

>>5439
Загрузку с альбомов плюсача сделаешь?

>>5443
Я знаю только 1 плюсач (pluc4chan), и там нет альбомов же.

>>5437
>бэкслеши надо два раза повторять "\", чтобы они были видны - парсер комментов глючит
это не глюк, а фича. Экранирование/эскейпинг.

Вот эту бы добавить http://thedoujin.com

оп, порастягивай главное окно по ширине и посмотри как ползают неготорые элеметны.

И второе - программа не сохраняет в настройках установленное количество повторов при ошибке.

Это такой понибамп

xbooru.com - не скачивается, потому что в спсике на скачивание вместо домена в адресе картинки слово safecom

Вот ещё бура http://megabooru.com/

Ьлджад, надобавляйте же скорее всё это говно!
http://booru.org/top

Как тянуть флешки с данбуры?

>>5478
ручками

>>5474

Достаточно верхушки этого говна. 15 хватит

В том топе совершенно неадекватная статистика. И где интересно монстры booru-досок?

>>5482
Этот топ подразумевает "не считая таких-то, которые все и так знают". Асло сейфбуру и гелбуру сбоку в меню, а не в этом листике :3

>>5469
наверное это надо делать в симёрке, в хрюшке растягивание без визуализации.

>>5469
лолд, не тяница афтерфинишь, поправлю x)

>>5482
>>5485
Это топ бор на booru.org. Если кто не знает, там можно зделать собственную бору бесплатно без смс. Почти у всех типовой движок.

Кто такой Стив Балмер

>>5491
Раньше тут все были Биллами, но модтян посчитал, что имя "Билл" больше не в моде, и назвал всех Стивами. Тебе не нравится имя "Стив"?

Господа, объясните пожалуйста, как скачать все картинки определенного автора с пиксива? Моя попытка провалилась. Логин и пароль выставлены в опциях. Перезапуск не помогает.

>>5493
Нашел ошибку, теперь пиксив не стирает куку при ошибочном входе, а оставляет ее с временем выхода срока годности на текущее время, прога же видя куку, считает, что все нормально, и пытается брать лист. В следующем релизе починю. Пока что могу предложить только переоткрывать прогу чтобы куки терлись.

При работе из командной строки:
- создает пустые каталоги даже если файлов не найдено и ничего не качалось.
- не записывает тэги в файл csv при каких-либо ошибках, например когда не найден файл на сервере и других, что очень жаль.

Стив Балмер

Вот задался вопросом как легче парсить с e621
Есть тупая закономерность, страницы с id картинокой. Я к примеру хочу качать не по тегам, а по нескольким страницам, к примеру последние 4-5 страниц, зная по какой id картинки мне качать, ну и с какой естественно.
http://e621.net/post/show/
это id поста с картинкой
Открывая эту ссылку, в коде есть ссылка на скачивание (Download) картинки вида:
/data/$$/$$/###.&&&
$$ - директории всегда разные
## - название всегда разное у картинки
&&& - ну и формат картинки/файла
К примеру (если отобразится:
<a href="/data/4a/6a/4a6ab4ea6c90fca67447f588bdd6c9cb.jpg">Download</a>

Помню смотрел как задавать параметры грабберу для DLE9 движка, так надо было вставить начало и конец кода, между которыми надо парсить контент. Может так же сделать?
Я к примеру ввожу диапазон Id'ов для ссылкок на посты с картинками, а программа сама находит нужный код и подставив домен сайта, качает картинку/файл.
Помоему простая схема для написания, но увы я не програмист и не понимаю как это реализовывать.
Кто возмется за эту простую прогу? Если уж такой парсер собрали, думаю эту будет легче собрать.
В идеале хотелось бы видеть там несколько строчек для ввода:
от Id и до Id
куда сохранять эти файлы на компе.
Большего и не надо =)

http://e621.net/post/show/!!!!!!
Вместо !!!!!! - id картинки.

>>5495
было бы очень удобно, если бы еще способ воспроизведения ошибки указывали.
в частности ключ и ресурс, где смогли найти
>не найден файл на сервере
асло зачем нужны тэги от файла, который не существует?

Вот нашел еще забугорный грабер, приличная штука, можно самому дабовлять сайты если там нет нужных.
http://narod.ru/disk/29592626001/Grabber_2.4.0a.exe.html

>>5500
Для ограбления стандартнобур самое лучшее, работает на основе API бур, поэтому со всеми работает одинаково, да.

Пятничный релиз http://files.mail.ru/NWQMP1
- починил досадный баг с нетянущимся "афтерфинишем";
- программа теперь сохраняет число ретраев;
- пофиксил баг с авторизацией (в частности на пиксиве);
- пофиксил скачку с хбуру;
- если ничего не найдено каталог для скачки создаваться больше не будет;
- добавил thedoujin.com;
- продолжаю работать над освобождением места для будущих допилов.

Не знаю теперь, когда будет следующий релиз, собираюсь переделывать механику чтобы список ресурсов загружался из внешних файлов с настройками. Наверное, не скоро.

>>5518
Спасибо. Забрал домой.

>>5518
Ну тогда доставляй в тред посты с WIP. Будем читать твои записи там.

>>5500
http://code.google.com/p/imgbrd-grabber/

Не забывай добавлять вот такие ссылки. Может ОПу пригодится посмотреть исходники

>>5532
Был же тред с качалками, вы его неизвестно во что скатили.
А опу самому нужно показать исходники.

>>5532
Было в предыдущем треде, ньюфаг

>>5531
Удваиваю. Интересно почитать.

предлагаю добавить http://e-shuushuu.net

>>5518

>добавил thedoujin.com;

скачивает, но сортировка убита в пизду. как спасти её?

Не забудь в новой версии приделать (по умолчанию) сохранение списка файлов в файле с именем из тега, по которому шел поиск.

Можешь туда ещё другой информации напихать - количество пикч/альбомов и дата скачивания. Мне просто надоело

А можно добавить профили для скачивания?
Эта проблема меня задела с http://exhentai.org/. Хочу уже иметь оптимальные настройки для максимальной скорости.

>>5542
Приделаю возможность переименовывать файлы в номера по порядку.

>>5543
>Не забудь в новой версии
стало быть, имеется ввиду командный режим?
>Можешь туда ещё другой информации напихать
но зачем?
>>5544
Я не качаю с эксхеная, рекомендуемых параметров не знаю. Лучше у анона-эксхентайщика спроси, какие он настройки использует.

перезалил http://files.mail.ru/BKADDU
- добавил галочку incremental filenames для thedoujin.com (файлы будут сохраняться с порядковым номером в имени);
- после загрузки в диалоговом окне сохранения по умолчанию предлагается сохранить файл с именем как строка тэгов;
- переделал команду save. Больше диалоговое окно появляться не будет. После знака = можно указать путь и имя файла, так же используется быстрая вставка: ?d - путь по умолчанию, ?t - текущая строка тэгов. Если файл был не загружен из файла и файл для сохранения не указан, то будет сохранен в папке, куда сохранялись пикчи, с тэгами в имени.

>>5548

Когда начинаешь продолжать закачку по заранее сохраненному списку, то прога сначала ломится в инет, а не просто пропускает файл сразу и докачивает остальные. Можно добавить более подробную вещь с сохранением списка? Хочется видеть там ещё метки, что такой то файл уже скачан на все 100% и качать его не обязательно.

Чтото вроде файла проекта, в котором все записано - что качать, откуда, с какими настройками, что выкачено и где сохранено.

>Баг или так устроено по дизайну?

Выложи исходники в сеть на гуглкод. Или напиши, что выложишь, через N-е количество времени, но выложишь обязательно.
Жду с нетерпением на гуглкоде под лицензией WTFPL.

>>5549
Начинать надо так: я качаю с %resource_name%. Если ты загружаешь файлы с эксхентаева, и у тебя стоят галочки на скачку на против всех файлов, то это нормально. Чтобы получить имя файла там надо сначала зайти на страницу пикчи, поэтому он сначала ломится в интернет и получает имя, а затем сравнивает.
Когда скачка пикчи завершается галочка с нее снимается. При сохранении списка все галочки сохраняются с ним.
>Чтото вроде файла проекта
не скоро это будет, но, надеюсь, все-таки будет.

>>5551
>Выложи исходники в сеть на гуглкод.
Я сейчас начал писать грабер2.0, где пытаюсь все сделать "как надо". Когда появится первый релиз, сделаю страничку на гуглкоде. И там же залью исходники "старой" версии.

Когда же, когдавааа?7

Я уже посещаю гуглокод в нетерпении того, что смогу почитать вики и постараться в каментах к изменениям кода.

Что-то e-hentai не хочет скачивать. Останавливается или залипает.
Ещё бы чтобы в альбомах с e-hentai картинки номеровались. Можно добавлять префиксы типа 0001_ 0002_ и так далее. Это поможет когда в альбоме много картинок с одинаковыми именами и вообще по порядоку картинки станут.

>>5564
е-хентай не всегда работает стабильно, на то у них и куча серверов на скачку пикч. Возможно надо просто перезакачать позже.
Сними галочку "original filenames", или переключись на переименование файлов при совпадении имен.

03.11.2011 21:18:09 Program started
03.11.2011 21:18:13 Geting pictures list from "http://exhentai.org/" by tag "Rescue Rangers"
03.11.2011 21:18:13 Login on resource
03.11.2011 21:18:19 Loged ok
03.11.2011 21:18:20 Found 19 items.
03.11.2011 21:18:34 This is the first step, for next step you need check wanted albums and click "Get" again. For restart click "Clear"
03.11.2011 21:18:34 List loading completed without critical errors
03.11.2011 21:18:54 Geting pictures list from "http://exhentai.org/" by tag "Rescue Rangers"
03.11.2011 21:19:10 Found 102 new pictures
03.11.2011 21:19:10 List loading completed without critical errors
03.11.2011 21:19:30 Downloading pictures from exhentai.org


03.11.2011 21:22:45 Line: 23, http://114.41.86.97:4096/h/0600b7d0c54d06a24171bafb85e8fa3643a0d740-128741-767-548-jpg/keystamp=1320340943-13cd50cba3/346026_Blucanary_Chip_n_Dale_Res
cue_Rangers_Gadget_Hackwrench_Rufus_kim_possible.jpg Socket Error # 10060
Connection timed out. retry 1 of 50

И остановилось скачивание на 22.25%

В новой версии не забудь запилить чекбокс -= сохранять пароль (сохраняй в настройках зашифрованным)

Ну или прямым текстом. Мне все равно, просто надоело его каждый раз вводить заново

Стив, я снова хочу обратить твое внимание на
www.hentai-foundry.com
Подумай над этим по свободному времени.

>>5578
Не, это не совсем правильно.

При автопереименовании получается каша в некоторых альбомах - там где картинки именуются image1 image2 ... image15 потом снова image1 image2 ... - такие альбомы смотреть невозможно, потому что там картинки перемежаются сначала все первые, потом все вторые и так далее.

А при автономерации теряются оригинальные имена - хочется их сохранить.

То есть было бы няшно так:
0001_ Oh My Goddess Cover.jpg
0002_ Naruto 1 Cover.jpg
....

>>5589
Можно написать батник, который будет запускать с нужным паролем:
graber.exe resname=exhentai.org login=ЛОГИН password=ПАРОЛЬ

Скажите, а почему exhentai.org не пускает? Почему он не всем виден? Мне какую-то картинку с поникшим теддибиром выдает.

>>5597
>Скажите, а почему exhentai.org не пускает? Почему он не всем виден? Мне какую-то картинку с поникшим теддибиром выдает.
Для начала регистрируешься на e-hentai.org, входишь на свой акк. Удаляешь куки с e-hentai.org и exhentai.org, перезапускаешь браузер. Логинишься на e-hentai.org, а потом уже заходишь на exhentai.org

Обесните слоупоку, как настроить, чтобы пикрилейтед не было. Скачивает не более 100 пикч с g.e-hentai.

А этот грабер умеет в исключение тегов? Ну, например, умеет качать из множества с тегом "Cirno" все подмножества, исключая подмножество с тегом "chibi"? Если может, то как это настраивается? А если не может, то хорошая идея же, правда?

>>5615
Поставить интервал задержки между скачиваниями 10 секунд

>>5617
Для обычного booru сайта добавь - перед тегом и тэг будет исключен. Для более точного поиска изучи справку к поиску на интересном тебе вебсайте.

Что-то давно не заглядывал. Ну начнем:

>>5586
Все Сокетерроры (в частности таймаут) говорят о проблеме на серверной части. Чтобы удостовериться зайди по ссылке с браузера (предварительно почистив куки).

>>5589
Он есть, в настройках есть поле логин-пароля, в котором находятся данные от текущего ресурса, там находится и чекбокс. Но ты прав, надо бы еще на форму входа галочку добавить.

>>5597
В этом есть смысл, постараюсь запилить сегодня-завтра.

>>5615
Включи интервалы, поставь хотя бы 3 секундную пауз ДО получения ссылки на следующую пикчу (before getting url).

>>5617
В соответствии с поисковым АПИ ресурса, да, как сказал >>5620-кун.

ОП, няша, сделай загрузку с гугл картинок. Вполне может пригодится.
http://www.google.ru/imghp?hl=ru&tab=wi

>>5625
Разве что когда будет полностью рабочая 2 версия.

>>5626
Да мы уже все на нервах сидим. Никаких комментариев по поводу запила версии 2.0, никаких описаний прикольных багов при разработке, вообще ничего.

Оп, ты доставь WIP и не забудь в новой версии добавить пасхальных яиц.

>>5627
Люто удваиваю!

При попытке скачать с deviantart (любой тег, с категориями и без) грабер выдает ошибку:
"Error on getting list: '''' is not a valid integer value"

Версия грабера 1.1.0.1, настройки дефолтные.

Оп, а как ты представляешь будущую версию 2.0 ?
Так:?
1. Ты пилишь фичи и исправляешь баги в ядре программы. (Альтернативный вариант: Write bugs and remove features)
2. Аноны/Эникейшики пишут плагины и файлы настроек под любимые борды с пикчами. Нужно подробное описание
3. Ты запиливаешь минимум плагинов самых распространенных борд
4. Багтрекер наполняется ненавистью и ссылкими на авторов плагинов
5. Возможно авто обновление плагинов (Не знаю как ты это сможешь сделать, но очень хорошо иметь тоже самое как в Foobar)

>>5627>>5628
Просто я сейчас занимаюсь вопросом смены рабочего места, поэтому на досуг не так уж много времени остается :(. Да и чего веселого может быть, и багам пока что неоткуда браться, т.к. основную массу времени занимает продумка и написание основных классов типа "список пикч", "список тэгов", "список потоков" и т.п. Пару дней я еще впустую потратил на попытку взять под контроль закачку переходом на WinSOCK, но в итоге пришел к выводу, что потребуется слишком много времени чтобы еще допилить обработчики данных, куки и т.п.

>>5631
1 чек
2 чек. Среди них я тоже буду, буду публиковать "у себя" наиболее годные... или что-то в этом роде.
3 не меньше того, что есть сейчас.
4 волков бояться...
5 слишком уж далеко заглянул, запилить бы нормальное самообновление.

Перезалил грабер: http://files.mail.ru/V7FNH5

- в THEDOUJIN и EX/G.EHENTAI прикрутил нумерацию (нумерация добавляется в начале имени файла с ведущими нулями), чекбокс incremental filenames;
- пофиксил загрузку с девианта;
- пофиксил закачку с пиксива пикч в альбомах, у которых нет big версии (правда проверить не удалось, не охота было заново перекачивать 1500 пиков).

новых борд пока не прикручиваю.

>>5632
Сосредоточься на логике, юзай сторонние библиотеки. Не стоит самому писать все вспомогательные классы. Может стоит юзать xml как универсальное хранилище. Главное - чтобы не усложнять работу, а упрощать. Иначе не сможешь допиливать интерфейс, логику и сайты - времени не останется.

>>5643
>Иначе не сможешь допиливать интерфейс, логику и сайты - времени не останется.
ага, поэтому я 2.0 версию и запустил. Сейчас допиливание и прикручивание новых борд так или иначе затрагивает больше половины функциональных блоков (шаблонные "стандартнобуры" не в счет, в этом случае обычно достаточно через запятую добавить идентификационный номер рядом с "мамой" при определении параметров). Когда перейду на "алгоритмы во внешних файлах", изменять движек надо будет только в случаях добавления фич и фикса багов, да и обработка упростится за счет того, что параметры скачки для каждой отдельной борды не будут описывать в теле... В общем, так, как сделано сейчас, делать не надо x) Главное на текущей стадии не накасячить во взаимодействии базовых классов и правильно распихать информационные "поля", чтобы потом кастыли не придумывать.

Перекатываюсь на новую версию

забанило меня на г. е. хентае, надолго

галка "query interval" была, злодейка

собственно без претензий, просто предупреждаю

ну почему в эру торрентов и сверхзвуковых ёршиков для унитаза нет альтернатив для этого свинского гехентая?

мои милые додзики :(

>>5659
>свинского гехентая
Меру просто нужно знать. Небольшими количествами кстати успешно качается средствами самого е.хентая.

>>5659
>забанило меня на г. е. хентае, надолго
включай прокси

Снова в треде же

Можешь убрать из программы постоянное упоминание о возможности сохранения списка перед выходом. Заменить эту штуку опцией в настройках или совсем выпилить нахуй.
Почему? Кому надо - тот сохранит список при надобности в любом случае

>>5659
А тред 1 или несколько?

Нужны нормальные маски для переименования файлов. Счетчик там добавить или настроить строку с тегами (Самые редкие к примеру).
Я просто не хочу видеть в названии огромный хеш который для меня ничего не значит.

И что делать с .csv файлом? Чем открыть? Как использовать? Поясните

>>5670
Есть такая, в настройках в разделе window "save note on closing".
>>5678
Хорошая идея с самыми редкими тегами, надо что-нибудь намутить на эту тему. А так вообще можно поменять на тэги в имени.
ЦСВ можно в экселе открывать, в опенофиссе, думаю тоже. Каждый уважающий себя табличных редактор его поддерживает. Формат стандартный - ";" разделитель столбцов, если в тексте есть ";", то строка изолируется двойными кавычками.

Привет, Стив. Мне в голову пришла идиотская и никому не нужная идея. Можно запилить такую штуку, которая качала бы арты определенного размера (хотя бы с Коначан)? Пробовал искать через их теги - нихрена не получилось. Пикрелейтед.

>>5685
А у меня все нормально

Реквестирую функцию загрузки всех закладок пользователя. (http://www.pixiv.net/bookmark.php?id=номер_пользователя)

>>5686
Ох... Хрень какая-то. Когда писал тот пост, граббер нашел всего 12 артов. Сейчас попробовал еще раз начал искать все. Мистика.

>>5685
http://gelbooru.com/index.php?page=help&topic=cheatsheet
На гельбуре можно размеры определять для поиска

>>5678
Кажется еще какие-то пикчаменеджеры работают с csv

было бы неплохо иметь автоматическую загрузку изображений сразу после загрузки листа, в обход кнопки grab!

>>5717
Запускай из командной строки пока - оно автоматически скачивает и ошибки вроде игнорирует, то есть не останавливается

Что случилось оп? Какие новости?

Можно сделать автоматическую генерацию имён типа
?member-name? - ?illust-id? - ?title? ?page??[ページ]?

>>5742
a ty spravku chital?

>>5727
как ни грустноу, пока никак. И, возможно, аж до нового года будет никак. Написал заявление на увольнение, работы неажидано прибавилось, весь декабрь проведу в другом городе, а портативки у меня нет.
>>5742
>>5433

>>5760
Печально. Ну что ж... Будем ждать. Удачи тебе, няша.

Наверное, как-то так. Простейший вариант описания скрипта для скачки, в этот раз по возможности на основе апи борды.

Грустно то как тут.

Может под новый год всё изменится?

>>5780
Для меня если здесь ни кто не пишет, то все хороще. Так что кому как.

>>5781
>никто
fxdderpp

Собственно, разбил базу на гуглкоде, еще до выхода рабочей версии, да. Завтра залью туда последние исходники с последними правками старой версии, а так же первые огрызки новой, и потихоньку буду приучать себя к работе с контроллерами версий.
nekopaw.googlecode.com
Задавать свои ответы и пожелания можно теперь и там.

http://tegaki.pipa.jp
Запили

>>5798
>nekopaw.googlecode.com
http://code.google.com/p/nekopaw/issues/list

>>5800
Тогда придется регать каждому аккаунт на гугле, не очень удобно. Кому нужно пусть тут оставляет тогда уж.

Собственно, завтра сваливаю в другой город на месяц, но таки нашел, у кого одолжить нетбук. Так что постараюсь поддерживать обновления.

>>5809
Трудно всем завести акк:?

Ну я могу продублировать посты от сюда туда.

есть ли возможность грабить файлы с rating:explicit с e621? пикрелейтеды уже надоели

>>5835
Пиши чтото вроде:
Поиск по строке rating:explicit выдаёт только одну картинку, хотя поиск по сайту выдает более 500 страниц.
Или фикси или скажи, что так задумано по дизайну

>>5837
По эксплициду надо щелкать чтобы на него посмотреть. Прога же ссылки получает не заходя на страницу самой пикчи, потому получается такая хуйня. Пошаманить полчасика и будет работать. Но уже не сегодня, я 2е суток не спал =_=

>>5843
Хотя нет, соврал, там просто скриптом урл превью подставляется, починить проще, но все равно не раньше следующего релиза, да.

>>5844
буду ждать. спасибо за ответ, няша.

>>5846
Новый релиз вышел. Можно забирать.

Типа бамп

>>5850
>Типа бамп

Linux way хуле. Легче дописать костылей.

Так как там с альфой 2.0 ?
где исходники пишутся? Где то в другом месте?

не нашел мануалов для скачивания из ехентая
Трудно добавлять в архив новую версию справки с ченчлогом (тредом)1?

>>5850
откуда забирать-то?

Потсоны, а можно включить в грабер не схожие с данбору ресурсы?

Минитокио, например.

>>5853
с альфой пока никак, я ж говорил, что перекатился на новое место работы. Надо нормально испытательный срок пережить, поэтому свободное время хромает.
http://code.google.com/p/nekopaw/source/

>>5854
В гайде есть пункт о скачке с галерей альбомного типа (теперь есть).
дыа, лениво же

>>5855
http://code.google.com/p/nekopaw/

>>5856
пиксив и е-хентай есть, значит можно. Помню, уже реквестировали его, но тогда мне показалось довольно геморройным его прикручивать. Сейчас на базе альбомников можно сделать не сильно напрягаясь. В следующем релизе тогда прикручу.

>>5858

HTTrack Website Copier release history:
--------------------------------------
*
This file lists all changes and fixes that have been made for HTTrack.

3.44-1
+ Fixed: Randomly corrupted files during updates due to "engine: warning: entry cleaned up, but no trace on heap"/"Unexpected 412/416 error" errors (Petr Gajdusek ; closes:#614966)

3.43-12
+ Fixed: buffer overflow while repairing httrack cache if a damaged cache is found from a previous mirror (closes:#607704)

3.43-11
+ Fixed: webhttrack fixes for icecat (closes:#605140)

3.43-10
+ Fixed: capture URL not working properly when IPv6 is installed (John Bostelman)*

>>5861
Documentation

Overview

HTTrack overview and features

License

The HTTrack license agreement

How to Use
WinHTTrack/WebHTTrack (GUI version for Windows or Linux/Unix)

HTTrack GUI documentation, with step-by-step example, for the Windows release (WinHTTrack) and the Linux/Unix relese (WebHTTrack)

HTTrack Users Guide By Fred Cohen

A tutorial that describes all command-line options, for Linux and Windows users

Developper/Programming

How to use HTTrack in batch files, and how to use the library

How not to Use

What you mustn't do : bandwidth abuse, and other bad behaviours

FAQ & Troubleshooting

Frequently asked questions about HTTrack, and troubleshooting

Release Changes

New features and bug fixes are listed here

About this program

How to reach us for comments, bug report and anything else, information about this project


САМ ЗАХОТЕЛ НА АНГЛИЙСКОМ!

>>5861>>5862
Што?

>>5863
Она просто тонко троллит ОПа.
ОП испытывает небольшой батхерт по поводу форевер алона.

>>5864
Причем делает это с завидной регулярностью

Прикрути галку сохранять настройки в юни файле
Прикрути галку сохранять настройки в реестре
Функцию импортирования опций из других версий на случай сильного изменения программы.

>>5864
А. Просто я сразу не понел. Хотя нет, я и сейчас не понел. Мне потолще надо, што я делаю не так?

>>5865
Но зачем? Чем обычный ини не угодил? И настройки радикально не менялись вообще (разве что когда я более стойкий механизм определения айдишников для ресурсов приделывал), да и заново расставить галки занимает 10 секунд неторопливого щелканья кнопкой мыши. Параметры сохраняемого списка (которым пользуются 0.5 анонов) записываются с учетом обратной совместимости.

>>5867
>А. Просто я сразу не понел. Хотя нет, я и сейчас не понел. Мне потолще надо, што я делаю не так?
BOLISHE KAPSA I ZAREGAISIA NA CODEGGOGOL
>Чем обычный ини не угодил?
ENTERPRIZE AND PLAGINS! где они? ааа. я знаю. Счас пойду читать твои исходники и позорить тебя на гугле или нет?
Мне надоело постоянно обновлять настройки при смене новой программы - далай как хочешь. Будет в реестре - ини файл не потребуется. Положу рядом старый файл настроек - программа САМА должна конвертировать его в свой обновленный формат. И надеюсь на XML стиль с каментами для плагинов.
swf и флеш до сих пор не знаю как скачать...Зачем делать вручную, когда есть ты?

Пойду играть в Дарвинию и слушать 8бит

>>5869
>И надеюсь на XML стиль с каментами для плагинов. `
[parametres]
dir=C:\
destination=-1
width=564
height=550
windowstate=0
loghided=0
[previewwindow]
left=585
top=0
undragleft=1720
undragtop=50
[grid]
autoscroll=0
[options]
afterend=2
savedtagschecked=0
savedtags=
byauthor=-1
queryinterval=3
checkqueryinterval1=1
checkqueryinterval2=1
checkbeforeget=0
checkbeforedwnld=0
checkbafterdwnld=0
cntfilter=1
showpreview=0
autodirname=0
autodirnameformat=?t\?s
existingfile=0
savejpegmeta=1
downloadalbums=0
createnewdirs=0
origfnames=0
incfnames=0
nameformatcheck=0 chto eto?
nameformat=?i?p_p/ KAK?
tagsincheck=0
tagsin=0
threads=17
opendrive=0
driveletter=
trayicon=1
taskbar=1
keepinstance=0
savenote=1
retries=50
[authdata14] LOL
login=
[authdata7]
login=
[authdata15]
login=
[authdata21]
login=
[authdata12]
login=
[authdata1]
login=
[authdata23]
login=
[authdata24]
login=
[authdata8]
login=
[authdata13]
login=
[authdata9]
login=
[authdata0]
login=
[authdata3]
login=
[authdata2]
login=
[authdata27]
login=
[authdata25]
login=
[authdata18]
login=
[authdata10]
login=
[authdata17]
login=
[authdata4]
login=
[authdata22]
login=
[authdata5]
login=
[authdata6]
login=
[authdata11]
login=
[authdata26]
login=
[authdata20]
login=
[authdata19]
login=
[authdata16]`

Я все таки не хакер, чтобы трахаться с ней.

rpVersionInfo Вроде поняла
CCR Exif 1.1.2 Годно
TMS Components 5.8.7.0 графон?
JEDI VCL Components 3.45 (есть 1 исправленный pas, лежит в папке с исходниками грабера) мыло?
* SpTBX 2.4.6 Омск?

Поясни плз чем и с чем ты её компилировал. Хочу сломать же

>>5871
Если скорость не важна, то понадобится найти обезьяну с Eclipse/JAVA

>>5869
Непонел сути драмы. Ну да ладно.
Дай угадаю, ты удаляешь папку с программой и потом разархивируешь файл в новую?
Кстати не помню, чтобы когда-либо говорил о комфортных условиях для плагостроя и вообще =_= Доступ к ini файлам обеспечивается через совершенно обычный TINIFile, поэтому непонимат, нафига еще кучу текста в XML хранить, или засирать и так засраный со всех сторон реестр.

>>5870
http://code.google.com/p/nekopaw/wiki/FirstVersion#%Описание_Settings.ini

>>5871
Все перечисленное на delphi 2010. Начинал писать еще в своем ПТУ, писал для себя и в учебных целях, на ней же тестил компоненты, позволяющие не изобретать велосипед из раза в раз, качество кода соответсвенное. Problems officer?

Стив, чтобы посмотреть обработанные реквесты на доработку, в выпадающем списк "search" надо выбрать All issues и нажать "search" :3

>>5874
> Стив, голоден?
>>5876
Стив умнее меня?

Хорошо. Пускай каждый плагин будет срать вот сюда >>5870

>http://code.google.com/p/nekopaw/wiki/FirstVersion#%Описание_Settings.ini
Хорошо для вики. Только для неё

>delphi 2010
ССылку на скачивание сего дивного продукта в yobaЭдишон

>>5881
Стив, не парься, я уже все давно за тебя скачал, установил и плюнул на это дело. Дальше не разбирайся, голова заболит.

>>5884
>Дальше не разбирайся, голова заболит
TI PONIAL SUTI ZAKLADOK?
DAVAI YGORAT PO NIM?!?

>>5884
а я скачала Фрипаскаль....
Че делать то:? Переписывать под себя?

>>5889
Поднасрал в тред).

>>5890
ИДей на сегодня хватит.

Что-то слишком быстро последнее время тред заполняется =_=

>>5889
Я даже не в курсе различий между фрипаскалем и платной поделкой. Во всяком случае, в установочных пакетах я не видел пакетов для фрипаскаля.

>>5894
>Во всяком случае, в установочных пакетах я не видел пакетов для фрипаскаля.
Ну ладно... просто он няшный и вообще под всем компилируется, а это просто огромный плюс. Ему бы ещё няшности добавило многооконный стиль от плагинов/легкая настройка всего интерфейса. Аля фубар или Гимп.

Устанавливаешь плагин и в общем списке настроек появляется ОН. И чуток перестраивается интерфейс. Для галки архивации выскакивает окошко с опциями 7zipa к примеру. (Ну или уже встроенное в окно)

>>5895
Comment 7 by project member bio....@hotmail.fr, Today (14 hours ago)

I saw this. I also saw that it is saving images using md5s only.
Nekopaw have more boards, but Grabber have more saving features (for the moment at least).

>>5896
ты ведь понимаешь смысл этой фразы?

>>5897
Если ты приделаешь плагины и найдешь побольше обезьян - то мы выиграем.

И да. Нам нужны ссылки на борды в больших количествах для плагинов.
Для стандартобур свой плагин, а у него в настройках ВСЕ извесные адреса их.
Ну и гугло.картинки конечно же - или универсальные интерфейсы или для каждого гугла своё поделие.

>>5898
Это уже суть дело времени и накопительства. Главное доделать скрипты. Дальше уже можно будет использовать шаблоны одинаковых борд чтобы делать клоны, и группировать их. А на счет того же поиска по мд5 - в 2 версии я уже знаю, как это сделать :3

Бля, у меня только один вопрос: кто все это реализовывать будет?

На пиксиве не работает составление списка. Видать опять разметка поменялась. Почини пожалуйста.

Пофиксил закачку с пиксива
http://code.google.com/p/nekopaw/downloads/detail?name=graber1106.zip

>>5908
может ты перенесешь все Issues в скрытый раздел для осуждений, а мне дашь туда доступ?

>>5903
Стив. Он просил пожелания для 2.0. Я ему немного идей подкинул.