15-07-2014 12:44 Alexvn » По поводу форума kamrad.ru
Через неделю, 22 июля, истекает срок нашего договора с хостингом, где размещен сервер kamrad.ru. Перенос форума на новую платформу, где теперь расположен сайт journals.ru, не планируется - это большая работа, на которую у меня просто нет времени и, учитывая активность на форуме - мотивации. Таким образом, с 22 июля форум прекратит свое существование.
Если вы хотите сделать бэкап каких то дискуссий и тем, сейчас самое время этим заняться.
Если у вас есть какие то вопросы или предложения по данной теме, пишите на support@journals.ru.
Такие дела.
Если вы хотите сделать бэкап каких то дискуссий и тем, сейчас самое время этим заняться.
Если у вас есть какие то вопросы или предложения по данной теме, пишите на support@journals.ru.
Такие дела.
Группы: [ организационное ]
Комментарии:
Skiminok
19-07-2014 23:13
Дневник • Профиль
Несмеяна
Так и я ж про него.
Сложного-то ничего нет, комп железный,
вот только полностью он не скачается - будет кусок, выбранный достаточно случайно.
Если вам такое тоже нужно - поставлю закачку.
Так и я ж про него.
Сложного-то ничего нет, комп железный,
вот только полностью он не скачается - будет кусок, выбранный достаточно случайно.Если вам такое тоже нужно - поставлю закачку.
JimmyM
Я так понял, что у телепорта очень тупой анализатор ссылок: он не проверяет, есть ли по текущей ссылке уже скачанная страница, а тупо качает ее еще раз, делая сотни дубликатов. Потому и URL-ов обработанных немерянное количество.
Впрочем, может не он тупой, а я? Где-то галочку какую не нашел, не поставил?
Ты, как я понял, его хорошо знаешь - подскажи: есть там где-нибудь настройка типа "проверять уже скачанные адреса и делать ссылки на них, не создавая дубликатов"? Я не нашел. Может плохо искал или чего не понял?
А впрочем... Ссылки-то тут не на конкретные физические страницы, а команды PHP-генератору на производство страницы по текущему запросу. Так что, возможно, это обойти нельзя...
Я так понял, что у телепорта очень тупой анализатор ссылок: он не проверяет, есть ли по текущей ссылке уже скачанная страница, а тупо качает ее еще раз, делая сотни дубликатов. Потому и URL-ов обработанных немерянное количество.
Впрочем, может не он тупой, а я? Где-то галочку какую не нашел, не поставил?
Ты, как я понял, его хорошо знаешь - подскажи: есть там где-нибудь настройка типа "проверять уже скачанные адреса и делать ссылки на них, не создавая дубликатов"? Я не нашел. Может плохо искал или чего не понял?
А впрочем... Ссылки-то тут не на конкретные физические страницы, а команды PHP-генератору на производство страницы по текущему запросу. Так что, возможно, это обойти нельзя...
Skiminok, это не мне решать.
Несмеяна
Ну решите там у себя... И мне скажите.
Ну решите там у себя...
И мне скажите. 
Skiminok Если ПБ скачается в виде копии форума - м.б. будет его читать легче.
Но техническая копия - есть.
По ольшому счету, если не важно оформление, картинки, а важен только текст - можно попросить Alexvn на выкачку в аналогичном виде других тредов.
Но техническая копия - есть.
По ольшому счету, если не важно оформление, картинки, а важен только текст - можно попросить Alexvn на выкачку в аналогичном виде других тредов.
друзья, по поводу ПБ и вообще раздела ЗВ - почитайте http://kamrad.ru/showthread.php?s=&...459#post1839459. дамп раздела уже передан Maksim Tusken, там есть и ссылка, где искать дальнейшее.
Опытный ворчун
Skiminok не помню такой 
там все настройки в свойствах проекта. Вообще, если убрать ссылки на следующую/предыдущую страницы, качает он только форумы и треды, по идее дублироваться они особо не должны, но все равно их очень много, и никаких шансов, судя по скорости, что форум докачается полностью - нет.
P.S. А, вот, нашел дубли - сортировки форума он еще выкачивает все по отдельности.
P.P.S. И наверняка отдельно выкачивает кнопки "URL сообщения", но это не проверял, может и не настолько тупая программа.
Несмотря на непредсказуемые "паники" HTTrack-а, он, по крайней мере, позволяет изменять настройки "на лету"...
там все настройки в свойствах проекта. Вообще, если убрать ссылки на следующую/предыдущую страницы, качает он только форумы и треды, по идее дублироваться они особо не должны, но все равно их очень много, и никаких шансов, судя по скорости, что форум докачается полностью - нет.P.S. А, вот, нашел дубли - сортировки форума он еще выкачивает все по отдельности.
P.P.S. И наверняка отдельно выкачивает кнопки "URL сообщения", но это не проверял, может и не настолько тупая программа.
Несмотря на непредсказуемые "паники" HTTrack-а, он, по крайней мере, позволяет изменять настройки "на лету"...
отредактировано: 20-07-2014 06:13 - JimmyM
Опытный ворчун
В общем, форум Лейна у меня выкачался HTTrack-ом за обозримое время (2-3 часа с учетом, что я не исключил ссылки на уже несуществующий lane.ru) с вот такими настройками Scan Rules:
+*.png +*.gif +*.jpg +*.jpeg +*.css +*.js -ad.doubleclick.net/* -mime:application/foobar
+*.zip +*.tar +*.tgz +*.gz +*.rar +*.z +*.exe
-http://kamrad.ru/index.php?s=*
-*&forumid=85*
-*/postings.php*
-*/editpost.php*
-*/sendtofriend.php*
-*/printthread.php*
-*/member2.php*
-*/search.php*
-*/member.php*
-*/private.php*
-*sortfield=title.htm
-*sortfield=postusername.htm
-*sortfield=replycount.htm
-*sortfield=views.htm
-*sortfield=lastpost.htm
-*sortorder=asc&*
-*/postings.php*
-*/newreply.php*
-*/moderator.php*
-*/photolist.php*
-*/buddylist.php*
-*/memberlist.php*
-*/calendar.php*
-*/register.php*
-*/usercp.php*
-*/photolist-2.php*
-*/photolist-3.php*
-*/misc.php*
-*/forumconfig.php*
-*newreply.php*
-*newthread.php*
-*goto=*
-*#post*
-http://kamrad.ru/forumdisplay.php
-*threadid=74425#
-*/poll.php*
-*forumid=*
+*forumid=118*
Выделенные цифры - это номера конкретных форумов, того, который нужно качать (118) и форума(ов) на уровень выше (85). Возможно, некоторые условия излишни.
Другие параметры выкачки
Limits:
Max mirroring depth - 4 (P.P.S. там где длинные темы, в тысячи и десятки тысяч сообщений, нужно ставить значительно больше! для SW наверное 100 или 150)
Max external depth - 0
Max transfer rate - пишите максимум, 1000000 например
Max connections/seconds - 100
Max number of links - максимум - 10 000 000
Flow Control:
Max connections - 15
P.S. Кому что надо, у вас еще есть время - качайте.
P.P.S. Свежий вариант условий есть здесь. Этот - для истории.
+*.png +*.gif +*.jpg +*.jpeg +*.css +*.js -ad.doubleclick.net/* -mime:application/foobar
+*.zip +*.tar +*.tgz +*.gz +*.rar +*.z +*.exe
-http://kamrad.ru/index.php?s=*
-*&forumid=85*
-*/postings.php*
-*/editpost.php*
-*/sendtofriend.php*
-*/printthread.php*
-*/member2.php*
-*/search.php*
-*/member.php*
-*/private.php*
-*sortfield=title.htm
-*sortfield=postusername.htm
-*sortfield=replycount.htm
-*sortfield=views.htm
-*sortfield=lastpost.htm
-*sortorder=asc&*
-*/postings.php*
-*/newreply.php*
-*/moderator.php*
-*/photolist.php*
-*/buddylist.php*
-*/memberlist.php*
-*/calendar.php*
-*/register.php*
-*/usercp.php*
-*/photolist-2.php*
-*/photolist-3.php*
-*/misc.php*
-*/forumconfig.php*
-*newreply.php*
-*newthread.php*
-*goto=*
-*#post*
-http://kamrad.ru/forumdisplay.php
-*threadid=74425#
-*/poll.php*
-*forumid=*
+*forumid=118*
Выделенные цифры - это номера конкретных форумов, того, который нужно качать (118) и форума(ов) на уровень выше (85). Возможно, некоторые условия излишни.
Другие параметры выкачки
Limits:
Max mirroring depth - 4 (P.P.S. там где длинные темы, в тысячи и десятки тысяч сообщений, нужно ставить значительно больше! для SW наверное 100 или 150)
Max external depth - 0
Max transfer rate - пишите максимум, 1000000 например
Max connections/seconds - 100
Max number of links - максимум - 10 000 000
Flow Control:
Max connections - 15
P.S. Кому что надо, у вас еще есть время - качайте.
P.P.S. Свежий вариант условий есть здесь. Этот - для истории.
отредактировано: 26-07-2014 10:45 - JimmyM
JimmyM
Спасибо огромное, сейчас попробую литературу еще и так скачать.
Стартовая страница - страница нужного форума?
Спасибо огромное, сейчас попробую литературу еще и так скачать.
Стартовая страница - страница нужного форума?
Опытный ворчун
Skiminok Ага
JimmyM
Всё получилось, спасибо тебе огромнейшее!
Литература скачалась полностью и без ошибок.
ВСЕМ: Используйте HTTrack по ссылке Alexvn с настройками от JimmyM для бакапа форумов - всё работает!
Всё получилось, спасибо тебе огромнейшее!
Литература скачалась полностью и без ошибок.
ВСЕМ: Используйте HTTrack по ссылке Alexvn с настройками от JimmyM для бакапа форумов - всё работает!
Alexvn
Я там у тебя по К-Мылу тоже дамп своей почты попросил.
Я там у тебя по К-Мылу тоже дамп своей почты попросил.
Опытный ворчун
JimmyM
ОТЛИЧНО.
Приду с работы - выложу всё, что скачал, там МНОГО.
ОТЛИЧНО.
Приду с работы - выложу всё, что скачал, там МНОГО.
Эта... тут такое дело 
Вы не подумайте, что ваш покорный слуга стал злостным некрофилом... но я продлил хостинг камрада ещё на какое-то время.
Так что, если кто-то не успел что-либо докачать, то у вас есть ещё как минимум неделя.
Пис!
Вы не подумайте, что ваш покорный слуга стал злостным некрофилом... но я продлил хостинг камрада ещё на какое-то время.
Так что, если кто-то не успел что-либо докачать, то у вас есть ещё как минимум неделя.
Пис!
JimmyM новый vB конечно не торт
Но это лучше чем ничего. И кто его знает, может весь камрад перенесут на новое место...
Как бы там не было, слепок старого я всё же себе качну... дорог как память
Но это лучше чем ничего. И кто его знает, может весь камрад перенесут на новое место...
Как бы там не было, слепок старого я всё же себе качну... дорог как память
Опытный ворчун
William Wolos по-моему, тебя Штурмер укусил, старый некрофил 
Это здорово! 
Skiminok ну, ты это, подпишись в участники, я тебя архивариусом сделаю
Это здорово! Skiminok ну, ты это, подпишись в участники, я тебя архивариусом сделаю
William Wolos
Коля, спасибо! Ты - как всегда самый лучший и прикольный! Недаром тебя все наши девушки любят!
Коля, спасибо! Ты - как всегда самый лучший и прикольный!
Недаром тебя все наши девушки любят! Опытный ворчун
вопрос: в Мафии же, например, были какие-то подфорумы с играми по правилам Маерда, кажется, - они убиты насмерть или как?