World Of Spectrum катится в сраное говно

Веб ресурсы, сайты

Postby moroz1999 » Sun, 27.09.2015 20:38:08

breeze wrote:А что мешает, через тот же тур каким телепортом сделать полное локальное зеркало, а потом уже спокойно раздирать парсером как душе угодно?

В принципе, ничего не мешает, как-то так и сделаю, вероятнее всего. В общем-то, как я понимаю, всё равно придется доводить до конца самому. Проблема не в том, что я не умею, а в том, что это займет кучу времени, которое есть на что потратить в этом проекте. Поэтому я и попытался спросить помощи с этим.

g0blinish wrote:В общем, вот такой примерчик вышел на VBS. Формировать XML можно на свой вкус. Охват всех ссылок я не стал делать.

Спасибо, попробую.
User avatar
moroz1999
 
Posts: 1872
Joined: Wed, 01.08.2012 11:23:51

Postby TS-Labs » Sun, 27.09.2015 21:45:08

Можно раздать сегменты на выкачку.
1. Вычисляешь сколько урлов анон может выкачать невозбранно с одного ип.
2. Делаешь пачку батников для вгета, кладешь их например здесь. Народ берет по одному.
3. Выкачивают, аплоадят тебе.
Готов помочь.
В любом случае, координатор работ - ты.
User avatar
TS-Labs
 
Posts: 5398
Joined: Thu, 26.07.2012 01:29:56

Postby moroz1999 » Sun, 27.09.2015 22:14:47

Тоже как вариант, спасибо. Я немного покумекаю еще над этим вопросом.
Первым приоритетом сейчас пойдет окончательное решение вопроса утягивания всего архива с zxtunes.com .
User avatar
moroz1999
 
Posts: 1872
Joined: Wed, 01.08.2012 11:23:51

Postby g0blinish » Mon, 19.10.2015 14:29:21

короче, у траюна нет денег на продление домена vtrdos.ru. Будем негодовать или?
[x] No Screenshot
User avatar
g0blinish
Упырь говнофорума
 
Posts: 3641
Joined: Tue, 18.06.2013 10:59:01

Postby psb » Mon, 19.10.2015 17:30:32

а ShM что?
мне кажется, если вопрос стоит "или донейтьте или ничего не будет", то надо просто отбирать домен и всё. то есть, если кто-то заплатит эти сраные 250р, то домен не должен больше принадлежать старому хозяину (у него кончился интерес).
User avatar
psb
 
Posts: 715
Joined: Tue, 30.12.2014 23:22:32

Postby g0blinish » Mon, 19.10.2015 17:44:06

psb wrote:то надо просто отбирать домен и всё.

Ну тогда пиздец ресурсу на то время, когда найдется унбеливер и утащит доменное имечко.
[x] No Screenshot
User avatar
g0blinish
Упырь говнофорума
 
Posts: 3641
Joined: Tue, 18.06.2013 10:59:01

Postby TS-Labs » Mon, 19.10.2015 17:53:18

psb wrote:надо просто отбирать домен и всё

Вангую:
- траюн поклянчит 250р., повыебывается,
- домен не отдаст,
- когда придет день Х, возьмет у мамы эти 250р.
User avatar
TS-Labs
 
Posts: 5398
Joined: Thu, 26.07.2012 01:29:56

Postby g0blinish » Mon, 19.10.2015 18:16:48

TS-Labs wrote:- траюн поклянчит 250р., повыебывается,
- домен не отдаст,
- когда придет день Х, возьмет у мамы эти 250р.


Скрин на память:
Image
[x] No Screenshot
User avatar
g0blinish
Упырь говнофорума
 
Posts: 3641
Joined: Tue, 18.06.2013 10:59:01

Postby psb » Tue, 20.10.2015 01:33:30

вы как хотите, я отказываюсь это понимать.
User avatar
psb
 
Posts: 715
Joined: Tue, 30.12.2014 23:22:32

Postby g0blinish » Tue, 20.10.2015 09:20:50

moroz1999, что там с WOS? прогресс есть?
[x] No Screenshot
User avatar
g0blinish
Упырь говнофорума
 
Posts: 3641
Joined: Tue, 18.06.2013 10:59:01

Postby moroz1999 » Wed, 21.10.2015 20:36:48

Прогресс мизерный, честно говоря. Надо параллельно делать две задачи:
1. Готовить структуру на zxart. Здесь я очень медленно, но двигаюсь. Мешает то, что уже второй месяц работаю по выходным.
2. Парсить и скачивать весь wos. Здесь есть предложения по помощи, может, сумеем что-то сдвинуть сообща.
После этого мне нужно будет влить второе в первое и отлаживать.
User avatar
moroz1999
 
Posts: 1872
Joined: Wed, 01.08.2012 11:23:51

Postby moroz1999 » Wed, 21.10.2015 20:46:34

По zxtunes:
1. Вся недостающая музыка скопирована с zxtunes. Сравнение сделано по md5, поэтому дубликатов особо не должно быть.
2. Архив mp3 мигрировал на другой сервер, где куча места и под mp3, и под ogg. Эта проблема решена.
3. Теперь mp3 хранятся на том же серваке, где и конвертер. Как результат - пересылать туда-сюда объемы данных больше не нужно, скорость конверсии выросла раз в пять.
4. 90% архива уже сконвертировано в mp3. Некоторые мелодии не скопировались по неведомой мне причине. Чуть освобожусь - пройдусь дебаггером, выясню, и пофиксю, тогда доконвертятся оставшиеся 10%.

Так же будем действовать со всеми архивами и всей информацией. Схема простая:
1. Предлагаем партнерство, синхронизацию, помощь.
2. Если владелец коллекции согласен, все получают преимущества.
3. Если владелец коллекции несогласен, берем все, что можем, самостоятельно.
Нравится кому или нет, но сделаем общий архив вообще всего и вся - полностью открытый для копирований, скачиваний, бэкапов и клонов.
User avatar
moroz1999
 
Posts: 1872
Joined: Wed, 01.08.2012 11:23:51

Postby TS-Labs » Wed, 21.10.2015 20:48:38

Shadow Maker репортит, что вос качается без проблем и нету никаких банов и удивляется что за панику развели.
User avatar
TS-Labs
 
Posts: 5398
Joined: Thu, 26.07.2012 01:29:56

Postby moroz1999 » Wed, 21.10.2015 20:51:04

Может он и прав. После того, как сервак рухнул, защиту могли и забыть восстановить. Я с ним переговорю отдельно, у него вроде как наработки есть на этот счет.
User avatar
moroz1999
 
Posts: 1872
Joined: Wed, 01.08.2012 11:23:51

Postby g0blinish » Thu, 22.10.2015 07:11:39

moroz1999 wrote:После того, как сервак рухнул, защиту могли и забыть восстановить


не путай с фтп, там своя заshitа, я с другими зеркалами уже сталкивался.

В общем надо что-то делать. Я хуй знает что, но надо.
[x] No Screenshot
User avatar
g0blinish
Упырь говнофорума
 
Posts: 3641
Joined: Tue, 18.06.2013 10:59:01

Previous

Return to Web

Who is online

Users browsing this forum: No registered users and 1 guest

cron

x