Главная Настройка Mobile Контакты NSFW Каталог Пожертвования Купить пасскод Pics Adult Pics API Архив Реквест доски Каталог стикеров Реклама
Доски


[Ответить в тред] Ответить в тред

Check this out!

[Назад][Обновить тред][Вниз][Каталог] [ Автообновление ] 51 | 11 | 19
Назад Вниз Каталог Обновить

Аноним 30/08/17 Срд 12:01:23  160130035  
6B1.jpg (396Кб, 1200x1400)
Сап Анон. Хотел тебя спросить, нужен ли тебе парсер для различных досок? Сейчас пока наклепал парсер для:2ch.hk, 4chan.org, tumblr.com, archiveofsins.com. И вот думаю делать для них оконный дизайн, или оставить всё в консоли? Так что если тебе нужен парсер картинок и видео то отпишись в треде. Или подкинь идею для парсера.
Парсер писал для грабба фап-тредов(ну вы понимаете)
Аноним 30/08/17 Срд 12:02:42  160130118
>>160130035 (OP)
Не нужен, пиздуй в армию.
Аноним 30/08/17 Срд 12:05:13  160130272
>>160130035 (OP)
Парсер определяет копии файлов? Ну хотя бы по размеру.
Оконный режим нужен, имхо.
Аноним 30/08/17 Срд 12:07:06  160130389
>>160130272
Он скачивает полноразмерные исходники
Аноним 30/08/17 Срд 12:09:32  160130533
tumblroppyv1vxd[...].mp4 (3170Кб, 480x852, 00:00:32)
Бамп сграбленым видео(tumblr)
Аноним 30/08/17 Срд 12:15:24  160130876
tumblrokqp6k79H[...].mp4 (11557Кб, 376x668, 00:00:30)
Еще одно рандомное видео
Аноним 30/08/17 Срд 12:21:44  160131274
tumblro7c3r6093[...].mp4 (19720Кб, 480x480, 00:02:53)
Последний бамп
Аноним 30/08/17 Срд 12:43:37  160132534
Он у тебя может в автоматическом режиме работать? Парсить новые треды по ключевым словам
Аноним 30/08/17 Срд 12:54:34  160133263
>>160130035 (OP)
Тоже запилил парсер для скачки фап-тредов, но все влом его под крон запилить и поставить работать на малине.
Аноним 30/08/17 Срд 12:55:10  160133298
На чем пишешь, няша? Православный питон?
Аноним 30/08/17 Срд 13:22:01  160135082
>>160133263
> запилить и поставить ра
ооо умно. Думаю тоже купить малинку. еще бы проверку на дубли поставить и будет шикарно.
Аноним 30/08/17 Срд 13:22:53  160135138
>>160132534
Пока нет, вставляешь ссылку он создает папку и кидает туда файлы. Но идея тоже неплохая.
Аноним 30/08/17 Срд 13:24:24  160135230
Sexy-College-Te[...].jpg (60Кб, 768x897)
>>160133298
Да, на питоне. Вот только бесит что нормального компилятора нет. Уже кровь из глаз идет от этого py2exe настолько всё дерьмово
Аноним 30/08/17 Срд 13:25:01  160135273
1440534416459.jpg (257Кб, 933x1400)
1478542485696.jpg (326Кб, 1200x1400)
1481713092595.jpg (207Кб, 700x1400)
1481713136985.jpg (189Кб, 933x1400)
>>160130035 (OP)
Аноним 30/08/17 Срд 13:25:30  160135311
bs4?
Аноним 30/08/17 Срд 13:25:38  160135323
1481713282528.jpg (449Кб, 1600x1371)
1481713336553.jpg (328Кб, 1165x1360)
>>160130035 (OP)
Аноним 30/08/17 Срд 13:27:56  160135456
>>160135273
Есть пак?
Аноним 30/08/17 Срд 13:28:41  160135509
>>160135456
Всё что было запостил.
Аноним 30/08/17 Срд 13:31:58  160135715
>>160130035 (OP)
А что там парсить, всё json отдается
Аноним 30/08/17 Срд 13:32:45  160135768
1448659356098.jpg (363Кб, 1600x1371)
>>160135456

ТАЩУСЬ от нее
Аноним 30/08/17 Срд 13:33:41  160135837
>>160130035 (OP)
Нахуя парсер, если есть api? Ты ебанутый или тебе заняться нечем?
Аноним 30/08/17 Срд 13:41:09  160136299
>>160135768
Горяченькая
Аноним 30/08/17 Срд 14:55:43  160140642
>>160130035 (OP)
как ты его написал? научи
Аноним 30/08/17 Срд 14:56:50  160140702
>>160135230
ебать не знал что етсь моар!!!!! это все?
Аноним 30/08/17 Срд 14:59:04  160140838
Нахуй он нужен, там скрипт на баше в пару строчек для сохранения всей медиа из треда.
Аноним 30/08/17 Срд 14:59:35  160140869
>>160140838
>там скрипт на баше
где там?
Аноним 30/08/17 Срд 15:00:10  160140922
>>160140869
У меня есть, могу дать, надо?
Аноним 30/08/17 Срд 15:02:54  160141139
What?
Аноним 30/08/17 Срд 15:03:16  160141171
>>160140922
да
Аноним 30/08/17 Срд 15:05:35  160141350
>>160141171
Если макаба проебется, целый скрипт тут https://pastebin.com/6EUdxVUX
THREAD="154202497"
wget -O ${THREAD}.html https://2ch.hk/b/res/${THREAD}.html
cat ${THREAD}.html | grep -o /b/src/${THREAD}/[0-9]\.[a-z] | sed 's/^/https:\/\/2ch.hk/' | uniq > list
wget -nc $(cat list)

Схороняешь в файл dl.sh даешь права на исполнение и запускашь, не забыв поправить номер треда.
Аноним 30/08/17 Срд 15:34:16  160143237
>>160135230
Так поставь питон на венду и запускай нативно. Зачем эти велосипеды?
Или вообще запусти виртуалку с минимальным дистром линукса и еби систему в рот.
Аноним 30/08/17 Срд 15:35:30  160143324
>>160135715
Ну так json и парсить.
Фильтровать треды по теме, брать оттуда контрольные суммы для файлов, чтобы не качать заново.
Аноним 30/08/17 Срд 15:37:40  160143463
>>160141350
А нужен сервис, который мониторит b на предмет новых тредов, соответствующих установленным параметрам, потом закидывает найденный треды в очередь, где по расписанию подтягиваются обновления.
Вручную листать сосач, чтобы получать свежий фапконтент в 2к17 - это уже пиздос.
Аноним 30/08/17 Срд 15:44:51  160143931
>>160143463
Кому нужен? Тебе? Так изобретай, может кому-то еще нужен. За фап контентом на профильные ресурсы нужно ходить, а ковыряться одном и том-же контенте из треда в тред нахуй надо.
Аноним 30/08/17 Срд 15:47:51  160144106
Мне вот нужен парсинг сайтов, где антипарсеры, блять, стоят, навроде кинопоиска, но это наверняка тебе не по силам, во всяком случае бесплатно.
Аноним 30/08/17 Срд 16:03:23  160144990
>>160143931
На профильных говно.
А парсер можно настроить, чтобы на выходе ты имел только свежий контент, который к примеру тебе в инстаграм будет литься.
Аноним 30/08/17 Срд 16:06:56  160145185
>>160144990
Бля, в какой инстаграм! В телеграм же!
Аноним 30/08/17 Срд 16:09:18  160145300
>>160130035 (OP)
Да куклой всё качать можно
Аноним 30/08/17 Срд 16:11:34  160145417
Screenshot1.png (13Кб, 160x81)
Найс придумал, ОП.
Аноним 30/08/17 Срд 16:12:46  160145493
>>160145300
>>160145417
Она иногда не переваривает треды с огромным количеством контента.
Аноним 30/08/17 Срд 16:13:53  160145539
>>160145493
Ну ещё ни разу такого не было. Качает неспеша, но наверняка. Но ты вообще молодец, что придумал себе задачку и задротишь кодинг. Успехов в изучении и всё такое.
Аноним 30/08/17 Срд 16:15:07  160145606
image.png (99Кб, 1148x881)
image.png (98Кб, 1148x881)
>>160130035 (OP)
>Или подкинь идею для парсера.
Парсер для офощных знакомств в соце, чтобы потом искать по анкетам через фильтры

https://github.com/grigoryMovchan/soc
Аноним 30/08/17 Срд 16:15:28  160145626
>>160145539
Я не оп. Будем надеяться, что он догадается кому это адресовано.
Аноним 30/08/17 Срд 16:16:21  160145687
>>160145606
Вот это прикольно на самом деле
Аноним 30/08/17 Срд 16:16:58  160145708
XsNLFkBcAY.jpg (38Кб, 522x392)
>>160145606
> в соце
Аноним 30/08/17 Срд 16:18:01  160145775
>>160145687
Сам запостил, сам себя поддержал))
Аноним 30/08/17 Срд 16:19:22  160145837
>>160145775
Иди нахуй))

Постоянно делаю поиск своего города по соцу.
Аноним 30/08/17 Срд 16:22:07  160146014
>>160130035 (OP)
мне нужен. буду благодарен если поделишься текущей консольной версией
Аноним 30/08/17 Срд 16:26:12  160146249
>>160145837
>Постоянно делаю поиск своего города по соцу.
С той же целью его и сделал. Но потом создал тянскую анкету с указанием своего мухосранска и охуел что за неделю на неё 50 кунов отклинолось, причем даже из ближайших областей, и каждый старался выебнуться простыней текста и желанием общаться на любых условиях. Когда как на мою кунскую никто за полгода и строчки не написал, то есть дело оказалось не в мухосране. На той и другой фото не было.
Аноним 30/08/17 Срд 16:26:59  160146289
>>160146249
И после этого я за месяц вот эту хуйню сделал http://bobylquote.ru/
Аноним 30/08/17 Срд 16:32:35  160146614
>>160145837
Ты тоже тут не задерживайся и присоединяйся к путешествию, уебок))
Аноним 30/08/17 Срд 17:15:46  160149185
>>160130035 (OP)
Опа, вот тебе идея: парсер, который сохраняет только посты, которые были впоследствии потерты модератором.

[Назад][Обновить тред][Вверх][Каталог] [Реквест разбана] [Подписаться на тред] [ ] 51 | 11 | 19
Назад Вверх Каталог Обновить

Топ тредов
Избранное