1. Трекер. Трекер двача https://2ch.hk/tracker.html не работает, поэтому сделал свой.
2. Загрузка всех фото в видео с треда
3. Загрузка всех фото и видео со ВСЕЙ ДОСКИ. При этом одинаковые фото заменяются ссылками.
Все скрипты с комментариями, можно отредактировать под свои нужды, а при минимальном знании питона написать свой (все доки по ссылке).
Ссылка:
https://github.com/diademoff/2ch
Так же там есть видео-инструкция для домохозяек и куча документации.
Задавайте пожелания, желайте вопросы ИТТ
Лучше бы для айос нормальный клиент запили
Можешь тыкнуть примерно в файл:строку, где реализовано продолжение? Спасибо :3
Еще проблема. Когда инет медленный, а файл весит больше 10, то есть загрузка идет больше чем время работы капчи и никак не получается запостить такую вебм
>board_media.py
>py
Своё говноподделие на недояп можешь себе в жопу засунуть
В board_media.py вызывается конструктор Hashtable(HASH_TABLE) на строке 200.
В конструкторе вызывается self.load_file()
В функции load_file на строке 20-33 парсится файл построчно
> Загрузка всех фото и видео со ВСЕЙ ДОСКИ.
Как запилить сюда фильтры?
Чтобы не качало меньше 50Кбайт и не больше 10Мбайт
И чтобы не качало стикеры
Там можно по расширению отсеивать и по ключевым словам в ОП-посте. Читай доки. Стикеры не качает
А по размеру файла?
Большинство боевых картиночек <50Кбайт
Реквестирую
чтобы узнать размер нужно сначала скачать. мб по расширению (высота ширина) сортировать?
Держи пикчу. >>245884922 Расширение большое, но размер маленький и ебучие артефакты.
Разве размер нельзя узнать до скачивания? Я думаю можно.
Да можно, в ближайшее время добавлю
>>245884127
Добавил отсеивание по размеру файла
Отлично. А в доки добавить?
буквально 40-50 секунд назад обновил <3
Русский язык сначала освой, позорник.
А минимальный размер файла реализован?
Если ты грамотный проверь пожалуйста на опечатки документацию. Спасибо, пупсик <3
бля, а это надо? щас добавлю.
P.S. уже добавил
ОП, не скачен, а скачан.
А, соб-но, нахуя, если можно вгетом выкачивать картинки, видосы и прочее говно?
> https://github.com/diademoff/dnevnik_mos_ru
Школьник, борда 18+
wget неудобно и других функций нет
А что по сравнению с уже скачанными, в прошлом треде обсуждали?
Долбоеб, он мог для кого-то это написать. Да и школьники максимум читы могут поставить.
> А что по сравнению с уже скачанными
Сравнивает и заменяет на символическую ссылку. То есть дважды одна и та же пикча не сохраниться
Сравнивает как? По хешу?
>питона
нахуй это говно?
Так уже есть.
только купи пасскод
jq sed вот и весь клиент.
Сравнивает содержимое. Преобразовывает в строку, например:
1110111111101111110011110000111100011111000000110000011100000011
потом сравнивает не сами картинки а строковое представление этих картинок.
Кстати все эти строковые представления сохраняются >>245883171
Думал замутить свой архивач но заебался + работа.
Прототип спокойно прожовывал всю /b с периодом обновления около 10сек. Параллельно с этим успешно искал пикчи с qr кодами и стучал макаке на уродов которые тут были зимой
Почему ты хейтишь питон?
А как будет если допустим есть одинаковая картинка жпг и пнг? Или две пнг но разного размера? Это все же будет как разные, правильно?
> есть одинаковая картинка жпг и пнг
Похуй на формат. он смотрит именно на содержимое, то есть на пиксели
> разного размера
Это тоже продумано. Если разный размер то он поймет что это одно и то же
Нахуй это надо?
скачивать цп Ну тебе разве не нужен трекер? Или скачать все видео из фап треда?
/thread
wget -r -I "/b/src/245882717","/b/thumb/245882717" "https://2ch.hk/b/res/245882717.html" --no-check-certificate -e robots=off -k -q -nv -H -E -p -P245882717 -nd -N -R"index*","wakaba","s."
Вакаба ебет разметку
О нихуя как круто. Спасибо, схоронил.
>>245890109
Шо?
Абу благословил этот пост.
А трекер сможешь также?
wget -r -I "/b/src/245882717","/b/thumb/245882717" "https://2ch.hk/b/res/245882717.html" --no-check-certificate -e robots=off -k -q -nv -H -E -p -P245882717 -nd -N -R"index","wakaba","s."
Блядь
Я хуею с этой разметки
wget -r -I "/b/src/245882717","/b/thumb/245882717" "https://2ch.hk/b/res/245882717.html" --no-check-certificate -e robots=off -k -q -nv -H -E -p -P245882717 -nd -N -R"♥index♥","♥wakaba♥","♥s.♥"
♥ это звездочки
Тому что есть с++ , он быстрей и проще.
>проще
kek
Работает
Как скачать все картинки из б? И без дубликатов
> он быстрей
Ты знал что петухон написал на Си? Ты можешь скомпилировать мои скрипты в исполняемый файл и получить нехуевую скорость. В любом случае в этих скриптах скорость интернета куда важней.
> проще
...
если проект долгоиграющий то шарпы или котёл выглядят более перспективно
> долгоиграющий
Что это значит?
Я просто не понимаю зачем писать на говнопитоне если есть с++. Нахуя все эти тысячи языков, которые по сути и есть с++ с нескучным синтаксисом.
и постоянно крафтить патроны параллельно следя за аллокациями?
>>245890987
значит что это чуть больше чем на пару вечеров
Попердолься ещё с указателями, я пердолюсь с указателями три раза в день. А потом линковка.
Сейчас бы для скриптов использовать плюсы.
Привет двач. Написал набор скриптов для двача. Среди них:
1. Трекер. Трекер твоих постов, ищет все твои посты на доске и выгружает в тред.
2. Загрузка всех фото в видео из папки мои документы в открытый тред
3. Загрузка всех фото и видео со всего Мой Компьютер в открытый тред. При этом одинаковые фото заменяются ссылками.
> если есть с++
Мой скрипт работает на линуксе и на форточке, по сути он не привязан к платформе, лишь бы был интерпретатор. Весь код открыт. Юзер запускает код, а не подозрительный исполняемый файл. На с++ нужно заниматься половой еблей с памятью и думать более "низкоуровнево"
Какой класс? Для школьника очень даже круто. Но в нейронки пока рано лезть без математики первых двух курсов инженерной специальности не разберешься. Удачи
Уже есть трекер, там только проверки ключевых слов нет. Думаю в ближайшее время завезу, спасибо за идею.
Твой скрипт можно вообще на Баше замутить.
По правильному это всё нужно в эластик загонять для нормального поиска по словам
Нахуй твоё говно не нужно, есть божественный asm.
Сделай прокси чекер для сосача нормальный. Могу покидать сервисы, откуда брать, при условии, что ты не сольёшь макаке.
Ну по сути да, только для асма нужно соображать, а на си++ может любой дупак писать.
нахуя? Если постить цп и щитпостить то идите вы нахуй
А кончу кто будет вводить?
>Установите python
Пошёл нахуй
нахуя? уже есть давно
Виндаблядок, ты?
Сделал
Дурачок? Очевидно же, что сервисы по разгадыванию капчи.
Traceback (most recent call last):
File "<string>", line 1, in <module>
ImportError: No module named setuptools
Линуксогосподин-крестобог. Твои оправдания?
Написать скрипт, который получит список тредов, потом скормить его етой строчке, а потом заюзать любой поисковик дубликатов
Юзайте fdupes, господа.
будет бесполезна для картинок, ибо чуть пересохранив картинку jpeg>jpeg ты уже получаешь как бы не такую же точно
ОП, чё-то не работает нихуя
File "board_media.py", line 12
HASH_TABLE = os.path.normpath(f'{FOLDER_NAME}/hashtable')
^
SyntaxError: invalid syntax
Чем тебе скрипт ОПа-хуя не нравится? Он сделает все за тебя по идеи
В чем тогда проблема юзать питоноскрипт?
Вангую твой пакетный менеджер написан на питоне
Попробуй скачай заново, у тебя старая версия какая-то, у меня такой строчки нет вообще
На баше красивее
git clone сделал, как на гитхабе написано
А, и ещё на кодировку ругается, что есть Non-ASCII символ.
Добавил в начало скрипта
# -- coding: utf-8 --
и ошибка ушла.
Я на Orange Pi Zero ес чо
Не работает нихуя кароче, допили пожалуйста чтоб хоть запустилось без ошибок ёбаных.
Ругается на 12 строку в board_media.py, вот эту:
HASH_TABLE = os.path.normpath(f'{FOLDER_NAME}/hashtable')
А эта утилита сравнивает визуально, ну ты понел
>Вангую твой пакетный менеджер написан на питоне
Вангуй дальше
Ты не редактировал ничего? Я только что на виртуалке с виндой проверил. Всё запускается мб кодировка >>245895402 ?
Не, только добавил строчку с определением кодировки.
Мб notepad++ говнит, ща впишу из-под nano прям с терминала
У тебя скорее всего питон старый. В старых версиях нельзя строку писать через f' '
>>245895762
Не, нихуя, не помогло. Наверное, это из-за того, что запускаю на одноплатнике, хотя на нём и докер работает, и всякие тяжёлые утилиты.
Это из-за говнопитона
> Python 2
Вот в чем беда
Нужен третий питон
os.path функции разные для винды и linux
опчик молодец! реализацию хэш таблиц и поиска одинаковых изображений возьму на заметку
Ты тайловый менеджер на убунту накатил? Лол
Спасибо. Поставишь звездочку на гитхабе за старания?
Абу благословил этот пост.
> Бля, и ОП написал Extensions как EXTENTIONS.
Спасибо, поправил
Конечно, сек
>>245896233
>>245896270
Спасибо за оперативный ответ, парни, но я, похоже, слишком тупой, чтобы так далеко отступать от мануала. И вообще накрутили они там со своими сотнями версий питона, без бутылки не разберёшься, блядь.
См. пик, попробовал через питон 3, который якобы самой свежий по версии репозитория (3.6.7). Видимо, репозиторий моего одноплатника ещё не получил 3.9.5, да и ладно, не хочу ебаться с этим.
>>245896274
Надеюсь что ОП увидит, не буду создавать issue, чтобы не смущать человека.
>>245896442
Это Putty с моего основного виндового компьютера, подключаюсь к одноплатнику и пердолю его.
У меня вообще давно реализовано скачивание картинок с двача из тредов по ключевым словам, но на bash, с помощью jq и wget. Отсеивание дубликатов с помощью fdupes.
Вот результаты моих трудов:
2ch.hk/ch/res/147567.html
А с питоном мне пока не сладить, буду ждать фикс под убунту.
Удачи, ОП.
>>245897033
> Надеюсь что ОП увидит, не буду создавать issue, чтобы не смущать человека.
> os.path функции разные для винды и linux
Что не так? Всё нормально работает и под линем и под виндой. Я что-то не понимаю?
Модуль нот фаунд
pip install -r requirements.txt
Ты это делал на втором питоне, а теперь попробуй на третьем
Да результат-то не меняется, что pip вызываю, что pip3.
Пойду посплю, завтра на свежую голову разберусь.
Спасибо всем за помощь.
Спокойной ночи <3
>зумер изобрёл куклоскрипт
Ты хоть тред читал?
А Линукс?
Соснуле
Шиз, ты и в правду веришь, что школотроны и прочее быдло будут сидеть тут на красноглазом высере???
Для 0,2% процентов, шарящий анон нахуячил выше пример с вгетом одной строчкой в шелле, лол
Это не весь функционал
Что тебе мешает его допилить, добавив пару строчек?
Я ниумею :(
Репортнул
>сидит на линуксне
>нихуя не может в консоль
>эрония судьбы, блядь
за что?
ирония*
быстрофикс, блядь
> >сидит на линуксне
Тот долбаеб
мне эрония больше нравится
Перечитал правила. Единственно что можно притянуть за уши
>10. реклама во всех ее проявлениях не приветствуются
>Мой скрипт работает на линуксе и на форточке
>использует символические ссылки
>конкатенация путей через dir + '/' + file вместо os.path.join
Прыщеблядь нева ченжес.
Там normpath используется