Огромное спасибо Andrey Apanasik за проделанную работу.
P.S. Не стоит открывать на телефоне)
пацанчикам слева почёт и уважуха, справа - я ваш грязный рот без гондона ебал
По всей видимости парсится каждый комментарий поштучно, заносится в базу. У API есть ограничения на запросы, поэтому 1-2 коммента в секунду
Попробуй работу непосредственно с tj вынести на сторону отдельного сервиса (nodejs, golang в помощь). Чтобы там можно было обрабатывать запросы в несколько потоков с очередями. Работу API с браузером свяжи через WS. Тогда можно будет сделать запрос, чекать прогрес время от времени, не боясь закрыть вкладку. А по готовности кидай на мыло отчетик (mailgun - привет).
Чтобы там можно было обрабатывать запросы в несколько потоков с очередями
У Очобы ограничение на количество запросов с одного IP. Толку параллелить вообще нет.
Так, а есть функция, чтобы среди тех, кто чаще всего меня лайкает, отфильтровать одних только девушек?
Хорошая работа, вы молодец. Только одна проблема - иногда программа не совсем понимает и может обработать отбитость человека, на стату дизов же влияет наша пати с красными тредами )
Запустил. Через полчаса будет готов расстрельный список. Я всех запомню, хахаха!
Аааа, полчаса это только на сбор всех комментов. Результаты будут готовы через 7 часов, охереть)
Совершенный микроскоп
Стоило лишь пару раз поспорить насчет написания одного названия
А как эта штука CORS обходит? Пытался года 3 назад сделать такое же в браузере, но запросы не проходили, в итоге на юнити сделал, лол
Ты наверно с помощью Device токена пытался. Моя штука без этого хедера делать.
Делился, но сейчас уже не работает, апи с того момента поменяли.
https://tjournal.ru/flood/70460-analiz-laykov-v-kommentariyah-tj
https://dtf.ru/flood/19539-laykov-dizlaykov-tred
Тогда еще пейвол на тж был, пришлось авторизацию по qr-коду делать
это минус мобильной версии
Режим версии отображения страницы для ББ не помог. Не помню, когда у меня такое было в последний раз. ББ у меня нет. 🤷🏼♂️
—
Выкатил версию более-менее адаптивную.
Благодарю, Андрей. Но верно ли я понимаю, что обработки мне придётся ждать *нескока часов*?! 😳
Если страница перезагрузится, обработка начнётся с нуля?
—
Да, к сожалению.
1. Проблема со скоростью из-за ограничения API.
2. По поводу перезагрузки можно было это решить обработкой на сервере, но тогда всё будет ещё в разы медленнее, т. к. лимит на запросы будет шариться между всеми пользователями тулзы. Разве что, можно дать пользователю возможность передать свой токен серваку, но это не секьюрно.
У тебя либо профиль в настройках скрыт, либо шедоубан от Вахтёра. Но, в любом случае, подожди секунд 30, оно начнёт считать, просто без некоторых деталей интерфейса.