The ParseHub

The ParseHub

Python, парсинг данных и много чего ещё

Пікірлер

  • @slimveraxo
    @slimveraxo43 минут бұрын

    можете под кран freebitco написать тыкалку для hcaptcha?

  • @dicloniusN35
    @dicloniusN356 сағат бұрын

    Нифига непонятно как подниматься на элемент выше если parent() от найденого не работает

  • @minecraft.mystyks7445
    @minecraft.mystyks744510 сағат бұрын

    а как собственно сделать обнаружение ошибок? а то красный текст в строке глаза мозолит

  • @user-sc4cs9sp6g
    @user-sc4cs9sp6g2 күн бұрын

    А можно ли загрузить весь проект из большого количества файлов и строк и ставить задачи в парадигме всего проекта?

  • @the_parse_hub
    @the_parse_hub2 күн бұрын

    Для этого наверное смотрите платные решения

  • @truppaclowns9788
    @truppaclowns97883 күн бұрын

    бля, эта библа уже мертва походу( все провайдеры перепробовал и все модели - везде ошибки. А пару дней назад работало. жаль

  • @the_parse_hub
    @the_parse_hub3 күн бұрын

    Может быть автор ещё сделает обновление, нужно подождать

  • @alexalexeev7319
    @alexalexeev73194 күн бұрын

    Ругается на вирусы теперь

  • @the_parse_hub
    @the_parse_hub4 күн бұрын

    Вирусов там конечно нет, просто windows или антивирус не очень доверяют скачанным exe файлам из интернета. Если сомневаетесь, можете запустить в песочнице

  • @user-sm3yu5nz4p
    @user-sm3yu5nz4p7 күн бұрын

    20 стран перебрал, ошибка озона(

  • @the_parse_hub
    @the_parse_hub7 күн бұрын

    Добрый день. Да. Озон что-то глобально обновил вчера у себя, пытаюсь разобраться

  • @the_parse_hub
    @the_parse_hub5 күн бұрын

    Вышла новая версия. Там работает disk.yandex.by/d/XGrAeOxbMIx44Q

  • @Askippen
    @Askippen8 күн бұрын

    Похоже, авито снова подкрутил гайки. Вчера в первый проход всё работало, я остановил, начал заново и он заглох. Сейчас открывает страницу поиска, затем вкладку, но пустую about:blank. В консоли на странице поиска авито блокает куки, пишет, что "неудовлетворительная версия 18.2.0 от avito-desktop-сайта общего одноэлементного модуля react (требуется ^16.14.0)". Ну и некоторые другие ошибки. А на пустой странице пишет: Not allowed to navigate top frame to data URL: data:, ....

  • @the_parse_hub
    @the_parse_hub8 күн бұрын

    Да, есть проблемы. Нужно разбираться

  • @mmmmm27342
    @mmmmm2734211 күн бұрын

    Не знаю как у остальных,но у меня на определенных провайдеров контекст итак работает,без лишних строчек

  • @plathardstuck28
    @plathardstuck2817 күн бұрын

    какиеж вы все уёбки, не говорите, что loguru сконфигурировать = ногу себе отстрелить

  • @the_parse_hub
    @the_parse_hub17 күн бұрын

    всё там отлично с конфигом, достаточно иметь немного мозгов и уметь читать

  • @user-tr5sq6qg5e
    @user-tr5sq6qg5e17 күн бұрын

    Чат джипити 3.5 турбо весит около 4 Гб? Реально и работает тот есть делает анализ без всякого интернета?? Это реально?

  • @the_parse_hub
    @the_parse_hub17 күн бұрын

    Это не ChatGpt, а OpenChat, хоть названия и похожи - но всё таки они разные

  • @user-tr5sq6qg5e
    @user-tr5sq6qg5e17 күн бұрын

    @@the_parse_hub фу я чуть не представил восстание ии. Смотрел на счет чат джипити он занимает около 800 Гб и работает на суперкомпе

  • @user-tr5sq6qg5e
    @user-tr5sq6qg5e17 күн бұрын

    Однозначно лайк👍

  • @Emeyshen2k12
    @Emeyshen2k1218 күн бұрын

    Работает всё. Разве что 1 из двух-трёх ответов на русском отвечает. В остальных случаях на традиционном китайском почему-то(

  • @the_parse_hub
    @the_parse_hub17 күн бұрын

    Потому что много сайтов-провайдеров из Китая. Можно в запросе указать какой-то конкретный провайдер, чтобы не было таких вещей

  • @oldblood3779
    @oldblood377912 күн бұрын

    @@the_parse_hub Он мне после 5 запроса начал вот так отвечать "当前地区当日额度已消耗完, 请尝试更换网络环境", типо запросы для вашего региона закончились

  • @30_let_nazad
    @30_let_nazad20 күн бұрын

    не работает

  • @Yuri-wk8rk
    @Yuri-wk8rk20 күн бұрын

    Проверьте парсер пожалуйста сейчас не работает

  • @the_parse_hub
    @the_parse_hub20 күн бұрын

    что именно не работает?

  • @Yuri-wk8rk
    @Yuri-wk8rk18 күн бұрын

    @@the_parse_hub Если запустить не получает данные как надо

  • @EtoreMarcariJr
    @EtoreMarcariJr21 күн бұрын

    Hi. Greetings from Brazil. I'm trying to grab info from this website (using another captcha solver - dfe-portal.svrs.rs.gov.br/Nfe/Ccc ) But, in this case, I'm getting that "callback is not a function error". Can you help me with some idea?

  • @scorpiontv6127
    @scorpiontv612727 күн бұрын

    Все отлично. Только вот что за "наш печар"? Типа командная строка, или я не шарю?

  • @the_parse_hub
    @the_parse_hub26 күн бұрын

    PyCharm, программа для написания кода

  • @fatfry6666
    @fatfry666628 күн бұрын

    какой вариант, если карта от радиона?

  • @the_parse_hub
    @the_parse_hub28 күн бұрын

    принцип тот же

  • @igormatvienko6924
    @igormatvienko692428 күн бұрын

    Добрый день. При первом же запуске сразу банит. Как решить проблему?

  • @igormatvienko6924
    @igormatvienko692428 күн бұрын

    Скрипт выдает : "Ошибка: Перезапуск из-за блокировки IP" . При этом если зайти на авито через браузер, то никакого блока нет.

  • @the_parse_hub
    @the_parse_hub28 күн бұрын

    Попробуйте обновить библиотеки, а конкретнее seleniumbase и undetected_chromedriver

  • @slurp3838
    @slurp383828 күн бұрын

    Есть ли в планах добавление Яндекс маркета и Мегамаркета?

  • @the_parse_hub
    @the_parse_hub28 күн бұрын

    В планах такое есть, но сроки не знаю

  • @user-ii6nd3qw2s
    @user-ii6nd3qw2s28 күн бұрын

    Почему-то выводит ошибку на строке с переменными: пишет, что индексы строки должны быть числами.. что делать??

  • @the_parse_hub
    @the_parse_hub28 күн бұрын

    значит что-то поменяли в json ответе

  • @user-zd2ec2jq1m
    @user-zd2ec2jq1mАй бұрын

    Спасибо! Нужно пробывать писать тесты ✍️

  • @junior_analyst
    @junior_analystАй бұрын

    У меня такая утечка памяти была в vscode + jupyter и когда я делал мерж пары таблиц по 200 Мб. И мои 32 Гб памяти показали тоже самое 😂

  • @mir-888
    @mir-888Ай бұрын

    Спасибо за обзор😊

  • @misterfox3464
    @misterfox3464Ай бұрын

    Хех. А програмка-то, это перепиленная LMStudio!

  • @user-bm8qb7sn7r
    @user-bm8qb7sn7rАй бұрын

    Под Windows что-то не взлетает.... =(

  • @the_parse_hub
    @the_parse_hubАй бұрын

    попробуйте сразу после импорта библиотек вставить такую строку: asyncio.set_event_loop_policy(asyncio.WindowsSelectorEventLoopPolicy())

  • @user-bm8qb7sn7r
    @user-bm8qb7sn7rАй бұрын

    @@the_parse_hub Увы, тоже валится в ошибку: строка:1 знак:70 + ... yncio.set_event_loop_policy(asyncio.WindowsSelectorEventLoopPolicy()) + ~ После ''('' ожидалось выражение. + CategoryInfo : ParserError: (:) [], ParentContainsErrorRecordException + FullyQualifiedErrorId : ExpectedExpression

  • @tvaytor5662
    @tvaytor5662Ай бұрын

    А api как получить?

  • @ALL_cube_xzy
    @ALL_cube_xzy22 күн бұрын

    Там нету api без этого можно

  • @user-gw2lg9ff4i
    @user-gw2lg9ff4iАй бұрын

    Что-то у меня нет скрепки куда файл прикрепить можно.

  • @the_parse_hub
    @the_parse_hubАй бұрын

    В настройках включите "экспериментальный режим"

  • @user-gw2lg9ff4i
    @user-gw2lg9ff4iАй бұрын

    @@the_parse_hub Ништяк, получилось... благодарю!!!

  • @voron12051982
    @voron12051982Ай бұрын

    Когда х..во работаешь с данными и не думаешь сколько весит обджект ин мемори

  • @GuxyyZ
    @GuxyyZАй бұрын

    😂

  • @atommax_1676
    @atommax_1676Ай бұрын

    У меня так было когда я GAN для генерации аудио тренил на целых треках а не обрезках

  • @mobilandservice
    @mobilandserviceАй бұрын

    Доброго времени сутокю Воспользовался вашим скриптом, там где было нужно добавил свой ключ с настроек. Все запустилось, но каптча не решается, поскольку он не может залогинится. Подскажите в чес проблема? Где искать хоть.... как раз думал применить этот метод для одорошего бота....

  • @the_parse_hub
    @the_parse_hubАй бұрын

    Как вариант, попробуйте первый раз вручную нажать войти, после этого должно заработать

  • @mobilandservice
    @mobilandserviceАй бұрын

    @@the_parse_hub пробовал - не заходит. :( К сожалению крутит крутит, но не=и в акаут не заходит ни капчу не решает. Если через API - все работает, но только каптчи разные, поэтому такое решение было бы как раз то, что нужно.

  • @aventi2787
    @aventi2787Ай бұрын

    Привет. Как парсить docdoc на запросах и обходить их вонючую капчу? ._.

  • @the_parse_hub
    @the_parse_hubАй бұрын

    не знаю, не работал с этим сайтом еще

  • @doinkes7764
    @doinkes7764Ай бұрын

    захуярь бенчмарк

  • @andreykarasev721
    @andreykarasev721Ай бұрын

    Через сайт рукапча (сайт для заработок денег решая капчи) это все будет работать? Чтобы код сам решал капчу. Возможно такое там реализовать?

  • @the_parse_hub
    @the_parse_hubАй бұрын

    Нет, так это работать не будет

  • @user-df1om4wr9l
    @user-df1om4wr9lАй бұрын

    👍

  • @fekisbombaiee3151
    @fekisbombaiee3151Ай бұрын

    Добрый вечер, можете сделать такой скрипт? Чтобы уведомления о новых объявлениях приходило с минимальной задержкой, буду очень благодарен и конечно же не бесплатно.

  • @the_parse_hub
    @the_parse_hubАй бұрын

    Добрый день. Пишите [email protected]

  • @fekisbombaiee3151
    @fekisbombaiee3151Ай бұрын

    @@the_parse_hubв телеграм написать можно ?

  • @fekisbombaiee3151
    @fekisbombaiee3151Ай бұрын

    Я вам написал

  • @the_parse_hub
    @the_parse_hubАй бұрын

    Я же Вам ответил по почте

  • @EvgeniySakharov
    @EvgeniySakharovАй бұрын

    Классно. Хоть я и пользуюсь Codeium'мом, всё же побаловаться стоит. Хотя бы для оценки производительности своего ПК. Спасибо за контент. Мне было интересно.

  • @MB-mi4ed
    @MB-mi4edАй бұрын

    И лайк и подписка! Мое почтение фундаментальным знаниям автора, а умение объяснять вообще выше всяких похвал. Хоть парсинг и не моя тема, но не смог оторваться от видео. Успехов Вам во всем! Результаты Ваших трудов прекрасны!

  • @the_parse_hub
    @the_parse_hubАй бұрын

    Спасибо!

  • @duckandcover0
    @duckandcover0Ай бұрын

    кто нибудь тестил на втройках,как результат?

  • @user-ei4ol4dw7i
    @user-ei4ol4dw7iАй бұрын

    с легкими моделями попрет.

  • @GennPen
    @GennPenАй бұрын

    Continue есть и для VS Code. А когда интернет есть, то Codeium на бесплатном тарифе хорошо работает. И по тестам. RTX 3080 на Openchat-3.5 выжимает 75-80 t/s. Очень даже неплохо. Нужно подумать над сборкой домашнего сервака под это дело.

  • @the_parse_hub
    @the_parse_hubАй бұрын

    Если там 75-80 t/s - то это вообще отлично. Можно много чего делать локально

  • @GennPen
    @GennPenАй бұрын

    @@the_parse_hub У него довольно хорошая интеграция с huggingface. Ищешь нужную модель, вставляешь адрес репозитория и выбираешь нужную версию. А по поводу скорости, очень сильно влияет объем памяти видеокарты. И даже небольшое превышение занимаемой памяти моделью сильно просаживает скорость. Т.е. если модель на 11Гб памяти, а в видеокарте только 10, то скорость уже упадет. Пробовал загружать 20-гиговые модели, скорость падает вплоть до 0.5-1 t/s, и тогда уже только на процессоре если памяти хватает.

  • @scoundrelblr1928
    @scoundrelblr1928Ай бұрын

    Vulkan приоритет AMD картам

  • @xopyc_play
    @xopyc_playАй бұрын

    В PhpStorm при тех же настройках запрос, при ... Ctrl+I почему-то идёт не в /v1/chat/completions, а просто в /v1/completions от чего сразу вылазит ошибка 404.... В чём прикол не понятно, скачал вот только что всё... Причём если в конфигах ссылку указать как /v1/chat/ тогда начинает работать Ctrl+I, но перестаёт работать обычный чат... Это разрабы Jan что-то поменяли или я рукожоп? О_о

  • @the_parse_hub
    @the_parse_hubАй бұрын

    Это скорее виноват плагин Continue. Как вариант, можно попробовать установить какую-то другую версию или поискать решение у них на гитхабе

  • @user-ei4ol4dw7i
    @user-ei4ol4dw7iАй бұрын

    Автор, а вы можете сделать обзор плюсов и минусов сервисов от гугла и редакторов типа ПиЧарма. С точки зрения Питон разраба?

  • @the_parse_hub
    @the_parse_hubАй бұрын

    Да я бы сделал, но я не пользуюсь такими сервисами от гугл. Привык уже к PyCharm и вряд-ли поменяю его на что-то другое

  • @databox4279
    @databox42792 күн бұрын

    какой разбор? PyCharm стандарт в индустрии. Один дебагер чего стоит

  • @veanvi
    @veanviАй бұрын

    Lmstudio поставить проще, а в Continue уже есть стандартный присет для нее, с третей ламой. Да и выгрузку слоев на видеокарту там можно настраивать, возможно сможете подобрать настройку при которой данная видеокарта даст прирост в генерации токенов. А на крайняк есть модели от майкрософта Phi-2, некоторые из них даже в 1гб видеопамяти влезут.

  • @user-ei4ol4dw7i
    @user-ei4ol4dw7iАй бұрын

    Phi-3. Самая свежая самая легкая.

  • @user-df1om4wr9l
    @user-df1om4wr9lАй бұрын

    👌👌👌

  • @user-ei4ol4dw7i
    @user-ei4ol4dw7iАй бұрын

    C одной стороны оно конечно полезно. Но интернет это уже не дефицит. Автор вы пробовали гугл клауд шелл? Из любого места с любого устройства у вас готовая среда разработки включая Gemini, который успешно объясняет, дописывает или исправляет код.

  • @the_parse_hub
    @the_parse_hubАй бұрын

    то, что есть разные варианты - это же прекрасно!

  • @user-ei4ol4dw7i
    @user-ei4ol4dw7iАй бұрын

    @@the_parse_hub я спросил пробовали-ли вы?И щас обновил пичарм на свежую версию 24 и он сам установил модуль ИИ помощник от них же. Вы этот модуль пробовали?

  • @the_parse_hub
    @the_parse_hubАй бұрын

    гугл клауд шелл не пробовал - поэтому ничего толком сказать не могу. Насчет свежего PyCharm - спасибо за подсказку, буду обновлять

  • @vladimirdenisenko6696
    @vladimirdenisenko669629 күн бұрын

    Perplexity понравилось, ещё есть blackbox ai чисто для кода. Одно из двух всегда помогает с кодом, если другое тупит

  • @kadollars8258
    @kadollars8258Ай бұрын

    нету в списке этой ИИ уже...скачал другую (((

  • @the_parse_hub
    @the_parse_hubАй бұрын

    можно скачать её в любом другом месте, а потом в Jan импортировать из файла