Так как я не сильно разбирался в написании подобных алгоритмов, то далее я работал только с помощью нейросети и она начала давать советы как сделать мой алгоритм более человечным по поведению и в итоге пришел к решению, где мой парсер запускает браузер в обычном режиме и самостоятельно гуляет по сайту, а так же при появлении капчи дает ее мне, а когда я ее прохожу, то продолжает свою работу. И это сработало! (Спойлер: потом я просто поставил задержку в 10 секунд и капча и прочие хитрости стали бесполезны)

Наконец-то добрался до отложенных статей и по гайду с хабра попробовал установить интерфейс для общения с нейронками и свою первую модель.

Я совсем не шарю за то какие есть нейронки вообще и чем они отличаются и узнал, что есть локальные — качаешь к себе на пк и с ними работаешь.

Установил себе первую и попробовал с ней пообщаться. Очень нравится, что в LM Studio можно установить разные нейронки и даже подвигать их веса и прочие настройки, но понимаю, как же слабо я шарю за это все.

Gemma 3 12b на моем пк отвечает достаточно долго, чутка нагружает проц, да и в целом дает немного странные ответы. Попробовал ее опросить по поводу мансийского языка, и она отвечает очень странно — вроде выдумано, а вроде почти правда.

В какой-то момент, пытаясь выпытать у нее информацию по поводу мансийских диалектов вообще поймал ощущение, что, общаясь с ней я будто нахожусь в какой-то параллельной вселенной, где все как будто такое же, но немного отличается.

Однако, интересная штука🔮🔮🔮