Парсер Сайтов

[Eddie23Ru 48]

27 минут назад, -FH- сказал:

Дружище, будет отлично, если покажешь как добыл этот файл) тут у многих ребят думаю  этим проблема 

смотрим ролик который скинул obtim

по ссылке https://www.python.org/downloads/ выбираем версию питончика под свою операционку

качаем и устанавливаем

запускаем файл scraper.py через IDLE:

далее жмем Run:

Если ранее не работали с питоном - возможно некоторых модулей у вас не будет и их нужно будет качнуть

можно через командную строку

1. запускаем через пуск> выполнить> cmd
2. пишем python -m pip install requests

таким образом установится модуль Requests

далее опять пробуете запустить Run-ом и смотрите какие еще модули нужны будут

мне понадобились Requests, bs4, pandas, cloudscraper и xlsxwriter
python -m pip install requests
python -m pip install beautifulsoup4
python -m pip install pandas
python -m pip install cloudscraper
python -m pip install xlsxwriter

после этого все заработало и в папке с файлом scraper.py появился файл эксель с прогнозами

[Rony 307]

16 часов назад, obtim сказал:

Расскажу в качестве примера.

В свое время мы с партнером хорошо поднимали ставками на погоду в 1x. Сейчас они закрутили диапазоны и это стало бессмысленно. Моделей прогнозов погоды не очень много. Компаний, которые их просчитывают - чуть больше. Мы брали результаты этих прогнозов для каждого из аэропортов(в 1х ставки на погоду были в привязках к аэропортам) и по результатам присваивали определенный вес, по определенному алгоритму, каждому источнику данных. 

К чему расписал: на мой взгляд моделирование погоды сродни прогнозам на футбол..

Можно  заниматься моделированием, а можно производить отсеивание типстеров..

П.С. Модели прогнозов погоды для погоды так же выдают не стабильный результат, т.к. датчики глючат, не поверяются, нарушается расположение и т.п. и т.д.

нынче погода не предсказуема))))))))))))

 

[-FH- 602]

 

 

Попросил подписчика в телеге, спаибо ему сделал видео небольшое, надеюсь поможет вам

[Farel 891]

5 минут назад, -FH- сказал:

 

Попросил подписчика в телеге, спаибо ему сделал видео небольшое, надеюсь поможет вам

 Эдди выше все расписал, делается все за 5 минут по его описанию.

[Farel 891]

в общем лиг нормальных мало, сделать выводы пока не получится... лиги при парсинге не пишет, большой минус...

[obtim 394]

16 часов назад, fenix сказал:

Идея понятна и вполне здрава как и прогноз погоды.)

Если не секрет сейчас на чем поднимаете, хоть направление, если не военная тайна?)

Киберы 1x, бонусы, краш. Ждем нормального футбола

[Petrovich 324]

А что именно делает это программа ? Она делает обзор по 6 сайтом кто на что там ставит ??? 

[Farel 891]

Только что, Petrovich сказал:

А что именно делает это программа ? Она делает обзор по 6 сайтом кто на что там ставит ??? 

Файл, который сюда скидывали, это она и делает, больше ничего

[Petrovich 324]

1 минуту назад, Farel сказал:

Файл, который сюда скидывали, это она и делает, больше ничего

А выбор сайт от по чему ? Мнение большинство или это мнение Каперов ? Или еще что то ???

[obtim 394]

11 минут назад, Petrovich сказал:

А выбор сайт от по чему ? Мнение большинство или это мнение Каперов ? Или еще что то ???

Основное условие: название команд и чемпионатов должны совпадать на разных ресурсах. Создал такую тему: 

 

[Farel 891]

21 минуту назад, Petrovich сказал:

А выбор сайт от по чему ? Мнение большинство или это мнение Каперов ? Или еще что то ???

Зайди на те сайты и почитай... Там всякие алгоритмы просчитывают, ничего нового, что-то типа Макбета или Элизабет... В общем сама система очень слабая по своей сути, потому что после парсинга не видно валуйности ставки. А без валуйности ставить, что пальцем в небо. В общем вся эта система чисто поиграться, не более. Ну максимум сгодится может какой матч для рассмотрения подобрать.

Изменено 14 июля, 2022 пользователем Farel

[Petrovich 324]

13 минут назад, obtim сказал:

Основное условие: название команд и чемпионатов должны совпадать на разных ресурсах. Создал такую тему: 

 

У меня почему то другой выбор по командам получился файлике . Это нормально ?

[-FH- 602]

Готов exe файл по этой теме уже

[Кирилл Клейменов 295]

48 минут назад, Petrovich сказал:

У меня почему то другой выбор по командам получился файлике . Это нормально ?

В течении дня - разные отборы получаются...

 

[Кирилл Клейменов 295]

46 минут назад, -FH- сказал:

Готов exe файл по этой теме уже

А где он...?  В Телеге не вижу...

[Noxius3 171]

13 минут назад, Кирилл Клейменов сказал:

А где он...?  В Телеге не вижу...

В папке ищем файл scraper.exe, запускаем и через пару секунд получаем excel. Не надо устанавливать питон и библиотеки.

scraper.zip

[obtim 394]

4 минуты назад, Noxius3 сказал:

В папке ищем файл scraper.exe, запускаем и через пару секунд получаем excel. Не надо устанавливать питон и библиотеки.

scraper.zip 47 \u041c\u0411 · 0 загрузок

В соседней теме выложили ресурсы, с которых хорошо было бы парсить данные так же. Для некоторых из них есть отдельные готовые проекты на гите. Может быть подцепишь их к основному коду?

[Noxius3 171]

2 минуты назад, obtim сказал:

В соседней теме выложили ресурсы, с которых хорошо было бы парсить данные так же. Для некоторых из них есть отдельные готовые проекты на гите. Может быть подцепишь их к основному коду?

Я не питонист так, базовые знания. Темы посмотрю, если какая нибудь заинтересует, то напишу свою версию. Бота или программу...

[tm_yp 0]

4 минуты назад, Noxius3 сказал:

Я не питонист так, базовые знания. Темы посмотрю, если какая нибудь заинтересует, то напишу свою версию. Бота или программу...

Красава конечно !!!файл куда легче,чем питониста настраивать!

[Rony 307]

а вам не кажется что это попахивает бредом?))) могу и ошибаться

 

[Petrovich 324]

7 минут назад, Rony сказал:

а вам не кажется что это попахивает бредом?))) могу и ошибаться

 

Это про что вы сейчас ?

[Noxius3 171]

6 минут назад, Rony сказал:

а вам не кажется что это попахивает бредом?))) могу и ошибаться

 

Возможно. Дистанция покажет. Я сам лично, используя "бредовые" идеи написал неплохой софт и бот на настольный теннис. Правда первая программа накрылась, с началом спец операции, но второй бот, после 5х месяцев доработки стратегии,показывает отличный результат.

[Олег Money 0]

Было бы здорово вставлять свои сайты betodds24 крутой сайт

[obtim 394]

Парни, на самом деле обсуждаемая сейчас тема - хороший стимул стартануть в программировании на Питоне. Понимаю, что все привыкли к Экселю, но он как инструмент - устарел. По программированию в рамках беттинга есть курс от ОфВарианс и Куасеры. Если не заломает, то допарсю второй и выложу.

[obtim 394]

36 минут назад, Rony сказал:

а вам не кажется что это попахивает бредом?))) могу и ошибаться

 

В соседней теме ответил, как можно использовать..