Парсер - это программа которая собирает данные с интернета, анализирует их и выдает в нужном формате.
В этом уроке мы напишем парсер, который будет отслеживать курс доллара. Использовать будем python (один из лучших языков программирования для работы с информацией).
Для начала нужно скачать библиотеки (введите код ниже в коммандной строке)
requests - библиотека для получения кода веб сайта (информация о курсе есть в коде веб страницы)
bs4 - библиотека для работы с HTML, CSS кодом (с помощью него мы будем искать в коде нужную нам информацию)
Создаём файл dollar.py (можете назвать его по-другому) и имртируем все нужные библиотеки:
Парсить будем с сайта investing.com, поэтому нужно сохранить URL страницы с курсом доллара (https://ru.investing.com/currencies/usd-rub) в виде переменной
Также сначала нужно узнать свой User Agent. Просто введите в google "my user agent" и скопируйте строку в переменную:
Теперь нам нужно получить код страницы:
Переходим на сайт и нажимаем Ctrl+Shift+I. Теперь мы видим код страницы прямо в браузере. Нажимаем на кнопку слева сверху (для выбора элемента на странице) и выбираем текст с курсом доллара (если мы будем знать, где в коде находится текст с курсом доллара, мы можем каждый раз обращаться к этой части кода и выводить этот текст). Узнаём, что курс храниться в теге с id равным "late-late". Теперь создадим переменную soup, чтобы найти тег с нужным нам id:
Вот весь код парсера:
В этом уроке мы напишем парсер, который будет отслеживать курс доллара. Использовать будем python (один из лучших языков программирования для работы с информацией).
Для начала нужно скачать библиотеки (введите код ниже в коммандной строке)
Код:
pip install requests
pip install bs4requests - библиотека для получения кода веб сайта (информация о курсе есть в коде веб страницы)
bs4 - библиотека для работы с HTML, CSS кодом (с помощью него мы будем искать в коде нужную нам информацию)
Создаём файл dollar.py (можете назвать его по-другому) и имртируем все нужные библиотеки:
Python:
import requests
from bs4 import BeautifulSoupПарсить будем с сайта investing.com, поэтому нужно сохранить URL страницы с курсом доллара (https://ru.investing.com/currencies/usd-rub) в виде переменной
Python:
# import ...
URL = 'https://ru.investing.com/currencies/rub-usd'Также сначала нужно узнать свой User Agent. Просто введите в google "my user agent" и скопируйте строку в переменную:
Python:
# import ...
# URL ...
HEADERS = {'user-agent' : '*ваш user agent*'}Теперь нам нужно получить код страницы:
Python:
# ...
page = requests.get (URL, headers = HEADERS)Переходим на сайт и нажимаем Ctrl+Shift+I. Теперь мы видим код страницы прямо в браузере. Нажимаем на кнопку слева сверху (для выбора элемента на странице) и выбираем текст с курсом доллара (если мы будем знать, где в коде находится текст с курсом доллара, мы можем каждый раз обращаться к этой части кода и выводить этот текст). Узнаём, что курс храниться в теге с id равным "late-late". Теперь создадим переменную soup, чтобы найти тег с нужным нам id:
Код:
# ...
# page.content - код страницы
soup = BeautifulSoup (page.content, 'html.parser')
currency = soup.find (id = 'late-late') # находим тег с id 'late-late' (в этом теге хранится курс доллара)
print (currency.text) # выводим текст, хранящийся в этом тегеВот весь код парсера:
Python:
import requests
from bs4 import BeautifulSoup
URL = 'https://ru.investing.com/currencies/usd-rub'
HEADERS = {'user-agent' : '*ваш user agent*'}
page = requests.get (URL, headers = HEADERS)
soup = BeautifulSoup (page.content, 'html.parser')
currency = soup.find (id = 'late-late').text
print (currency)
Последнее редактирование:
