Необходимо написать скрипт на Python 2.7 сиспользованием библиотеки scrapy,который будет выполнять скрапинг страниц на сайте [url=https://chelyabinsk.flamp.ru/]https://chelyabinsk.flamp.ru[/url] исохранять отзывы в файлах формата json. Например, сохранять в файле все отзывы со страницы [url=https://chelyabinsk.flamp.ru/firm/salam_kafe-2111590606323571]https://chelyabinsk.flamp.ru/firm/salam_kafe-2111590606323571[/url]после нажатия кнопки «Показать ещё отзывы» и после прокрутки этой страницы до
конца. 
 
Если открыть эту страницу в Гугл Хром и открыть инструментыразработчика, видим (см файл «flamp1.png»), что при нажатии накнопку «Показать ещё отзывы» выполняется запрос «reviews?limit=5», далее после
страницы прокрутки мышью выполняется запрос «reviews?limit=5&offset_id=3273977»,
далее при прокрутке мышью – запрос «reviews?limit=5&offset_id=2868699» и
т.д. Причём в данных, которые возвращает предыдущий запрос, есть ссылка на
следующий запрос, например, запрос «reviews?limit=5» возвращает ссылку на
запрос «reviews?limit=5&offset_id=3273977»: 
"next_link":[url=https://flamp.ru/api/2.0/filials/2111590606323571/reviews?limit=5&offset_id=3273977]https://flamp.ru/api/2.0/filials/2111590606323571/reviews?limit=5&offset_id=3273977[/url]
 
Данные поступают в формате json, например, текст отзыва – этозначение поля “text” (смфайл «flamp2.png»). Необходимо сохранить вфайле json данные о всех отзывов с указанной страницы. Например, настранице «https://chelyabinsk.flamp.ru/firm/salam_kafe-2111590606323571» есть
27 отзывов на момент 23.08.18. Пусть в файл сохраняются следующие поля: "next_link", "filial_id", "user_id","text", "rating", "date_created",
"source", "user":{"name"},
"official_answer"
 
Работа с библиотекой Scrapy описана здесь: 
[url=https://docs.scrapy.org/en/latest/intro/tutorial.html]https://docs.scrapy.org/en/latest/intro/tutorial.html[/url]
 
Решение такой же задачи описано здесь: 
[url=https://habr.com/post/312816/]https://habr.com/post/312816/[/url]
 
Будем считать, что задание выполнено, если Вы отправляете мнескрипты Scrapy, которыеуспешно выполняются на моём компьютере (на Python 2.7)

Необходимо написать скрипт на Python 2.7 сиспользованием библиотеки scrapy,который будет выполнять скрапинг страниц на сайте <a href="https://chelyabinsk.flamp.ru/" rel="nofollow noopener noreferrer" target="_blank">https://chelyabinsk.flamp.ru</a> исохранять отзывы в файлах формата json. Например, сохранять в файле все отзывы со страницы <a href="https://chelyabinsk.flamp.ru/firm/salam_kafe-2111590606323571" rel="nofollow noopener noreferrer" target="_blank">https://chelyabinsk.flamp.ru/firm/salam_kafe-2111590606323571</a>после нажатия кнопки «Показать ещё отзывы» и после прокрутки этой страницы до
конца. 
 
Если открыть эту страницу в Гугл Хром и открыть инструментыразработчика, видим (см файл «flamp1.png»), что при нажатии накнопку «Показать ещё отзывы» выполняется запрос «reviews?limit=5», далее после
страницы прокрутки мышью выполняется запрос «reviews?limit=5&amp;offset_id=3273977»,
далее при прокрутке мышью – запрос «reviews?limit=5&amp;offset_id=2868699» и
т.д. Причём в данных, которые возвращает предыдущий запрос, есть ссылка на
следующий запрос, например, запрос «reviews?limit=5» возвращает ссылку на
запрос «reviews?limit=5&amp;offset_id=3273977»: 
"next_link":<a href="https://flamp.ru/api/2.0/filials/2111590606323571/reviews?limit=5&amp;offset_id=3273977" rel="nofollow noopener noreferrer" target="_blank">https://flamp.ru/api/2.0/filials/2111590606323571/reviews?limit=5&amp;offset_id=3273977</a>
 
Данные поступают в формате json, например, текст отзыва – этозначение поля “text” (смфайл «flamp2.png»). Необходимо сохранить вфайле json данные о всех отзывов с указанной страницы. Например, настранице «<a href="https://chelyabinsk.flamp.ru/firm/salam_kafe-2111590606323571»" rel="nofollow noopener noreferrer" target="_blank">https://chelyabinsk.flamp.ru/firm/salam_kafe-2111590606323571»</a> есть
27 отзывов на момент 23.08.18. Пусть в файл сохраняются следующие поля: "next_link", "filial_id", "user_id","text", "rating", "date_created",
"source", "user":{"name"},
"official_answer"
 
Работа с библиотекой Scrapy описана здесь: 
<a href="https://docs.scrapy.org/en/latest/intro/tutorial.html" rel="nofollow noopener noreferrer" target="_blank">https://docs.scrapy.org/en/latest/intro/tutorial.html</a>
 
Решение такой же задачи описано здесь: 
<a href="https://habr.com/post/312816/" rel="nofollow noopener noreferrer" target="_blank">https://habr.com/post/312816/</a>
 
Будем считать, что задание выполнено, если Вы отправляете мнескрипты Scrapy, которыеуспешно выполняются на моём компьютере (на Python 2.7)

Гость guest_15350491065366

Скрапинг (Python 2.7, Scrapy)