Python для начинающих

Форум программистов и сисадминов Киберфорум

Войти

Регистрация
Восстановить пароль

Xiniayavi

2 / 2 / 0

Регистрация: 10.11.2020

Сообщений: 9

Парсинг и запись в CSV

16.07.2022, 19:07. Показов 2804. Ответов 0

Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам

Пишу скрипт, с помощью которого каждый день полученные с сайта данные должны записываться в CSV-файл в определенном порядке. С записью этих данных в списки я разобралась, как внести их в файл столбцами тоже, но не понимаю, что нужно сделать, чтобы каждый день новая информация добавлялась в файл в нужном мне порядке.

Код, который есть на данный момент:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
import requests
import pandas as pd
import csv
from bs4 import BeautifulSoup as bs
 
headers = {
    'Connection': 'keep-alive',
    'Cache-Control': 'max-age=0',
    'Upgrade-Insecure-Requests': '1',
    'User-Agent': 'Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.116 Safari/537.36 OPR/40.0.2308.81',
    'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
    'DNT': '1',
    'Accept-Encoding': 'gzip, deflate, lzma, sdch',
    'Accept-Language': 'ru-RU,ru;q=0.8,en-US;q=0.6,en;q=0.4'
}
 
url = 'https://www.gismeteo.ru/weather-volgograd-5089/2-weeks'
r = requests.get(url, headers=headers)
soup = bs(r.text, "html.parser")
 
temperature = []
precipitation = []
 
for item in soup.select('.maxt .unit_temperature_c'):
    temperature.append(int(item.text))
 
for item in soup.select('.row-item .item-unit'):
    precipitation.append(float(item.text.replace(',','.')))
 
#print(temperature); print(precipitation)
 
data = dict(t=temperature, p=precipitation)
df = pd.DataFrame(data)
df.to_csv(r'res.csv', sep=';', index=False)

Теперь насчет того, что мне нужно:

Отсюда нужны только дневная температура и осадки, то есть два списка, с этим я разобралась. Затем я их записываю в CSV-файл таким образом:

Мне нужно, чтобы каждый день новая информация добавлялась в таком виде, то есть те же два столбца, но со сдвигом вправо и на одну строку вниз:

Programming

Эксперт

39485 / 9562 / 3019

Регистрация: 12.04.2006

Сообщений: 41,671

Блог

16.07.2022, 19:07

Ответы с готовыми решениями:

Запись в CSV-файл из массива. Не является форматом csv!
В общем искал работу... Дали тестовое написать парсер для сайта с выводом информации в csv-файл. Всё написал, сбросил, пришёл ответ что у...

CSV парсинг
Всем доброго времени суток! Сразу хочу сказать что я не лентяй,который пишет на форум что бы ему что-то за него сделали, а всегда...

Парсинг CSV (opencsv)
Пытаюсь распарсить CSV с помощью opencsv. Идея такая: InputStreamReader in = ... CSVReader csvReader = new CSVReader(in, ','); ...

Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.

inter-admin

Эксперт

29715 / 6470 / 2152

Регистрация: 06.03.2009

Сообщений: 28,500

Блог

16.07.2022, 19:07

Помогаю со студенческими работами здесь

Парсинг CSV Файла
Помогите пожалуйста написать код парсера для csv файла на objective-C csv файл состоит из 6 столбцов(Цитата Перевод Источник ОЦЕНКА...

Парсинг CSV файла
Здравствуйте! Помогите пожалуйста, стоит такая задача, нужно сделать парсинг CSV файла, при этом имена столбцов начинаются с 8 строки,...

Парсинг CSV файлов
Здравствуйте! Столкнулся с проблемой. Надо подгрузить локальный CSV файл в скрипте для парсинга. Это CSV файл. Name; ...

Curl и парсинг CSV
Приветствую. Сильно не бейте, вопрос будет возможно глупый. Есть csv файл в котором более 1000 позиций товара. Вот одна строка...

Парсинг CSV файла
Привет, я тут чутка джуниор, поэтому хотелось бы узнать как крутые дяди бы сделали эту задачу. Клиентская часть уже написана,...

Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:

Опции темы

Новые блоги и статьи Все статьи Все блоги /
Валидация и контроль данных табличной части документа перед записью Maks 22.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в КА2. Задача: контроль и валидация данных табличной части документа перед записью с учетом регламента компании. . .	Отчёт о затраченных материалах за определенный период с макетом печатной формы Maks 21.04.2026 Отчёт из решения ниже размещён в конфигурации КА2. Задача: разработка отчёта по затраченным материалам за определённый период, с возможностью вывода печатной формы отчёта с шапкой и подвалом. В. . .	Отчёт о спецтехнике находящейся в ремонте Maks 20.04.2026 Отчёт из решения ниже размещен в конфигурации КА2. Задача: отобразить спецтехнику, которая на данный момент находится в ремонте. Есть нетиповой документ "Заявка на ремонт спецтехники" который. . .	Памятка для бота и "визитка" для читателей "Semantic Universe Layer (Слой семантической вселенной)" Hrethgir 19.04.2026 Сгенерировано для краткого описания по случаю сборки и компиляции скелета серверного приложения. И пусть после этого скажут, что статьи сгенерированные AI - туфта и не интересно. И это не реклама -. . .
Запрет удаления строк ТЧ документа при определённом условии Maks 19.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа "Аккумуляторы", разработанного в конфигурации КА2. У данного документа есть ТЧ, в которой в зависимости от прав доступа. . .	Модель заражения группы наркоманов alhaos 17.04.2026 Условия задачи сформулированы тут Суть: - Группа наркоманов из 10 человек. - Только один инфицирован ВИЧ. - Колются одной иглой. - Колются раз в день. - Колются последовательно через. . .	Мысли в слух. Про "навсегда". kumehtar 16.04.2026 Подумалось тут, что наверное очень глупо использовать во всяких своих установках понятие "навсегда". Это очень сильное понятие, и я только начинаю понимать край его смысла, не смотря на то что давно. . .	My Business CRM MaGz GoLd 16.04.2026 Всем привет, недавно возникла потребность создать CRM, для личных нужд. Собственно программа предоставляет из себя базу данных клиентов, в которой можно фиксировать звонки, стадии сделки, а также. . .

Наверх