Распарсить json файл

@Nikmoz · Регистрация: 12.11.2018

Студворк — интернет-сервис помощи студентам

Принимаю файл json

JSON
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
[
  {
    "content": [
      {
        "base": "https://www.upwork.com/ab/feed/jobs/rss?ontology_skill_uid=996364628025274386&sort=recency&paging=1%3B100&api_params=1&securityToken=0c55dee70809de57cac599ef078d98072982e99efb0c4cd7c342975af0b7beaa25bfc01203c3c54522f6bb650a74fb5ec54d3cd50016e78e036c9736ea53248c&userUid=874358620923199488&orgUid=874358620927393793",
        "language": null,
        "type": "text/html",
        "value": "I need a script preferably in Python that takes a REST API, grab the data and put into SQL server table. Since I have records in millions so the script should be mulithreaded to save time.<br /><br /><b>Budget</b>: $100\n<br /><b>Posted On</b>: June 29, 2020 16:10 UTC<br /><b>Category</b>: Scripting &amp; Automation<br /><b>Skills</b>:Python,     Scripting,     API    \n<br /><b>Country</b>: India\n<br /><a href=\"https://www.upwork.com/jobs/Get-data-using-API-and-push-data-SQL-server_%7E01a5300f004f9e2520?source=rss\">click to apply</a>"
      }
    ],
    "guidislink": false,
    "id": "https://www.upwork.com/jobs/Get-data-using-API-and-push-data-SQL-server_%7E01a5300f004f9e2520?source=rss",
    "link": "https://www.upwork.com/jobs/Get-data-using-API-and-push-data-SQL-server_%7E01a5300f004f9e2520?source=rss",
    "links": [
      {
        "href": "https://www.upwork.com/jobs/Get-data-using-API-and-push-data-SQL-server_%7E01a5300f004f9e2520?source=rss",
        "rel": "alternate",
        "type": "text/html"
      }
    ],
    "published": "Mon, 29 Jun 2020 16:10:23 +0000",
    "published_parsed": [
      2020,
      6,
      29,
      16,
      10,
      23,
      0,
      181,
      0
    ],
    "summary": "I need a script preferably in Python that takes a REST API, grab the data and put into SQL server table. Since I have records in millions so the script should be mulithreaded to save time.<br /><br /><b>Budget</b>: $100\n<br /><b>Posted On</b>: June 29, 2020 16:10 UTC<br /><b>Category</b>: Scripting &amp; Automation<br /><b>Skills</b>:Python,     Scripting,     API    \n<br /><b>Country</b>: India\n<br /><a href=\"https://www.upwork.com/jobs/Get-data-using-API-and-push-data-SQL-server_%7E01a5300f004f9e2520?source=rss\">click to apply</a>"

...
нужно распарсить поля "summary" тоесть чтобы было
'Budget' : 100
'Posted on': June 29, 2020 16:10 UTC
'Category': Scripting & Automation
'Skills': Python, Scripting, API
'Country': India
И так каждый "summary"
Как это сделать?

@bbq · 30.06.2020, 12:20

Nikmoz,
'Budget' : 100
'Posted on': June 29, 2020 16:10 UTC
'Category': Scripting & Automation
'Skills': Python, Scripting, API
'Country': India
А где вообще эти поля в вашем json?

@Nikmoz · 30.06.2020, 12:30 **[ТС]**

"summary": ... Budget: $100\n Posted On: June 29, 2020 16:10 UTC Category: Scripting & Automation Skills:Python, Scripting, API \n Country: India\n <a ...

@bbq · 30.06.2020, 12:41

Используйте Beautiful Soup

@GulgDev · 30.06.2020, 19:58

Python
1
2
3
4
import json
 
with open('file.json') as file:
    parsed = json.loads(file);

Добавлено через 30 секунд
bbq, зачем Beautiful Soup, когда есть моудль json???

@Black Fregat · 30.06.2020, 20:03

Hyppoprogramm, у него внутри JSON лежит HTML

@GulgDev · 30.06.2020, 20:22

Black Fregat, ох, не заметил... Тогда без Beautiful Soup не обойтись!

@volkomorov · 30.06.2020, 23:16

Регуляркой быстрее будет

@DobroAlex · 01.07.2020, 09:28

volkomorov, нельзя парсить html регулярками, просто нельзя

@volkomorov · 01.07.2020, 09:50

Где ты видел чтобы "\n" использовался в html. У него там обычная строка

@DobroAlex · 01.07.2020, 11:34

volkomorov, там есть

HTML5
1
<br>

-- это HTML тэг => это HTML

@Black Fregat · 01.07.2020, 12:42

Сообщение от volkomorov

Где ты видел чтобы "\n" использовался в html.

Если HTML прочитать в Python в одну строку, то на месте всех переводов строк как раз и будет "\n"

Новые блоги и статьи Все статьи Все блоги /
Первый деплой lagorue 16.01.2026 Не спеша развернул своё 1ое приложение в kubernetes. А дальше мне интересно создать 1фронтэнд приложения и 2 бэкэнд приложения развернуть 2 деплоя в кубере получится 2 сервиса и что-бы они. . .	Расчёт переходных процессов в цепи постоянного тока igorrr37 16.01.2026 / * Дана цепь постоянного тока с R, L, C, k(ключ), U, E, J. Программа составляет систему уравнений по 1 и 2 законам Кирхгофа, решает её и находит токи на L и напряжения на C в установ. режимах до и. . .	Восстановить юзерскрипты Greasemonkey из бэкапа браузера damix 15.01.2026 Если восстановить из бэкапа профиль Firefox после переустановки винды, то список юзерскриптов в Greasemonkey будет пустым. Но восстановить их можно так. Для этого понадобится консольная утилита. . .	Изучаю kubernetes lagorue 13.01.2026 А пригодятся-ли мне знания kubernetes в России?
Сукцессия микоризы: основная теория в виде двух уравнений. anaschu 11.01.2026 https:/ / rutube. ru/ video/ 7a537f578d808e67a3c6fd818a44a5c4/	WordPad для Windows 11 Jel 10.01.2026 WordPad для Windows 11 — это приложение, которое восстанавливает классический текстовый редактор WordPad в операционной системе Windows 11. После того как Microsoft исключила WordPad из. . .	Classic Notepad for Windows 11 Jel 10.01.2026 Old Classic Notepad for Windows 11 Приложение для Windows 11, позволяющее пользователям вернуть классическую версию текстового редактора «Блокнот» из Windows 10. Программа предоставляет более. . .	Почему дизайн решает? Neotwalker 09.01.2026 В современном мире, где конкуренция за внимание потребителя достигла пика, дизайн становится мощным инструментом для успеха бренда. Это не просто красивый внешний вид продукта или сайта — это. . .

@bbq 215 / 211 / 146 Регистрация: 20.11.2014 Сообщений: 1,184
	30.06.2020, 12:20
	Nikmoz, 'Budget' : 100 'Posted on': June 29, 2020 16:10 UTC 'Category': Scripting & Automation 'Skills': Python, Scripting, API 'Country': India А где вообще эти поля в вашем json? 0

@Nikmoz 2 / 1 / 1 Регистрация: 12.11.2018 Сообщений: 53
	30.06.2020, 12:30 [ТС]
	"summary": ... <br /><br /><b>Budget</b>: $100\n<br /><b>Posted On</b>: June 29, 2020 16:10 UTC<br /><b>Category</b>: Scripting & Automation<br /><b>Skills</b>:Python, Scripting, API \n<br /><b>Country</b>: India\n<br /><a ... 0

@bbq 215 / 211 / 146 Регистрация: 20.11.2014 Сообщений: 1,184
	30.06.2020, 12:41
	Используйте Beautiful Soup 2

@Black Fregat Фрилансер 3709 / 2082 / 567 Регистрация: 31.05.2009 Сообщений: 6,683
	30.06.2020, 20:03
	Hyppoprogramm, у него внутри JSON лежит HTML 0

@GulgDev 132 / 118 / 29 Регистрация: 09.07.2019 Сообщений: 1,071
	30.06.2020, 20:22
	Black Fregat, ох, не заметил... Тогда без Beautiful Soup не обойтись! 0

@volkomorov 150 / 120 / 36 Регистрация: 01.11.2019 Сообщений: 425
	30.06.2020, 23:16
	Регуляркой быстрее будет 0

@DobroAlex Заклинатель змей 705 / 560 / 219 Регистрация: 30.04.2016 Сообщений: 2,605
	01.07.2020, 09:28
	volkomorov, нельзя парсить html регулярками, просто нельзя 0

@volkomorov 150 / 120 / 36 Регистрация: 01.11.2019 Сообщений: 425
	01.07.2020, 09:50
	Где ты видел чтобы "\n" использовался в html. У него там обычная строка 0