0 / 0 / 0
Регистрация: 30.11.2021
Сообщений: 3

Python и Elasticsearch

11.12.2021, 22:02. Показов 1282. Ответов 1

Студворк — интернет-сервис помощи студентам
Всем здрасте! Нужна помощь знающих товарищей.

Написал код для отправки данных типа json в Elasticsearch. Однако, данные не выгружаются вместо этого, в консоли выдается вот такая ошибка:

Traceback (most recent call last):
File "C:\Users\User\PycharmProjects\pythonPro ject1\main.py", line 46, in <module>
settings = json.load(f_in)
File "D:\Новая папка\lib\json\__init__.py", line 293, in load
return loads(fp.read(),
File "D:\Новая папка\lib\json\__init__.py", line 346, in loads
return _default_decoder.decode(s)
File "D:\Новая папка\lib\json\decoder.py", line 337, in decode
obj, end = self.raw_decode(s, idx=_w(s, 0).end())
File "D:\Новая папка\lib\json\decoder.py", line 355, in raw_decode
raise JSONDecodeError("Expecting value", s, err.value) from None
json.decoder.JSONDecodeError: Expecting value: line 9 column 23 (char 355)

Код для справки:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
import json
import os
 
 
 
from elasticsearch import Elasticsearch, RequestError
from elasticsearch.helpers import bulk
 
 
def create_index(es_client, index_name, settings):
   try:
      es_client.indices.create(index_name, body=settings)
      print("Index created")
      return True
   except Exception as err:
      if err.args[1] == "resource_already_exists_exception":
         print("Index already exists")
         return True
 
   return  False
 
def upload(index_name, data):
   for i, item in enumerate( data,1):
      print(f"item {i} from {len(data)} in process...")
      yield {
         "_index": index_name,
         "_source": item
      }
 
 
if __name__== '__main__':
   folder = "Python"
   ALL_DATA = []
   for file in os.listdir(folder):
      filepath = os.path.join(folder,file)
      if filepath.endswith(".json"):
         with open(filepath, "r", encoding="utf-8") as f_in:
            data = json.load(f_in)
            ALL_DATA += data
 
   es = Elasticsearch()
 
   print (es.info())
 
   with open("mapping.json", "r", encoding="utf-8") as f_in:
      settings = json.load(f_in)
 
   index_name = "data_test"
   if create_index (es, index_name, settings):
      bulk(es, upload(index_name, data))
Уже все перепробовал. Облазил весь реддит, зарубежные форумы и кучу гайдов, но так и не нашел решения.
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
11.12.2021, 22:02
Ответы с готовыми решениями:

Node JS и Elasticsearch
Всем здравствуйте! Модуль в Node JS подключила успешно, как создать клиента более или менее понятно. Возникло несколько вопросов: 1)...

Node.js+ElasticSearch
Всем добрый день! Хотел бы спросить, как грамотно загрузить данные с ElasticSearch на локальный http сервер, созданный на Node.js?

ElasticSearch. Приоритеты поиска
Всем привет! У меня есть свой поисковик на ElasticSearch. Писал на python. Поисковик ищет топики на игровом форуме. Есть проблема с...

1
Автоматизируй это!
Эксперт Python
 Аватар для Welemir1
7392 / 4819 / 1246
Регистрация: 30.03.2015
Сообщений: 13,694
Записей в блоге: 29
11.12.2021, 22:18
FUNZAR, а прежде чем лазать по подворотням попробовал ошибку прочесть? дело именно в жсоне, он не валиден и даже указано место.
Ты конечно можеш выложить свой жсон из файла чтобы мы за тебя нашли это место, но я верю что ты и сам сравишься.
2
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
11.12.2021, 22:18
Помогаю со студенческими работами здесь

gem tire (Elasticsearch)
Нужно сделать индексацию поиска, сам поиск реализован этим гемом, а вот индексацию не получается сделать, tutorial к гему не помог.. может...

Как использовать elasticsearch?
Всем привет, хотел бы уточнить, где нужен elasticsearch при создании базы данных? Чем он может помочь? Ускорит поиск? Кластенризованные,...

Hibernate search & elasticsearch
Кто-нибудь встречался с такой ошибкой при работе с Hibernate Search (Elasticsearch): java.lang.IllegalArgumentException: HSEARCH000332:...

Как установить elasticsearch на хостинг
Не срабатывает инит файл при установке на хостинг - хотя хорошо срабатывает на локалхосте &lt;?php require_once...

Elasticsearch поиск по всем записям
Приветствую. Пишу проектик (не Spring ), который будет писать логи в Elasticsearch и на данный момент никак не могу понять/нагуглить...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Опции темы

Новые блоги и статьи
Отправка уведомления на почту при изменении наименования справочника
Maks 24.03.2026
Программная отправка письма электронной почты на примере изменения наименования справочника "Склады" в конфигурации БП3. Перед реализацией необходимо выполнить настройку системной учетной записи. . .
модель ЗдравоСохранения 5. Меньше увольнений- больше дохода!
anaschu 24.03.2026
Теперь система здравосохранения уменьшает количество увольнений. 9TO2GP2bpX4 a42b81fb172ffc12ca589c7898261ccb/ https:/ / rutube. ru/ video/ a42b81fb172ffc12ca589c7898261ccb/ Слева синяя линия -. . .
Midnight Chicago Blues
kumehtar 24.03.2026
Такой Midnight Chicago Blues, знаешь?. . Когда вечерние улицы становятся ночными, а ты не можешь уснуть. Ты идёшь в любимый старый бар, и бармен наливает тебе виски. Ты смотришь на пролетающие. . .
Контроль уникальности заводского номера - вариант №2
Maks 24.03.2026
В отличие от предыдущего варианта добавлено прерывание циклов, также добавлены новые переменные для сохранения контекста ошибки перед прерыванием цикла: Процедура ПередЗаписью(Отказ, РежимЗаписи,. . .
SDL3 для Desktop (MinGW): Вывод текста со шрифтом TTF с помощью библиотеки SDL3_ttf на Си и C++
8Observer8 24.03.2026
Содержание блога Финальные проекты на Си и на C++: finish-text-sdl3-c. zip finish-text-sdl3-cpp. zip
Жизнь в неопределённости
kumehtar 23.03.2026
Жизнь — это постоянное существование в неопределённости. Например, даже если у тебя есть список дел, невозможно дойти до точки, где всё окончательно завершено и больше ничего не осталось. В принципе,. . .
Модель здравоСохранения: работники работают быстрее после её введения.
anaschu 23.03.2026
geJalZw1fLo Корпорация до введения программа здравоохранения имела много невыполненных работниками заданий, после введения программы количество заданий выросло. Но на выплатах по больничным это. . .
Контроль уникальности заводского номера - вариант №1
Maks 23.03.2026
Алгоритм контроля уникальности заводского (или серийного) номера на примере документа выдачи шин для спецтехники с табличной частью в конфигурации КА2. Данные берутся из регистра сведений, по. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru