Форум программистов, компьютерный форум, киберфорум
Python для начинающих
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.50/6: Рейтинг темы: голосов - 6, средняя оценка - 4.50
0 / 0 / 0
Регистрация: 30.11.2021
Сообщений: 3

Python и Elasticsearch

11.12.2021, 22:02. Показов 1278. Ответов 1

Студворк — интернет-сервис помощи студентам
Всем здрасте! Нужна помощь знающих товарищей.

Написал код для отправки данных типа json в Elasticsearch. Однако, данные не выгружаются вместо этого, в консоли выдается вот такая ошибка:

Traceback (most recent call last):
File "C:\Users\User\PycharmProjects\pythonPro ject1\main.py", line 46, in <module>
settings = json.load(f_in)
File "D:\Новая папка\lib\json\__init__.py", line 293, in load
return loads(fp.read(),
File "D:\Новая папка\lib\json\__init__.py", line 346, in loads
return _default_decoder.decode(s)
File "D:\Новая папка\lib\json\decoder.py", line 337, in decode
obj, end = self.raw_decode(s, idx=_w(s, 0).end())
File "D:\Новая папка\lib\json\decoder.py", line 355, in raw_decode
raise JSONDecodeError("Expecting value", s, err.value) from None
json.decoder.JSONDecodeError: Expecting value: line 9 column 23 (char 355)

Код для справки:

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
import json
import os
 
 
 
from elasticsearch import Elasticsearch, RequestError
from elasticsearch.helpers import bulk
 
 
def create_index(es_client, index_name, settings):
   try:
      es_client.indices.create(index_name, body=settings)
      print("Index created")
      return True
   except Exception as err:
      if err.args[1] == "resource_already_exists_exception":
         print("Index already exists")
         return True
 
   return  False
 
def upload(index_name, data):
   for i, item in enumerate( data,1):
      print(f"item {i} from {len(data)} in process...")
      yield {
         "_index": index_name,
         "_source": item
      }
 
 
if __name__== '__main__':
   folder = "Python"
   ALL_DATA = []
   for file in os.listdir(folder):
      filepath = os.path.join(folder,file)
      if filepath.endswith(".json"):
         with open(filepath, "r", encoding="utf-8") as f_in:
            data = json.load(f_in)
            ALL_DATA += data
 
   es = Elasticsearch()
 
   print (es.info())
 
   with open("mapping.json", "r", encoding="utf-8") as f_in:
      settings = json.load(f_in)
 
   index_name = "data_test"
   if create_index (es, index_name, settings):
      bulk(es, upload(index_name, data))
Уже все перепробовал. Облазил весь реддит, зарубежные форумы и кучу гайдов, но так и не нашел решения.
0
cpp_developer
Эксперт
20123 / 5690 / 1417
Регистрация: 09.04.2010
Сообщений: 22,546
Блог
11.12.2021, 22:02
Ответы с готовыми решениями:

Node JS и Elasticsearch
Всем здравствуйте! Модуль в Node JS подключила успешно, как создать клиента более или менее понятно. Возникло несколько вопросов: 1)...

Node.js+ElasticSearch
Всем добрый день! Хотел бы спросить, как грамотно загрузить данные с ElasticSearch на локальный http сервер, созданный на Node.js?

ElasticSearch. Приоритеты поиска
Всем привет! У меня есть свой поисковик на ElasticSearch. Писал на python. Поисковик ищет топики на игровом форуме. Есть проблема с...

1
Автоматизируй это!
Эксперт Python
 Аватар для Welemir1
7391 / 4818 / 1246
Регистрация: 30.03.2015
Сообщений: 13,693
Записей в блоге: 29
11.12.2021, 22:18
FUNZAR, а прежде чем лазать по подворотням попробовал ошибку прочесть? дело именно в жсоне, он не валиден и даже указано место.
Ты конечно можеш выложить свой жсон из файла чтобы мы за тебя нашли это место, но я верю что ты и сам сравишься.
2
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
raxper
Эксперт
30234 / 6612 / 1498
Регистрация: 28.12.2010
Сообщений: 21,154
Блог
11.12.2021, 22:18
Помогаю со студенческими работами здесь

gem tire (Elasticsearch)
Нужно сделать индексацию поиска, сам поиск реализован этим гемом, а вот индексацию не получается сделать, tutorial к гему не помог.. может...

Как использовать elasticsearch?
Всем привет, хотел бы уточнить, где нужен elasticsearch при создании базы данных? Чем он может помочь? Ускорит поиск? Кластенризованные,...

Hibernate search & elasticsearch
Кто-нибудь встречался с такой ошибкой при работе с Hibernate Search (Elasticsearch): java.lang.IllegalArgumentException: HSEARCH000332:...

Как установить elasticsearch на хостинг
Не срабатывает инит файл при установке на хостинг - хотя хорошо срабатывает на локалхосте &lt;?php require_once...

Elasticsearch поиск по всем записям
Приветствую. Пишу проектик (не Spring ), который будет писать логи в Elasticsearch и на данный момент никак не могу понять/нагуглить...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
2
Ответ Создать тему
Новые блоги и статьи
делаю науч статью по влиянию грибов на сукцессию
anaschu 13.03.2026
прикрепляю статью
SDL3 для Desktop (MinGW): Создаём пустое окно с нуля для 2D-графики на SDL3, Си и C++
8Observer8 10.03.2026
Содержание блога Финальные проекты на Си и на C++: hello-sdl3-c. zip hello-sdl3-cpp. zip Результат:
Установка CMake и MinGW 13.1 для сборки С и C++ приложений из консоли и из Qt Creator в EXE
8Observer8 10.03.2026
Содержание блога MinGW - это коллекция инструментов для сборки приложений в EXE. CMake - это система сборки приложений. Здесь описаны базовые шаги для старта программирования с помощью CMake и. . .
Как дизайн сайта влияет на конверсию: 7 решений, которые реально повышают заявки
Neotwalker 08.03.2026
Многие до сих пор воспринимают дизайн сайта как “красивую оболочку”. На практике всё иначе: дизайн напрямую влияет на то, оставит человек заявку или уйдёт через несколько секунд. Даже если у вас. . .
Модульная разработка через nuget packages
DevAlt 07.03.2026
Сложившийся в . Net-среде способ разработки чаще всего предполагает монорепозиторий в котором находятся все исходники. При создании нового решения, мы просто добавляем нужные проекты и имеем. . .
Модульный подход на примере F#
DevAlt 06.03.2026
В блоге дяди Боба наткнулся на такое определение: В этой книге («Подход, основанный на вариантах использования») Ивар утверждает, что архитектура программного обеспечения — это структуры,. . .
Управление камерой с помощью скрипта OrbitControls.js на Three.js: Вращение, зум и панорамирование
8Observer8 05.03.2026
Содержание блога Финальная демка в браузере работает на Desktop и мобильных браузерах. Итоговый код: orbit-controls-threejs-js. zip. Сканируйте QR-код на мобильном. Вращайте камеру одним пальцем,. . .
SDL3 для Web (WebAssembly): Синхронизация спрайтов SDL3 и тел Box2D
8Observer8 04.03.2026
Содержание блога Финальная демка в браузере. Итоговый код: finish-sync-physics-sprites-sdl3-c. zip На первой гифке отладочные линии отключены, а на второй включены:. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru