5 / 5 / 0
Регистрация: 07.06.2009
Сообщений: 171

Неэффективное использование оперативной памяти

24.07.2017, 22:48. Показов 1997. Ответов 25
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
Написал задачу на java. В ней используются postgresql, spring boot, rest. Все просто, надо считать данные из БД фильтруя их с помощью regex - объект с двумя полями айди и имя, и потом в json передать в response. Вот проверив его одной из ошибок стало неэффективное использование оперативной памяти.

Одним из условий является "фильтр обязательно применять в java коде, не использовать возможности sql". Так же в БД по условию более миллиона записей.

Что делать чтобы исправить? Контроллер скидывать пока не буду, потому как кажется что проблема на нижних слоях, но если надо выложу сразу.

Мой код:

Java
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
@Repository
 
public class ContactRepositoryImpl implements ContactRepository {
 
 
    private static final BeanPropertyRowMapper<Contact> ROW_MAPPER = BeanPropertyRowMapper.newInstance(Contact.class);
 
 
    JdbcTemplate jdbcTemplate;
 
 
    @Autowired
 
    public ContactRepositoryImpl(@Qualifier("dataSource") DataSource dataSource) {
 
        this.jdbcTemplate = new JdbcTemplate(dataSource);
 
    }
 
 
    public List<Contact> getAll() {
 
        System.out.println(jdbcTemplate.toString());
 
        return jdbcTemplate.query("SELECT * FROM contacts", ROW_MAPPER);
 
    }
 
}
 
@Service
 
public class ContactServiceImpl implements ContactService {
 
 
    @Autowired
 
    private ContactRepository repository;
 
 
    @Override
 
    public List<Contact> getFilteredContacts(String nameFilter) {
 
        Pattern pattern = Pattern.compile(nameFilter);
 
 
        List<Contact> list = repository.getAll();
 
        List<Contact> list2 = list.stream()
 
                .filter(Objects::nonNull)
 
                .filter(it -> it.getName() != null)
 
                .filter(it -> !pattern.matcher(it.getName()).matches())
 
                .collect(Collectors.toList());
 
 
        return list2;
 
    }
 
@Configuration
public class DBUtil {
    private final static String URL =
            "jdbc:postgresql://localhost:5432/contacts";
    private final static String DRIVER = "org.postgresql.Driver";
    private final static String USERNAME = "postgres";
    private final static String PASSWORD = "root";
 
    private static Connection connection = null;
 
    @Bean(name = "dataSource")
    public static DriverManagerDataSource getDataSource() {
        DriverManagerDataSource dataSource = new DriverManagerDataSource();
        dataSource.setDriverClassName(DRIVER);
        dataSource.setUrl(URL);
        dataSource.setUsername(USERNAME);
        dataSource.setPassword(PASSWORD);
 
        Resource initSchema = new ClassPathResource("initdb.sql");
        Resource initData = new ClassPathResource("populatedbase.sql");
        DatabasePopulator databasePopulator = new ResourceDatabasePopulator(initSchema, initData);
        DatabasePopulatorUtils.execute(databasePopulator, dataSource);
 
        return dataSource;
    }
}
0
IT_Exp
Эксперт
34794 / 4073 / 2104
Регистрация: 17.06.2006
Сообщений: 32,602
Блог
24.07.2017, 22:48
Ответы с готовыми решениями:

Лимит оперативной памяти в java
здравствуйте. вопрос не по программированию, но гугл послал к вам по умолчанию java может использовать не больше 1024мб оперативной...

Выделение оперативной памяти апплету
Моя программа запускает другую программу (игру) через апплет. Можно ли как-нибудь выделить дополнительную оперативную память этому апплету...

Использование оперативной памяти (вылетают игры из-за нехватки памяти)
Перезагружаю комп, играю часа 3-4 и вся память пропадает куда-то в результате чего игры вылетают(закрытие всех прог и игр оставляет где-то...

25
5 / 5 / 0
Регистрация: 07.06.2009
Сообщений: 171
02.08.2017, 15:44  [ТС]
Студворк — интернет-сервис помощи студентам
LeX, как я уже говорил возможности SQL нельзя применить.
Поэтому вопрос о кешировании акутален. Вы имеете ввиду спринговую пагинацию?
0
Эксперт Java
378 / 370 / 114
Регистрация: 30.06.2010
Сообщений: 1,445
03.08.2017, 08:02
Цитата Сообщение от Noxior Посмотреть сообщение
как я уже говорил возможности SQL нельзя применить.
такого практически не бывает, ну да ладно (если хотите - кейс в студию)
да, спринговую
0
5 / 5 / 0
Регистрация: 07.06.2009
Сообщений: 171
03.08.2017, 11:28  [ТС]
LeX, а разве по скорости спринговая пагинация не проиграет по скорости моему варианту?
Что значит "кейс в студию?)
0
Эксперт Java
378 / 370 / 114
Регистрация: 30.06.2010
Сообщений: 1,445
03.08.2017, 17:40
Еще раз говорю, все зависит от задачи. Приведи пример когда sql применить нельзя
0
5 / 5 / 0
Регистрация: 07.06.2009
Сообщений: 171
03.08.2017, 20:10  [ТС]
Цитата Сообщение от LeX Посмотреть сообщение
Еще раз говорю, все зависит от задачи. Приведи пример когда sql применить нельзя
Это учебная задача всего лишь. и когда я показал ее, то ее восприняли не очень. И я хочу понять в чем проблема.
Или тут, в чтении данных с выборкой по regex. Или еще где. Я думаю что возможно в кешировании проблема? У меня был вариант с spring data jpa, но тут я просто подумал что скорость хуже по сравнению с моим вариантом.
0
Эксперт Java
3639 / 2971 / 918
Регистрация: 05.07.2013
Сообщений: 14,220
03.08.2017, 21:19
Цитата Сообщение от Noxior Посмотреть сообщение
И я хочу понять в чем проблема.
а у них то спросить не судьба была, что им не понравилось?
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
BasicMan
Эксперт
29316 / 5623 / 2384
Регистрация: 17.02.2009
Сообщений: 30,364
Блог
03.08.2017, 21:19
Помогаю со студенческими работами здесь

Использование оперативной памяти
Можно ли как-то в CCS узнать сколько программа отъедает оперативной памяти, а также на что вообще тратится память? А то сегодня вот первый...

Использование оперативной памяти
Создаю программу подсчета суммы элементов массива. Надо подсчитать врема затраченное и количество оперативной памяти. Можно ли отследит...

Странное использование оперативной памяти
Здравствуйте. Отключил файл подкачки, так как не хочу насиловать лишний раз HDD или SSD. Всего RAM 12gb DDR3 (4+8). При запуске некоторых...

Использование оперативной памяти в пустую
Всем привет. Недавно купил игровой ноутбук Asus Tuf Gaming FX504. На следующий день заметил, что при запуске Windows уже используется 3гб...

Использование видеопамяти и оперативной памяти
Здравствуйте. У меня установлено 4Гб оперативной памяти, но используется только 3, не смотря на то, что система 64 разрядная. Раньше я...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
26
Ответ Создать тему
Опции темы

Новые блоги и статьи
Хитросплетение родственных связей пантеона греческих богов.
russiannick 14.05.2026
Однооконник, позволяющий узреть и изучить отдельных героев древней Греции. <!DOCTYPE html> <html lang="ru"> <head> <meta charset="UTF-8"> <meta http-equiv="X-UA-Compatible". . .
[golang] Угол между стрелками часов
alhaos 12.05.2026
По заданным значениям часа и минуты необходимо определить значение меньшего угла между стрелками аналогового циферблата часов. import "math" func angleClock(hour int, minutes int) float64 { . . .
Debian 13: Установка Lazarus QT5
ВитГо 09.05.2026
Эта инструкция моя компиляция инструкций volvo https:/ / www. cyberforum. ru/ blogs/ 203668/ 10753. html и его же старой инструкции по установке Lazarus с gtk2. . .
Нейросеть на алгоритме "эстафета хвоста" как перспектива.
Hrethgir 06.05.2026
На десерт, когда запущу сервер. Статья тут https:/ / habr. com/ ru/ articles/ 1030914/ . Автор я сам, нейросеть только помогает в вопросах которые мне не известны - не знаю людей которые знали-бы. . .
Асинхронный приём данных из COM-порта
Argus19 01.05.2026
Асинхронный приём данных из COM-порта Купил на aliexpress термопринтер QR701. Он оказался странным. Поключил к Arduino Nano. Был очень удивлён. Наотрез отказывается печатать русские буквы. Чтобы. . .
попытка написать игровой сервер на C++
pyirrlicht 29.04.2026
попытка написать игровой сервер на плюсах с открытым бесконечным миром. возможно получится прикрутить интерпретатор питон для кастомизации игровой логики. что есть на текущий момент:. . .
Контроль уникальности выбранного документа-основания при изменении реквизита
Maks 28.04.2026
Алгоритм из решения ниже разработан на примере нетипового документа "ЗаявкаНаРемонтСпецтехники", разработанного в КА2. Задача: уведомлять пользователя, если указанная заявка (документ-основание). . .
Благородство как наказание
Maks 24.04.2026
У хорошего человека отношения с женщинами всегда складываются трудно. А я человек хороший. Заявляю без тени смущения, потому что гордиться тут нечем. От хорошего человека ждут соответствующего. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru