Запрос на выборку с исключением повторяющихся строк

@vodakins · Регистрация: 06.04.2010

Author24 — интернет-сервис помощи студентам

Добрый день.

Столкнулся с еще одной проблемой. У меня есть представление, которое выводит данные из таблицы

SQL

SELECT PERCENT FULL_DESCRIPTION, NUMBER, FUEL, STATUS
FROM [airport].[dbo].[transport]
WHERE     (FUEL < 2.50) AND (STATUS = N'1')
ORDER BY FULL_DESCRIPTION, NUMBER, FUEL DESC

Данные выводятся в таком виде

Вертолёт(1) - 100 - 2,22 - 1
Вертолёт(1) - 156 - 1,70 - 1
Вертолёт(2) - 172 - 2,48 - 1
Вертолёт(2) - 1240 - 2,36 - 1
Самолёт(1) - 220 - 2,40 - 1
Самолёт(2) - 230 - 2,33 - 1
Самолёт(2) - 2240 - 2,01 - 1

и т.д.

Нужно вывести данные вот в таком виде

Вертолёт(1) - 100 - 2,22 - 1
- 156 - 1,70 - 1
Вертолёт(2) - 172 - 2,48 - 1
- 1240-2,36 - 1
Самолёт(1) - 220 - 2,40 - 1
Самолёт(2) - 230 - 2,33 - 1
- 2240 - 2,01 - 1

И посчитать кол-во заполненных полей FULL_DESCRIPTION (nvarchar).
Ума ни приложу, как это сделать? Изучать SQL только начинаю.
Буду благодарен за любую помощь.

@SunDrop · 07.04.2010, 19:07

Создание хранимой процедуры на выборку...
Создаешь такую функцию группировки, а дальше

SQL

SELECT FULL_DESCRIPTION, func_gconcat(NUMBER + "-" + FUEL + "-" + STATUS)
FROM [airport].[dbo].[transport]
WHERE     (FUEL < 2.50) AND (STATUS = N'1')
GROUP BY FULL_DESCRIPTION
ORDER BY FULL_DESCRIPTION, NUMBER, FUEL DESC

@vodakins · 07.04.2010, 23:20 **[ТС]**

Возникает такая ошибка при обработке функции

Conversion failed when converting the nvarchar value 'Самолет(1)' to data type int.

@SunDrop · 08.04.2010, 01:48

Сообщение от vodakins

Conversion failed when converting the nvarchar value 'Самолет(1)' to data type int.

А где это оно у тебя в int конвертится?

Добавлено через 1 час 15 минут
Сразу сбрось код твоей функции и код запроса, где ты ее используешь

@vodakins · 08.04.2010, 07:48 **[ТС]**

SQL

CREATE FUNCTION funcgconcat (@FULL_DESCRIPTION INT)
RETURNS VARCHAR(8000)
AS
BEGIN
DECLARE @RESULT VARCHAR(8000);
SET @RESULT = '';
SELECT @RESULT = @RESULT + NUMBER + FUE + STATUS + ' ' 
FROM [dbo].[transport]
WHERE [FULL_DESCRIPTION] = @FULL_DESCRIPTION;
SET @RESULT = rtrim(@RESULT);
RETURN @RESULT
END

Сделал выборку как в примере по ссылке

@Devil_FoX · 08.04.2010, 10:29

Первая строчка не корректна, ты не тот тип прописуешь - вместо int необходимо указать хотя-бы varchar(50)

@vodakins · 18.04.2010, 21:41 **[ТС]**

Уважаемые форумчане задача усложнилась, буду благодарен за любую помощь. Есть такая таблица static с данными [airport_id] nvarchar(255), [lines_id] nvarchar(255), [settled_date] nvarchar(255), [full_description] nvarchar(255),[lines] nvarchar(255), [selections_id] nvarchar(255), [selections] nvarchar(255), [fuel] float, [lbs] float, [pass] float, [up_time] nvarchar(255), [down_time] nvarchar(255), [status] nvarchar(255).

Данные выводятся вот в таком виде
1, 1, 03-07-2008 19:40:30, seatle/newyork NWY 250, british airlines, 1 , boing747, 242, 2220, 125, 03-07-2008 19:40:30, 03-07-2008 23:40:30, 0.

В этой таблице более 15 млн. записей.

Нужно вывести вот так
[full_description],[lines],[selections_id],[selections],[fuel],[status]
где поле [fuel] меньше 350.

seatle/newyork NWY 250, british airlines, 1 , boing747, 242, 0
british airlines, 1 , boing747, 241, 0
iran airlines, 2 , il76, 300, 1

@Devil_FoX · 19.04.2010, 11:20

Во первых: зачем ты почти все данные относиш к типу nvarchar(255) ?
для целочисленых цифр используй - int
для дат не то что желательно, а необходимо использовать - datetime

Каждое значение в nvarchar отяжеляет на один бит твою строку.
Значение 255 - ты указал что оно будет весить 255 бит, и не важно что слово может быть с 5 букв.. SQL допишет оставшиеся 250 символов пробелами.

Во вторых. какой критерий тебе нужен для вывода таблицы? я смотрю у тебя есть две даты, и исходя из этого у тебя один самолёт может быть сто раз в одном аэропорте но в разное время и тебе небось не интересно просматривать историю его полётов.

В третьих: попробуй разбить свою мега-таблицу на несколько составных - она у тебя не гибкая.

@vodakins · 19.04.2010, 11:38 **[ТС]**

Проблема вся в том, что я импортирую данные из csv файла. Пробовал разные варианты, вот эти типы данных больше всего подошли. Файлов очень много.

Мне нужен запрос который выводит вот эти строки без повторений [full_description]
seatle/newyork NWY 250 .............................................
newyork/gamburg GBR 312............................................

что находится после вот этих данных меня в принципе не интересует, нужно только чтобы выполнялось условие по полю [fuel].

Да я понимаю, что таблица не гибкая и не соответствует правилам БД. Как провести преобразование таблицы с данными я ,к сожалению, не знаю.

@Devil_FoX · 19.04.2010, 12:54

Ну насчёт импорта данных - ты что-то точно не так делаешь, помочь в этом я те не очень смогу - импорт данных это моя ахилесова пята, но вот остальное так сделай (если я правильно понял твою задачу):

T-SQL

select distinct
    [full_description],[lines],[selections_id],[selections],[fuel],[status]
from dbo.[static] 
where [fuel]<350

Только тут будет выводить все незадвоенные данные по всем полям.

@vodakins · 19.04.2010, 14:32 **[ТС]**

Сообщение от Devil_FoX

Ну насчёт импорта данных - ты что-то точно не так делаешь, помочь в этом я те не очень смогу - импорт данных это моя ахилесова пята, но вот остальное так сделай (если я правильно понял твою задачу):

T-SQL

select distinct
    [full_description],[lines],[selections_id],[selections],[fuel],[status]
from dbo.[static] 
where [fuel]<350

Только тут будет выводить все незадвоенные данные по всем полям.

Получиться вот так:

seatle/newyork NWY 250 ..............................................
seatle/newyork NWY 250 .............................................
seatle/newyork NWY 250 .............................................
seatle/newyork NWY 250 .............................................
seatle/newyork NWY 250 .............................................
seatle/newyork NWY 250 .............................................
seatle/newyork NWY 250 .............................................
seatle/newyork NWY 250 .............................................
newyork/gamburg GBR 312............................................
newyork/gamburg GBR 312............................................
newyork/gamburg GBR 312............................................
newyork/gamburg GBR 312............................................

где вместо точек будут разные данные

мне же нужно посчитать кол-во строк, которые повторяются:
seatle/newyork NWY 250 это будет запись под номером 1
newyork/gamburg GBR 312 это будет запись под номером 2

и т.д.

Их более милиона.

@Devil_FoX · 19.04.2010, 14:42

для того что бы посчитать кол-во повторений для поля [full_description] - вот запрос:

SQL

SELECT 
    [full_description],
    COUNT(*) AS povtor
FROM dbo.[static] 
WHERE [fuel]<350
GROUP BY [full_description]

@SunDrop · 19.04.2010, 17:43

Сообщение от Devil_FoX

SQL допишет оставшиеся 250 символов пробелами.

Увы нет

Сообщение от Devil_FoX

В третьих: попробуй разбить свою мега-таблицу на несколько составных - она у тебя не гибкая.

Дадада... Точно замечено!

@SunDrop 390 / 229 / 11 Регистрация: 09.12.2009 Сообщений: 668
	19.04.2010, 17:43	13
	Сообщение от Devil_FoX SQL допишет оставшиеся 250 символов пробелами. Увы нет Сообщение от Devil_FoX В третьих: попробуй разбить свою мега-таблицу на несколько составных - она у тебя не гибкая. Дадада... Точно замечено! 0

@vodakins 0 / 0 / 0 Регистрация: 06.04.2010 Сообщений: 13
	07.04.2010, 23:20 [ТС]	3
	Возникает такая ошибка при обработке функции Conversion failed when converting the nvarchar value 'Самолет(1)' to data type int. 0

@SunDrop 390 / 229 / 11 Регистрация: 09.12.2009 Сообщений: 668
	08.04.2010, 01:48	4
	Сообщение от vodakins Conversion failed when converting the nvarchar value 'Самолет(1)' to data type int. А где это оно у тебя в int конвертится? Добавлено через 1 час 15 минут Сразу сбрось код твоей функции и код запроса, где ты ее используешь 0

@Devil_FoX 168 / 142 / 1 Регистрация: 01.04.2010 Сообщений: 474
	08.04.2010, 10:29	6
	Первая строчка не корректна, ты не тот тип прописуешь - вместо int необходимо указать хотя-бы varchar(50) 1

@vodakins 0 / 0 / 0 Регистрация: 06.04.2010 Сообщений: 13
	18.04.2010, 21:41 [ТС]	7
	Уважаемые форумчане задача усложнилась, буду благодарен за любую помощь. Есть такая таблица static с данными [airport_id] nvarchar(255), [lines_id] nvarchar(255), [settled_date] nvarchar(255), [full_description] nvarchar(255),[lines] nvarchar(255), [selections_id] nvarchar(255), [selections] nvarchar(255), [fuel] float, [lbs] float, [pass] float, [up_time] nvarchar(255), [down_time] nvarchar(255), [status] nvarchar(255). Данные выводятся вот в таком виде 1, 1, 03-07-2008 19:40:30, seatle/newyork NWY 250, british airlines, 1 , boing747, 242, 2220, 125, 03-07-2008 19:40:30, 03-07-2008 23:40:30, 0. В этой таблице более 15 млн. записей. Нужно вывести вот так [full_description],[lines],[selections_id],[selections],[fuel],[status] где поле [fuel] меньше 350. seatle/newyork NWY 250, british airlines, 1 , boing747, 242, 0 british airlines, 1 , boing747, 241, 0 iran airlines, 2 , il76, 300, 1 0

@Devil_FoX 168 / 142 / 1 Регистрация: 01.04.2010 Сообщений: 474
	19.04.2010, 11:20	8
	Во первых: зачем ты почти все данные относиш к типу nvarchar(255) ? для целочисленых цифр используй - int для дат не то что желательно, а необходимо использовать - datetime Каждое значение в nvarchar отяжеляет на один бит твою строку. Значение 255 - ты указал что оно будет весить 255 бит, и не важно что слово может быть с 5 букв.. SQL допишет оставшиеся 250 символов пробелами. Во вторых. какой критерий тебе нужен для вывода таблицы? я смотрю у тебя есть две даты, и исходя из этого у тебя один самолёт может быть сто раз в одном аэропорте но в разное время и тебе небось не интересно просматривать историю его полётов. В третьих: попробуй разбить свою мега-таблицу на несколько составных - она у тебя не гибкая. 0

@vodakins 0 / 0 / 0 Регистрация: 06.04.2010 Сообщений: 13
	19.04.2010, 11:38 [ТС]	9
	Проблема вся в том, что я импортирую данные из csv файла. Пробовал разные варианты, вот эти типы данных больше всего подошли. Файлов очень много. Мне нужен запрос который выводит вот эти строки без повторений [full_description] seatle/newyork NWY 250 ............................................. newyork/gamburg GBR 312............................................ что находится после вот этих данных меня в принципе не интересует, нужно только чтобы выполнялось условие по полю [fuel]. Да я понимаю, что таблица не гибкая и не соответствует правилам БД. Как провести преобразование таблицы с данными я ,к сожалению, не знаю. 0