SELECT DISTINCT в SQL: описание и примеры запросов в MySQL

В этом описании DISTINCT в SQL убирает повторяющиеся строки из результата запроса. С помощью SELECT DISTINCT вы выберете уникальные значения по одному и нескольким полям, а через COUNT(DISTINCT) посчитаете их. Все примеры используют одну учебную таблицу, поэтому запросы можно повторить в MySQL.

Как писать SELECT DISTINCT в SQL

Ключевое слово DISTINCT ставьте сразу после SELECT, перед списком столбцов. WHERE отбирает исходные строки до удаления повторов, а ORDER BY задает порядок результата.

SELECT DISTINCT column1, column2
FROM table_name
WHERE condition
ORDER BY column1, column2;

Уберите WHERE или ORDER BY, если фильтрация и сортировка не нужны. В MySQL названия столбцов пишутся без квадратных скобок.

Подготовьте таблицу customerdetails

Создайте отдельную учебную базу, чтобы не затронуть рабочие данные. Подключитесь к серверу в терминале командой mysql -u your_user -p, затем выполните SQL-блок.

CREATE DATABASE IF NOT EXISTS company;
USE company;

CREATE TABLE customerdetails (
    CustomerID INT PRIMARY KEY,
    Education VARCHAR(30),
    Profession VARCHAR(30),
    Yearly_Income INT NOT NULL
);

INSERT INTO customerdetails
    (CustomerID, Education, Profession, Yearly_Income)
VALUES
    (1, 'Bachelors', 'Developer',   90000),
    (2, 'Bachelors', 'Developer',   95000),
    (3, 'Bachelors', 'Programming', 85000),
    (4, 'Masters',   'Analyst',    100000),
    (5, 'Masters',   'Analyst',     80000),
    (6, NULL,        'Developer',   70000),
    (7, NULL,        'Developer',   90000),
    (8, 'Masters',   NULL,          92000);

Таблица содержит 8 записей. Значение NULL показывает неизвестное образование или профессию.

SELECT *
FROM customerdetails
ORDER BY CustomerID;
CustomerIDEducationProfessionYearly_Income
1BachelorsDeveloper90000
2BachelorsDeveloper95000
3BachelorsProgramming85000
4MastersAnalyst100000
5MastersAnalyst80000
6NULLDeveloper70000
7NULLDeveloper90000
8MastersNULL92000

Дальнейшие запросы только читают данные и не меняют записи таблицы.

Как использовать DISTINCT в SQL по одному полю

Запрос без DISTINCT выводит все значения Education, включая повторы.

SELECT Education
FROM customerdetails
ORDER BY CustomerID;
Education
Bachelors
Bachelors
Bachelors
Masters
Masters
NULL
NULL
Masters

Добавьте DISTINCT и отсортируйте результат по выбранному столбцу.

SELECT DISTINCT Education
FROM customerdetails
ORDER BY Education;
Education
NULL
Bachelors
Masters

Запрос возвращает 3 строки вместо 8. Значения Bachelors, Masters и NULL представлены по одному разу; при сортировке по возрастанию MySQL ставит NULL перед остальными значениями.

Как вывести остальные поля выбранной записи

Добавление CustomerID в SELECT DISTINCT сохранит 8 строк, потому что первичный ключ отличается у каждой записи.

Чтобы получить одну полную запись на каждое образование, задайте правило выбора: вариант с MIN берет строку с наименьшим CustomerID в каждой группе.

SELECT c.CustomerID, c.Education, c.Profession, c.Yearly_Income
FROM customerdetails AS c
JOIN (
    SELECT MIN(CustomerID) AS CustomerID
    FROM customerdetails
    GROUP BY Education
) AS chosen
    ON chosen.CustomerID = c.CustomerID
ORDER BY c.Education;
CustomerIDEducationProfessionYearly_Income
6NULLDeveloper70000
1BachelorsDeveloper90000
4MastersAnalyst100000

В MySQL 8.0 для той же задачи подойдет ROW_NUMBER(). Функция нумерует строки внутри каждой группы, а внешний запрос оставляет первую строку.

SELECT CustomerID, Education, Profession, Yearly_Income
FROM (
    SELECT c.*,
           ROW_NUMBER() OVER (
               PARTITION BY Education
               ORDER BY CustomerID
           ) AS row_num
    FROM customerdetails AS c
) AS numbered
WHERE row_num = 1
ORDER BY Education;

MIN и ROW_NUMBER сохраняют поля одной исходной записи. Независимые MIN для разных столбцов могут собрать значения разных клиентов.

Как использовать DISTINCT в SQL по нескольким полям

DISTINCT по нескольким полям выбирает уникальные комбинации значений. Он сравнивает всю строку результата, то есть все выражения после SELECT.

SELECT DISTINCT Education, Profession
FROM customerdetails
ORDER BY Education, Profession;
EducationProfession
NULLDeveloper
BachelorsDeveloper
BachelorsProgramming
MastersNULL
MastersAnalyst

Результат содержит 5 комбинаций из 8 строк. Пары Bachelors / Developer и Masters / Analyst встречаются дважды, поэтому DISTINCT оставляет по одному экземпляру.

Bachelors остается в двух строках, потому что Developer и Programming образуют разные пары. DISTINCT сравнивает строки целиком.

Пример DISTINCT-запроса в MySQL: условие WHERE

WHERE фильтрует записи до удаления повторов. Запрос выбирает пары клиентов с годовым доходом строго больше 85000.

SELECT DISTINCT Education, Profession
FROM customerdetails
WHERE Yearly_Income > 85000
ORDER BY Education, Profession;
EducationProfession
NULLDeveloper
BachelorsDeveloper
MastersNULL
MastersAnalyst

Условие пропускает 5 строк: CustomerID 1, 2, 4, 7 и 8. Пара Bachelors / Developer повторяется дважды, поэтому после DISTINCT остаются 4 комбинации.

Запись с доходом 85000 не проходит условие > 85000; чтобы включить границу, используйте >= 85000.

Как исключить NULL из выборки

Добавьте условие IS NOT NULL для столбца с пропусками. Запрос вернет только заполненные значения Education.

SELECT DISTINCT Education
FROM customerdetails
WHERE Education IS NOT NULL
ORDER BY Education;
Education
Bachelors
Masters

Запрос возвращает 2 известных значения образования. Для исключения пропусков сразу в двух полях соедините условия через AND.

SELECT DISTINCT Education, Profession
FROM customerdetails
WHERE Education IS NOT NULL
  AND Profession IS NOT NULL
ORDER BY Education, Profession;
EducationProfession
BachelorsDeveloper
BachelorsProgramming
MastersAnalyst

Не сравнивайте NULL через знак равенства. Условия IS NULL и IS NOT NULL ищут пропущенные и заполненные значения.

COUNT(DISTINCT) в SQL: подсчет уникальных значений

COUNT(DISTINCT) считает уникальные значения без вывода их списка. Функция не учитывает NULL, поэтому результат может быть меньше числа строк SELECT DISTINCT.

Подсчет значений одного столбца

SELECT COUNT(DISTINCT Education) AS unique_education
FROM customerdetails;
unique_education
2

Функция считает Bachelors и Masters. Значение NULL она пропускает, поэтому результат равен 2, хотя SELECT DISTINCT Education возвращает 3 строки.

Подсчет уникальных комбинаций нескольких столбцов

MySQL поддерживает COUNT(DISTINCT col1, col2) для подсчета уникальных пар. Комбинация не попадает в счетчик, если хотя бы один аргумент содержит NULL.

SELECT COUNT(DISTINCT Education, Profession) AS unique_pairs
FROM customerdetails;
unique_pairs
3

В счетчик входят Bachelors / Developer, Bachelors / Programming и Masters / Analyst. Пары NULL / Developer и Masters / NULL функция пропускает.

Чтобы посчитать все 5 комбинаций вместе с NULL, сначала получите уникальные строки, затем посчитайте их.

SELECT COUNT(*) AS unique_pairs_including_null
FROM (
    SELECT DISTINCT Education, Profession
    FROM customerdetails
) AS pairs;
unique_pairs_including_null
5

Подзапрос формирует уникальные пары, включая значения NULL. Внешний COUNT(*) считает каждую полученную строку.

DISTINCT или GROUP BY в MySQL

Выбирайте DISTINCT, когда нужен список уникальных значений или комбинаций. GROUP BY используйте, когда нужно вычислить показатели для каждой группы.

Порядок строк результата задавайте явным ORDER BY.

КритерийDISTINCTGROUP BY
Основная задачаУдалить повторы строк результатаСобрать строки в группы для вычислений
Агрегатные функцииСам оператор не вычисляет показатели по группамРаботает с COUNT, SUM, MIN и другими функциями
HAVINGНе фильтрует группы по агрегатамОтбирает группы по вычисленным показателям
Порядок выводаЗадается через ORDER BYЗадается через ORDER BY
План выполненияЗависит от индексов, условий и столбцовЗависит от индексов, условий и агрегатов

Оба запроса вернут уникальные значения Profession.

SELECT DISTINCT Profession
FROM customerdetails
ORDER BY Profession;
Profession
NULL
Analyst
Developer
Programming
SELECT Profession
FROM customerdetails
GROUP BY Profession
ORDER BY Profession;
Profession
NULL
Analyst
Developer
Programming

GROUP BY раскрывает преимущества, когда к группе нужно добавить показатель. HAVING оставит профессии, которые встречаются чаще одного раза.

SELECT Profession, COUNT(*) AS customers_count
FROM customerdetails
GROUP BY Profession
HAVING COUNT(*) > 1
ORDER BY Profession;
Professioncustomers_count
Analyst2
Developer4

GROUP BY создает отдельную группу для NULL. В этом наборе она содержит одну запись, поэтому условие HAVING ее отбрасывает.

Как оценить производительность

Не выбирайте GROUP BY ради предполагаемого выигрыша в скорости. Оптимизатор может построить сходные планы для эквивалентных запросов.

Составной индекс по Education и Profession может помочь выборке уникальных пар. Сравните планы через EXPLAIN на своих данных. Пометка Using temporary показывает использование внутренней временной таблицы, но сам DISTINCT не означает ее обязательное появление.

Когда DISTINCT возвращает не то, что ждали

Состав выбранных столбцов, пропуски NULL и сортировка влияют на результат запроса. Если результат отличается от ожидаемого, определите, какие строки вы считаете повторяющимися. Затем проверьте обработку NULL и правило сортировки.

Добавленный столбец сохраняет повторения

DISTINCT действует на всю выбранную строку. Если добавить уникальный CustomerID, повторения Education не исчезнут. Для одной записи на образование задайте правило выбора, например минимальный идентификатор.

Несколько NULL превращаются в одну строку

При удалении повторов DISTINCT считает значения NULL одинаковыми. Поэтому два пропуска Education дают одну строку результата, а COUNT(DISTINCT Education) пропускает NULL целиком.

ORDER BY использует столбец вне выборки

В запросе с DISTINCT сортировка по невыбранному столбцу может быть неоднозначной. У одного Education могут быть разные доходы, поэтому такой порядок не описывает одну определенную запись.

Если нужно сортировать образования по минимальному доходу, вычислите этот показатель группировкой.

SELECT Education, MIN(Yearly_Income) AS min_income
FROM customerdetails
GROUP BY Education
ORDER BY min_income, Education;
Educationmin_income
NULL70000
Masters80000
Bachelors85000

Добавление дохода в SELECT DISTINCT вернет уникальные сочетания образования и дохода.

Пример SELECT DISTINCT в командной строке MySQL

Клиент MySQL выводит результат в текстовой таблице. Подключитесь к базе командой mysql -u your_user -p company, введите пароль и выполните запрос.

SELECT DISTINCT Education, Profession
FROM customerdetails
ORDER BY Education, Profession;
+-----------+-------------+
| Education | Profession  |
+-----------+-------------+
| NULL      | Developer   |
| Bachelors | Developer   |
| Bachelors | Programming |
| Masters   | NULL        |
| Masters   | Analyst     |
+-----------+-------------+
5 rows in set

В выводе клиента NULL отображает пропущенное значение. Пять строк соответствуют числу уникальных пар из учебной таблицы.

Как выбрать запрос для своей задачи

  • Для списка без повторов используйте SELECT DISTINCT.
  • Для уникальных пар перечислите оба столбца после DISTINCT.
  • Для подсчета значений без NULL используйте COUNT(DISTINCT column).
  • Для подсчета пар вместе с NULL считайте строки DISTINCT-подзапроса через COUNT(*).
  • Для показателей по группам используйте GROUP BY и агрегатные функции.
  • Для полной записи на каждое значение задайте правило выбора через MIN или ROW_NUMBER().

Совет от нашей редакции: перед добавлением DISTINCT определите, какие столбцы образуют повтор. Небольшой набор с дублями и NULL, как в учебной таблице, быстро показывает ошибку в логике запроса.

Комментарии

Оставьте свой комментарий
Пока никто не оставил комментариев