Поиск и удаление повторений
Excel для Microsoft 365 Excel 2021 Excel 2019 Excel 2016 Excel 2013 Excel 2010 Excel 2007 Excel Starter 2010 Еще…Меньше
В некоторых случаях повторяющиеся данные могут быть полезны, но иногда они усложняют понимание данных. Используйте условное форматирование для поиска и выделения повторяющихся данных. Это позволит вам просматривать повторения и удалять их по мере необходимости.
-
Выберите ячейки, которые нужно проверить на наличие повторений.
Примечание: В Excel не поддерживается выделение повторяющихся значений в области “Значения” отчета сводной таблицы.
-
На вкладке Главная выберите Условное форматирование > Правила выделения ячеек > Повторяющиеся значения.
-
В поле рядом с оператором значения с выберите форматирование для применения к повторяющимся значениям и нажмите кнопку ОК.
Удаление повторяющихся значений
При использовании функции Удаление дубликатов повторяющиеся данные удаляются безвозвратно. Чтобы случайно не потерять необходимые сведения, перед удалением повторяющихся данных рекомендуется скопировать исходные данные на другой лист.
-
Выделите диапазон ячеек с повторяющимися значениями, который нужно удалить.
-
На вкладке Данные нажмите кнопку Удалить дубликаты и в разделе Столбцы установите или снимите флажки, соответствующие столбцам, в которых нужно удалить повторения.
Например, на данном листе в столбце “Январь” содержатся сведения о ценах, которые нужно сохранить.
Поэтому флажок Январь в поле Удаление дубликатов нужно снять.
-
Нажмите кнопку ОК.
Примечание: Количество повторяющихся и уникальных значений, заданных после удаления, может включать пустые ячейки, пробелы и т. д.
Дополнительные сведения
Нужна дополнительная помощь?
Нужны дополнительные параметры?
Изучите преимущества подписки, просмотрите учебные курсы, узнайте, как защитить свое устройство и т. д.
В сообществах можно задавать вопросы и отвечать на них, отправлять отзывы и консультироваться с экспертами разных профилей.
При совместной работе с таблицами Excel или большом числе записей накапливаются дубли строк. Ста…
При совместной работе с
таблицами Excel или большом числе записей
накапливаются дубли строк. Статья
посвящена тому, как выделить
повторяющиеся значения в Excel,
удалить лишние записи или сгруппировать,
получив максимум информации.
Поиск
одинаковых значений в Excel
Выберем
одну из ячеек в таблице. Рассмотрим, как
в Экселе найти повторяющиеся значения,
равные содержимому ячейки, и выделить
их цветом.
На
рисунке – списки писателей. Алгоритм
действий следующий:
- Выбрать
ячейку I3
с записью «С. А. Есенин». - Поставить
задачу – выделить цветом ячейки с
такими же записями. - Выделить
область поисков. - Нажать
вкладку «Главная». - Далее
группа «Стили». - Затем
«Условное форматирование»; - Нажать
команду «Равно».
- Появится
диалоговое окно:
- В
левом поле указать ячейку с I2,
в которой записано «С. А. Есенин». - В
правом поле можно выбрать цвет шрифта. - Нажать
«ОК».
В
таблицах отмечены цветом ячейки, значение
которых равно заданному.
Несложно
понять, как
в Экселе найти одинаковые значения в
столбце.
Просто выделить перед поиском нужную
область – конкретный столбец.
Ищем в таблицах Excel
все повторяющиеся значения
Отметим
все неуникальные записи в выделенной
области. Для этого нужно:
- Зайти
в группу «Стили». - Далее
«Условное форматирование». - Теперь
в выпадающем меню выбрать «Правила
выделения ячеек». - Затем
«Повторяющиеся значения».
- Появится
диалоговое окно:
- Нажать
«ОК».
Программа
ищет повторения во всех столбцах.
Если
в таблице много неуникальных записей,
то информативность такого поиска
сомнительна.
Удаление одинаковых значений
из таблицы Excel
Способ
удаления неуникальных записей:
- Зайти
во вкладку «Данные». - Выделить
столбец, в котором следует искать
дублирующиеся строки. - Опция
«Удалить дубликаты».
В
результате получаем список, в котором
каждое имя фигурирует только один раз.
Список
с уникальными значениями:
Расширенный фильтр: оставляем
только уникальные записи
Расширенный
фильтр – это инструмент для получения
упорядоченного списка с уникальными
записями.
- Выбрать
вкладку «Данные». - Перейти
в раздел «Сортировка и фильтр». - Нажать
команду «Дополнительно»:
- В
появившемся диалоговом окне ставим
флажок «Только уникальные записи». - Нажать
«OK»
– уникальный список готов.
Поиск дублирующихся значений
с помощью сводных таблиц
Составим
список уникальных строк, не теряя данные
из других столбцов и не меняя исходную
таблицу. Для этого используем инструмент
Сводная таблица:
Вкладка
«Вставка».
Пункт
«Сводная таблица».
В
диалоговом окне выбрать размещение
сводной таблицы на новом листе.
В
открывшемся окне отмечаем столбец, в
котором содержатся интересующие нас
значений.
Получаем
упорядоченный список уникальных строк.
Здесь вы найдете больше сотни моих статей по самым лучшим, полезным и эффективным приемам, трюкам и способам работы в Microsoft Excel. Пройдитесь по полному списку или сначала выберите раздел слева и – вперед!
![]()
Дубликаты
Дубликаты внутри ячейки
Как бороться с повторами в тексте внутри ячейки: обнаруживать их, выделять цветом или удалять. С помощью формул, макросов или запросов Power Query.
Генератор фраз из заданных фрагментов
Как быстро сгенерировать все возможные фразы, состоящие из заданных наборов слов в любом порядке, используя Декартово произведение множеств с помощью формул или Power Query.
Сравнение двух таблиц
Как сравнить между собой две таблицы (прайс-листа) и наглядно отобразить отличия между ними – добавленные и удаленные товары, изменение цены и т.д. Разбор 3 способов: с помощью функции ВПР (VLOOKUP), сводной таблицей и через надстройку Power Query.
Генерация дубликатов строк
Как размножить некоторые строки в таблице, создав для них заданное количество дубликатов. Разбор двух способов: “в лоб” макросом и красиво – через Power Query.
Поиск совпадений в двух списках
Как подсчитать совпадения в двух диапазонах данных и вывести их отдельным списком. Разбор трех способов: формулами, макросами и с помощью слияния запросов в Power Query.
Слияние двух списков без дубликатов
Как соединить два списка, чтобы в итоге получить один обобщенный список, причем без повторений. Подробный разбор нескольких способов (вручную, формулами, через Power Query).
Поиск и подсчет самых частых значений
Как найти самые часто встречающиеся текстовые и числовые значения в большом списке разными способами (сводные таблицы с группировкой, функции ЧАСТОТА и МОДА, формулой массива и т.д.)
Поиск отличий в двух списках
Несколько способов решения задачи сравнения двух диапазонов данных и выделения отличий или совпадений между ними.
Запрет ввода повторяющихся значений
Как запретить пользователю вводить значения, которые уже присутствуют в списке, т.е. обеспечить ввод строго уникальных (неповторяющихся) значений?
- Найти и выделить цветом дубликаты в Excel
- Формула проверки наличия дублей в диапазонах
- Внутри диапазона
- !SEMTools, поиск дублей внутри диапазона
- Найти дубли ячеек в столбце, кроме первого
- Найти в столбце дубли ячеек, включая первый
- Найти дубли в столбце без учета лишних пробелов
Найти повторяющиеся значения в столбцах Excel — на поверку не такая уж и простая задача. Есть пара встроенных инструментов, таких как условное форматирование и инструмент удаления дубликатов, но они не всегда подходят для решения реальных задач.
Поиск дублей в Excel может быть очень разным, и, в зависимости от вводных, производиться тоже будет по-разному.
Ключевых моментов несколько:
- Какие конкретно повторяющиеся значения — повторы слов в ячейках, сами повторяющиеся ячейки или повторяющиеся строки?
- Если ячейки, то:
- Какие ячейки мы готовы считать дубликатами — все кроме первой или включая ее?
- Считаем ли дублями строки, отличающиеся только пробелами до/после слов или лишними пробелами между словами?
- Где мы будем искать дубли — в одном столбце, в двух столбцах или в нескольких?
- А может, нам нужно найти неявные дубли?
Сначала рассмотрим простые примеры.
Для выделения дубликатов ячеек подходит инструмент условное форматирование. В процедуре есть ряд готовых правил, в том числе и для повторяющихся значений.
Найти инструмент можно на вкладке программы “Главная”:
Процедура интуитивно понятна:
- Выделяем диапазон, в котором хотим найти дубликаты.
- Вызываем процедуру.
- Выбираем форматирование для отобранных ячеек (есть предустановленные форматы или же можно задать свой вариант).
Важно понимать, что процедура находит дубликаты внутри всего диапазона и поэтому может не быть применима для сравнения двух столбцов. Достаточно иметь дубликаты внутри одного столбца — и процедура подсветит их оба, хотя во втором их не будет:
Данное поведение является неочевидным, и об этом факте часто забывают. Если дальше вы планируете удалять повторы, можете потерять оба варианта в одном столбце.
Как избежать подобной ситуации, если хочется найти именно дубли в другом столбце? Простейшее решение: удалить дубли внутри каждого столбца перед применением условного форматирования.
Но есть и другие решения. О них дальше.
Формула проверки наличия дублей в диапазонах
Использование собственной формулы для проверки дубликатов в списке или диапазоне имеет ряд преимуществ, единственная задача — составление такой формулы. Но её я возьму на себя.
Внутри диапазона
Чтобы проверить, есть ли в диапазоне повторяющиеся значения, можно использовать такую формулу массива:
=СУММПРОИЗВ(СЧЁТЕСЛИ(диапазон;тот-же-диапазон)-1)>0
Так выглядит на практике применение формулы:
В чем же преимущество такой формулы, ведь она полностью дублирует опцию условного форматирования, спросите вы.
А дело все в том, что формулу несложно видоизменить и улучшить.
Например, можно улучшить эффективность формулы, добавив в нее функцию СЖПРОБЕЛЫ .Это позволит находить дубликаты, отличающиеся незаметными лишними пробелами:
=СУММПРОИЗВ(--(СЖПРОБЕЛЫ(ячейка)=СЖПРОБЕЛЫ(диапазон)))>1
Эта формула слегка отличается, так как проверяет встречаемость в диапазоне значения одной ячейки.
Если внести ее как правило отбора условного форматирования, она позволит выявлять неявные дубли. Ниже демонстрация того, как работает формула:
Обратите внимание на один момент в этой демонстрации: диапазон закреплен ($A$1:$B$4), а искомая ячейка (A1) нет. Именно это позволяет условному форматированию находить все дубликаты в диапазоне.
!SEMTools, поиск дублей внутри диапазона
Когда-то я потратил немало времени, пользуясь перечисленными выше методами поиска повторяющихся значений. Все они мне не нравились. Причина была одна: это попросту медленно. Поэтому я решил сделать отдельные процедуры для поиска и удаления дубликатов в Excel в своей надстройке.
Давайте покажу, как они работают.
Найти дубли ячеек в столбце, кроме первого
Процедура позволяет выделить все вторые, третьи и т.д. повторяющиеся значения в столбце.
Найти в столбце дубли ячеек, включая первый
Зачастую нужно найти в столбце все повторяющиеся ячейки, включая первую, для того, чтобы далее отфильтровать их все.
Найти дубли в столбце без учета лишних пробелов
Если мы считаем дубликатами фразы, отличающиеся количеством пробелов между словами или после, наша задача — сначала избавиться от лишних пробелов, и далее произвести тот же поиск дубликатов.
Для первой операции есть отдельный инструмент «Удалить лишние пробелы»:
Найти повторяющиеся значения в Excel и решить сотни других задач поможет надстройка !SEMTools.
Скачайте прямо сейчас и убедитесь сами!
Смотрите также:
- Удалить дубли без смещения строк;
- Удалить неявные дубли;
- Найти повторяющиеся слова в Excel;
- Удалить повторяющиеся слова внутри ячеек.
() translation by (you can also view the original English article)
Если вы пользователь Microsoft Excel, то возможно вам приходилось работать с таблицами, необработанными данными. В ваших данных могил содержаться повторения. Обычно, нет времени на то, чтобы просмотреть просмотреть документ строчку за строчкой и удалить дубликаты вручную.
Хорошей новостью является то, что в Microsoft, предусмотрели необходимость в такой функции в Excell. Функция Удалить Дубликаты, поможет вам быстро найти повторяющиеся данные в таблицах и удалить их.
В этом уроке, я научу вас использовать функцию Удалить Дубликаты. Вы узнаете, как использовать эту функцию, чтобы удалить повторяющиеся строки в таблице. Я дам вам несколько советов, как правильно использовать эту функцию, что вы удалили только действительно повторяющиеся строки.
Что бы вам было удобнее следовать инструкциям урока, я рекомендую вам загрузить файлы примеров. Вы можете найти ссылку голубого цвета Download Attachment справа от текста этого урока или загрузить бесплатный файл- электронную таблицу прямо здесь.
Начнем Работу с Функцией Удалить Дубликаты в Excel
Если вы используете файл примеров, зайдите во вкладку Order List, данные в которой, пригодятся нам для этой части урока.
Давайте начнем с простого примера по удалению повторяющихся строк в Excel. В электронной таблице ниже, вы можете видеть несколько повторяющихся строк. Нам нужно удалить эти дубликаты, чтобы наш документ был проще.
1. Выделите Ваши Данные
Для того, чтобы удалить дубликаты, первое, что вы должны сделать – это выделить ваши данные. Если над вашими данными в таблице, нет других, то вы можете выделить целиком столбцы, использовав верхнюю часть электронной таблицы. В данном случае я собираюсь выделить данные в таблице, чтобы удалить дубликаты.
2. Найдите Функцию в Excel Для Удаления Дубликатов
Функция Удалить Дубликаты, находится во вкладке Данные. Более точно, вы найдете кнопку Удалить Дубликаты в разделе Работа с Данными, в этой вкладке. После того как вы найдете кнопку, просто нажмите на нее для запуска мастера удаления.
3. Выберите Критерии для Удаления Дубликатов
После того, как вы щелкните на кнопке Удаление Дубликатов, появится новое окно с чекбоксами. Этот лист, предлагает вам задать, какие поля нужно будет проверять на наличие повторов. По умолчанию все отмечено.
Для данного примера, не делайте каких-либо изменений в этом окне. Нажмите ОК, чтобы удалить повторы в таблице.
4. Оцените Результаты
После того, как вы нажмете ОК, Excel удалит повторы в таблице, и выдаст вам сообщение, что он удалил. Я настоятельно рекомендую вам проверять результат, когда вы работаете с данными.
Назначение Удаления Дубликатов – удалять повторяющиеся строки, но нужно быть аккуратным в использовании этой функции. Вы всегда можете отменить последний шаг, если вы что-то сделали неправильно.
Быстрое Удаление Дубликатов – Видео Урок
Посмотрите наш видеоурок ниже, в котором показан процесс удаления дубликатов в Excel. Продолжайте читать это урок дальше, чтобы еще больше узнать о функции Удалить Дубликаты, и дополнительных техниках, которые позволять вам найти и удалить повторы с наибольшей эффективностью.
Удаление Дубликатов по Нескольким Критериям
Давайте вернемся, к казалось бы, простому меню, которое у нас выскакивает при выделенных данных. В этом списке представлены все колонки нашей Excel таблицы. Вы можете заметить, что каждой колонке соответствует свой чекбокс.
Зачем нам нужно это меню? Главным образом, оно позволят нам уточнить для Excel, каким образом будут удалять повторы. Давайте рассмотрим пример:
На скриншоте выше, я опять выделили данные и нажал на кнопку Удалить Дубликаты. Затем, я снял выделения в чекбоксах, за исключением одного – “Chef“. Результат показан в нижней половине картинки. Заметьте, что наша таблица уменьшилась всего на три строки, на те в которых повторялось имя шефа.
Когда мы отмечаем только чекбокс с названием “Chef”, мы просим Excel, искать повторы только в колонке Chef. Первый раз, как он видит повторяющееся имя в колонке chefe, то он удаляет целую строку, в независимости от того, чем отличаются другие колонки.
Будьте Осторожны Удаляя Повторяющиеся Строки в Excell
И вот почему так важно соблюдать осторожность при использовании функции “Удалить Дубликаты”. Если вы оставите удаление по одному фактору, то вы можете случайно удалить данные, которые на самом деле нужны.
Совет: окошки, которые вы оставляете отмеченными в окне Удаления Дубликатов – это комбинации по которым Excel будет проверять повторы. Оставляйте отмеченными несколько чекбоксов, для более аккуратного удаления.
Часто, одной колонки не достаточно, что бы достоверно судить о наличии повторов. Если у вас есть онлайн магазин, и вы ведете базу данных по покупателям, велики шансы, что среди ваши данных есть более чем одно упоминание покупателя “Mike Smith”. Вы должны отмечать несколько колонок, для правильного удаления дубликатов, такие как имя покупателя, его адрес или дата регистрации. Вот почему мы отмечаем несколько колонок.
Если вы хотите, чтобы удаление повторов было более точным, оставляйте отмеченными несколько чекбоксов (колонок), когда используете функцию Удалить Дубликаты. И кончено же, всегда дважды проверьте ваши данные, после использования этой функции.
Когда Нужно Быть Избирательным
Если вы используете таблицу с примерами, откройте вкладку Duplicate Shifts, для этой части урока.
Вы можете задаться вопросом: а может быть ситуация, где вам действительно придется снять галочки с каких-то окошек? Конечно может. Давайте рассмотрим следующий пример.
В таблице ниже у меня есть данные о рабочей смене сотрудников, и я случайно загрузил данные два раза. Для каждого сотрудника есть время прихода и ухода, и плюс к этому есть колонка с датой, когда я загрузил отчет. Присутствуют повторы для каждой строки, за исключением одной колонки F, где стоит Дата Загрузки Отчета.
Давайте подумаем: если я отмечу все колонки для поиска повторов, Excel не найдет дубликатов. Но, я на самом деле хочу удалить повторы в рабочих сменах. Мне на самом деле не важно, в какой день я загрузил отчет, поэтому я должен исключить колонку F, при оценке повторяющихся строк.
Эти строки не совсем повторы – в них не все повторяется, но мне нужно удалить дубликаты, основываясь на данных в колонках A-E.
Что бы сделать это, я снова выделяю таблицу и снова запускаю функцию Удалить Дубликаты. На этот раз, я оставил отмеченными все чекбоксы, за исключением Report Download Date (дата загрузки отчета).
Вы можете представить себе это таким образом: те чекбоксы которые вы оставили отмеченными, соответствуют тем колонкам, которые Excel стал рассматривать в ходе поиска повторов. Если есть особые колонки, в которых не надо искать дубликаты, то снимите соответствующие галочки в окне Удалить Дубликаты.
Используйте Удалить Дубликаты для Пустых Строк
Один из любимых моих вариантов использования функции Удаления Дубликатов – это избавления от пустых строк в моих данных.
Для того чтобы удалить пустые строки, подчеркните данные в таблице. Затем, Удалите Дубликаты и оставьте все галочки отмеченными. Excel удалит все пустые строки, за исключением первой! Так как технически первая пустая строке не является повтором (она ведь оригинал), то Excel оставляет ее нетронутой. Ее вам придется удалить вручную.
Помните, при этом, что у вас будут удалены все повторяющиеся строки, а не только пустые.
Подводим Итоги и Продолжаем Обучение
Удаление дубликатов в таблицах Excel – это существенный навык при работе с данными. Когда вы работаете с набором данных, вам сложно найти время, для того чтобы вручную искать повторы и удалять их. Вот почему, стоит научиться пользоваться функцией “Удалить Дубликаты” в Excel.
Вот еще два других урока, по работе с таблицами, которые помогут вам развить ваши навыки работы в программе Excel.
- Официальная документация Microsoft по работе с функцией Удалить Дубликаты – очень полезна, и это второй по важности источник, к которому вам стоит обратиться.
- Урок Bob Filsser – 12 Техник для Уверенных Пользователей содержит краткую информацию по использованию функции Удаление Дубликатов, а так же в нем рассказывается о других важных техниках, которые нужны при работе с данными.
Как вы используете функцию Удалить Дубликаты при работе с данными в таблице Excel? Если у вас возникнут какие-то вопросы, обязательно пишите в комментариях и мы вам поможем.
