Как найти дубликаты в 2 столбцах, а не в 1

У меня есть таблица базы данных MySQL с двумя интересующими меня столбцами. По отдельности каждый из них может иметь дубликаты, но никогда не должно быть дубликата ОБЕИХ, имеющих одинаковое значение.

stone_idмогут быть дубликаты при условии, что каждое upshargeназвание отличается, и наоборот. Но скажем, например, stone_id= 412 и upcharge_title= "сапфир", что комбинация должна встречаться только один раз.

Хорошо:

stone_id = 412 upcharge_title = "sapphire"
stone_id = 412 upcharge_title = "ruby"

Это НЕ нормально:

stone_id = 412 upcharge_title = "sapphire"
stone_id = 412 upcharge_title = "sapphire"

Есть ли запрос, который найдет дубликаты в обоих полях? И если возможно, есть ли способ настроить мою базу данных, чтобы этого не допустить?

Я использую MySQL версии 4.1.22

Вы должны установить составной ключ между двумя полями. Это потребует уникальных Stone_id и upcharge_title для каждой строки.

Что касается поиска существующих дубликатов, попробуйте следующее:

select   stone_id,
         upcharge_title,
         count(*)
from     your_table
group by stone_id,
         upcharge_title
having   count(*) > 1

Я счел полезным добавить индекс unqiue с помощью «ALTER IGNORE», который удаляет дубликаты и обеспечивает выполнение уникальных записей, которые звучат так, как вы хотели бы. Итак, синтаксис будет таким:

ALTER IGNORE TABLE `table` ADD UNIQUE INDEX(`id`, `another_id`, `one_more_id`);

Это эффективно добавляет уникальное ограничение, означающее, что у вас никогда не будет повторяющихся записей, а IGNORE удаляет существующие дубликаты.

Вы можете узнать больше о ALTER IGNORE здесь: http://mediakey.dk/~cc/mysql-remove-duplicate-entries/

Обновление: @Inquisitive сообщил мне, что это может не работать в версиях MySql> 5.5:

Он не работает в MySQL> 5.5 и в таблице InnoDB, а также в Percona из-за их функции быстрого создания индекса InnoDB [ http://bugs.mysql.com/bug.php?id=40344] . В этом случае сначала запустите, set session old_alter_table=1а затем приведенная выше команда будет работать нормально

Обновление - ALTER IGNOREудалено в 5.7

Из документов

Начиная с MySQL 5.6.17, предложение IGNORE устарело, и его использование генерирует предупреждение. IGNORE удален в MySQL 5.7.

Один из разработчиков MySQL предлагает две альтернативы :

• Сгруппируйте по уникальным полям и удалите, как показано выше
• Создайте новую таблицу, добавьте уникальный индекс, используйте INSERT IGNORE, например:

CREATE TABLE duplicate_row_table LIKE regular_row_table;
ALTER TABLE duplicate_row_table ADD UNIQUE INDEX (id, another_id);
INSERT IGNORE INTO duplicate_row_table SELECT * FROM regular_row_table;
DROP TABLE regular_row_table;
RENAME TABLE duplicate_row_table TO regular_row_table;

Но в зависимости от размера вашего стола это может оказаться непрактичным.

Вы можете найти такие дубликаты ..

Select
    stone_id, upcharge_title, count(*)
from 
    particulartable
group by 
    stone_id, upcharge_title
having 
    count(*) > 1

Чтобы найти дубликаты:

select stone_id, upcharge_title from tablename group by stone_id, upcharge_title having count(*)>1

Чтобы избежать этого в будущем, создайте составной уникальный ключ для этих двух полей.

Между прочим, составное уникальное ограничение для таблицы в первую очередь предотвратило бы это.

ALTER TABLE table
    ADD UNIQUE(stone_id, charge_title)

(Это действительный T-SQL. Не уверен насчет MySQL.)

это сообщение SO помогло мне, но я тоже хотел знать, как удалить и сохранить одну из строк ... вот PHP-решение для удаления повторяющихся строк и сохранения одной (в моем случае было всего 2 столбца, и он находится в функция очистки повторяющихся ассоциаций категорий)

$dupes = $db->query('select *, count(*) as NUM_DUPES from PRODUCT_CATEGORY_PRODUCT group by fkPRODUCT_CATEGORY_ID, fkPRODUCT_ID having count(*) > 1');
if (!is_array($dupes))
    return true;
foreach ($dupes as $dupe) {
    $db->query('delete from PRODUCT_CATEGORY_PRODUCT where fkPRODUCT_ID = ' . $dupe['fkPRODUCT_ID'] . ' and fkPRODUCT_CATEGORY_ID = ' . $dupe['fkPRODUCT_CATEGORY_ID'] . ' limit ' . ($dupe['NUM_DUPES'] - 1);
}

(ограничение NUM_DUPES - 1) - это то, что сохраняет одну строку ...

Спасибо всем