Как объединить строки строкового поля в запросе PostgreSQL 'group by'?

351

Я ищу способ объединить строки поля в группе по запросу. Так, например, у меня есть таблица:

ID   COMPANY_ID   EMPLOYEE
1    1            Anna
2    1            Bill
3    2            Carol
4    2            Dave

и я хотел сгруппировать по company_id, чтобы получить что-то вроде:

COMPANY_ID   EMPLOYEE
1            Anna, Bill
2            Carol, Dave

В mySQL есть встроенная функция для этого group_concat

Парень с
источник
1
Ответ Маркуса Деринга технически лучше.
pstanton
@pstanton, ответ Деринга только лучше для 8.4 и ниже.
Джаред Бек
Этот вопрос лучше подходит для dba.stackexchange.com .
Дэйв Джарвис
Теперь это должен быть правильный ответ stackoverflow.com/a/47638417/243233
Jus12

Ответы:

542

PostgreSQL 9.0 или более поздняя версия:

В последних версиях Postgres (с конца 2010 года) есть string_agg(expression, delimiter)функция, которая будет выполнять именно то, о чем спрашивался вопрос, даже позволяя указать строку разделителя:

SELECT company_id, string_agg(employee, ', ')
FROM mytable
GROUP BY company_id;

В Postgres 9.0 также добавлена ​​возможность указывать ORDER BYпредложение в любом агрегированном выражении ; в противном случае порядок не определен. Теперь вы можете написать:

SELECT company_id, string_agg(employee, ', ' ORDER BY employee)
FROM mytable
GROUP BY company_id;

Или действительно:

SELECT string_agg(actor_name, ', ' ORDER BY first_appearance)

PostgreSQL 8.4 или более поздняя версия:

PostgreSQL 8.4 (в 2009 году) представил функцию агрегирования,array_agg(expression) которая объединяет значения в массив. Затем array_to_string()можно использовать, чтобы дать желаемый результат:

SELECT company_id, array_to_string(array_agg(employee), ', ')
FROM mytable
GROUP BY company_id;

string_agg для версий до 8.4:

В случае, если кто-то сталкивается с этим в поисках прокладки совместимости для баз данных до 9.0, можно реализовать все, string_aggкромеORDER BY пункта.

Таким образом, с приведенным ниже определением это должно работать так же, как в 9.x Postgres DB:

SELECT string_agg(name, '; ') AS semi_colon_separated_names FROM things;

Но это будет синтаксическая ошибка:

SELECT string_agg(name, '; ' ORDER BY name) AS semi_colon_separated_names FROM things;
--> ERROR: syntax error at or near "ORDER"

Протестировано на PostgreSQL 8.3.

CREATE FUNCTION string_agg_transfn(text, text, text)
    RETURNS text AS 
    $$
        BEGIN
            IF $1 IS NULL THEN
                RETURN $2;
            ELSE
                RETURN $1 || $3 || $2;
            END IF;
        END;
    $$
    LANGUAGE plpgsql IMMUTABLE
COST 1;

CREATE AGGREGATE string_agg(text, text) (
    SFUNC=string_agg_transfn,
    STYPE=text
);

Пользовательские варианты (все версии Postgres)

До 9.0 не было встроенной агрегатной функции для объединения строк. Простейшая пользовательская реализация ( предложенная Вайда Габо в этом посте списка рассылки , среди многих других) заключается в использовании встроенной textcatфункции (которая скрывается за ||оператором):

CREATE AGGREGATE textcat_all(
  basetype    = text,
  sfunc       = textcat,
  stype       = text,
  initcond    = ''
);

Вот CREATE AGGREGATEдокументация.

Это просто склеивает все строки без разделителя. Чтобы вставить «,» между ними, не имея его в конце, вы можете создать собственную функцию конкатенации и заменить ее на «textcat» выше. Вот один, который я собрал и протестировал на 8.3.12:

CREATE FUNCTION commacat(acc text, instr text) RETURNS text AS $$
  BEGIN
    IF acc IS NULL OR acc = '' THEN
      RETURN instr;
    ELSE
      RETURN acc || ', ' || instr;
    END IF;
  END;
$$ LANGUAGE plpgsql;

Эта версия будет выводить запятую, даже если значение в строке равно нулю или пусто, поэтому вы получите такой вывод:

a, b, c, , e, , g

Если вы предпочитаете удалить лишние запятые для вывода этого:

a, b, c, e, g

Затем добавьте ELSIFпроверку к функции следующим образом:

CREATE FUNCTION commacat_ignore_nulls(acc text, instr text) RETURNS text AS $$
  BEGIN
    IF acc IS NULL OR acc = '' THEN
      RETURN instr;
    ELSIF instr IS NULL OR instr = '' THEN
      RETURN acc;
    ELSE
      RETURN acc || ', ' || instr;
    END IF;
  END;
$$ LANGUAGE plpgsql;
Neall
источник
1
Мне пришлось S & R varchar для текста (последняя стабильная версия pgsql), но это здорово!
Кев
1
Вы можете написать функцию только на SQL, что проще для установки (plpgsql должен быть установлен суперпользователем). Смотрите мой пост для примера.
bortzmeyer
11
«Нет встроенной агрегатной функции для объединения строк» ​​- почему бы вам не использовать array_to_string(array_agg(employee), ',')?
pstanton
2
+1 для функции PostgreSQL 9.0. Если вам нужно беспокоиться о предварительной версии 9.0, ответ Маркуса будет лучше.
Брэд Кох
7
Обратите внимание, что последние версии Postgres также допускают Order Byпредложение внутри агрегатной функции, напримерstring_agg(employee, ',' Order By employee)
IMSoP
99

Как насчет использования встроенных в Postgres функций массива? По крайней мере, на 8.4 это работает из коробки:

SELECT company_id, array_to_string(array_agg(employee), ',')
FROM mytable
GROUP BY company_id;
Маркус Деринг
источник
к сожалению, это не работает для нас на Greenplum (v8.2). +1 все равно
ekkis
У меня отлично работает на Greenplum 4.3.4.1 (построен на PostgreSQL 8.2.15).
PhilHibbs
19

Начиная с PostgreSQL 9.0 вы можете использовать агрегатную функцию с именем string_agg . Ваш новый SQL должен выглядеть примерно так:

SELECT company_id, string_agg(employee, ', ')
FROM mytable
GROUP BY company_id;

dirbacke
источник
13

Я не претендую на кредит за ответ, потому что нашел его после некоторого поиска:

Чего я не знал, так это того, что PostgreSQL позволяет вам определять свои собственные агрегатные функции с помощью CREATE AGGREGATE.

Этот пост в списке PostgreSQL показывает, насколько просто создать функцию, которая выполняет то, что требуется:

CREATE AGGREGATE textcat_all(
  basetype    = text,
  sfunc       = textcat,
  stype       = text,
  initcond    = ''
);

SELECT company_id, textcat_all(employee || ', ')
FROM mytable
GROUP BY company_id;
Парень с
источник
7

Как уже упоминалось, создание собственной агрегатной функции является правильным решением. Вот моя агрегатная функция конкатенации (вы можете найти подробности на французском ):

CREATE OR REPLACE FUNCTION concat2(text, text) RETURNS text AS '
    SELECT CASE WHEN $1 IS NULL OR $1 = \'\' THEN $2
            WHEN $2 IS NULL OR $2 = \'\' THEN $1
            ELSE $1 || \' / \' || $2
            END; 
'
 LANGUAGE SQL;

CREATE AGGREGATE concatenate (
  sfunc = concat2,
  basetype = text,
  stype = text,
  initcond = ''

);

И затем используйте это как:

SELECT company_id, concatenate(employee) AS employees FROM ...
bortzmeyer
источник
5

Этот последний фрагмент списка объявлений может быть интересен, если вы будете обновляться до 8.4:

До тех пор, пока 8.4 не выйдет с суперэффективной нативной, вы можете добавить функцию array_accum () в документации PostgreSQL для свертывания любого столбца в массив, который затем может быть использован кодом приложения или объединен с array_to_string () для форматирования это как список:

http://www.postgresql.org/docs/current/static/xaggr.html

Я бы сослался на документы по разработке 8.4, но они пока еще не перечислили эту функцию.

Кев
источник
5

В продолжение ответа Кева, используя документы Postgres:

Сначала создайте массив элементов, затем используйте встроенную array_to_stringфункцию.

CREATE AGGREGATE array_accum (anyelement)
(
 sfunc = array_append,
 stype = anyarray,
 initcond = '{}'
);

select array_to_string(array_accum(name),'|') from table group by id;
Брэд Кох
источник
5

Еще раз повторяем использование пользовательской агрегатной функции конкатенации строк: вам нужно помнить, что оператор select будет размещать строки в любом порядке, поэтому вам нужно будет выполнить дополнительный выбор в операторе from с предложением order by , и затем внешний выбор с предложением group by для агрегирования строк, таким образом:

SELECT custom_aggregate(MY.special_strings)
FROM (SELECT special_strings, grouping_column 
        FROM a_table 
        ORDER BY ordering_column) MY
GROUP BY MY.grouping_column
Брэд Кох
источник
3

Я нашел эту документацию PostgreSQL полезной: http://www.postgresql.org/docs/8.0/interactive/functions-conditional.html .

В моем случае я искал простой SQL для конкатенации поля с квадратными скобками, если поле не пустое.

select itemid, 
  CASE 
    itemdescription WHEN '' THEN itemname 
    ELSE itemname || ' (' || itemdescription || ')' 
  END 
from items;

источник
2

Используйте STRING_AGGфункцию для PostgreSQL и Google BigQuery SQL :

SELECT company_id, STRING_AGG(employee, ', ')
FROM employees
GROUP BY company_id;
Валентин Подкаменный
источник
0

В соответствии с версией PostgreSQL 9.0 и выше вы можете использовать агрегатную функцию, называемую string_agg. Ваш новый SQL должен выглядеть примерно так:

SELECT company_id, string_agg(employee, ', ')
    FROM mytable GROUP BY company_id;
Gobinath
источник
0

Вы также можете использовать функцию форматирования. Который также может неявно заботиться о преобразовании типов text, int и т. Д. Сам по себе.

create or replace function concat_return_row_count(tbl_name text, column_name text, value int)
returns integer as $row_count$
declare
total integer;
begin
    EXECUTE format('select count(*) from %s WHERE %s = %s', tbl_name, column_name, value) INTO total;
    return total;
end;
$row_count$ language plpgsql;


postgres=# select concat_return_row_count('tbl_name','column_name',2); --2 is the value
Сандип Дебнатх
источник
1
Как это связано с использованием агрегата для объединения строковых значений?
a_horse_with_no_name
0

Я использую Jetbrains Rider, и было хлопотно копировать результаты из приведенных выше примеров для повторного выполнения, потому что казалось, что все это обернуто в JSON. Это объединяет их в одно утверждение, которое было легче выполнить

select string_agg('drop table if exists "' || tablename || '" cascade', ';') 
from pg_tables where schemaname != $$pg_catalog$$ and tableName like $$rm_%$$
Дэмиен Сойер
источник
0

Если вы используете Amazon Redshift, где string_agg не поддерживается, попробуйте использовать listagg.

SELECT company_id, listagg(EMPLOYEE, ', ') as employees
FROM EMPLOYEE_table
GROUP BY company_id;
Gapp
источник