Amazon Redshift расширила строки SUPER до 16 миллионов байт — после явного включения
Новый предел относится к строковым значениям и операциям в памяти. Он не превращает столбец VARCHAR(MAX) в таблице в поле на 16 миллионов байт.

Большой документ больше не обязательно делить заранее
AWS 6 ноября объявила увеличение максимального размера отдельных строк в типе SUPER в Amazon Redshift до 16 миллионов байт. Ранее предел составлял 65 535 байт. Новая возможность рассчитана, в частности, на длинные документы, условия договоров и другие тексты, которые поступают вместе с полуструктурированными данными и должны участвовать в последующей аналитике.
Для загрузки названы JSON, Parquet, TEXT и CSV. AWS также перечисляет операции JSON_PARSE, CONCAT и LISTAGG, которые могут принимать и возвращать более длинные строки при включённой возможности. Это расширяет допустимый размер значения, но не является обещанием ускорения любого запроса. Одинаковая операция над существенно большим текстом всё равно требует соответствующих ресурсов и проверки конкретного рабочего сценария.
Параметр подключения важнее номера новости
В документации возможность связана с параметром enable_large_strings_opt_in. Значение Yes включает новый предел строк SUPER и расширенные строковые операции в памяти. Значение No сохраняет ограничение 65 535 байт. Для подготовленного кластера применение настройки требует перезагрузки, поэтому анонс нельзя воспринимать как незаметное изменение всех уже работающих баз без действий администратора.
Состояние можно проверить функцией is_large_string_enabled(). Документ отдельно описывает особенности сброса: после явного выбора Yes или No обычный ResetClusterParameterGroup не возвращает параметр к первоначальному неустановленному состоянию. Это не инструкция переключать действующую базу ради новости. Настройка влияет на поведение SQL-операций, поэтому сначала нужны понимание зависимых запросов и обычный для организации порядок изменения конфигурации.
VARCHAR в выражении и VARCHAR в таблице различаются
Самая существенная оговорка касается VARCHAR(MAX). При включении новой возможности это обозначение в некоторых выражениях, приведениях типов, представлениях, пользовательских функциях и процедурах может разрешаться в размер 16 миллионов байт. Однако CREATE TABLE с VARCHAR(MAX) по-прежнему создаёт столбец с максимумом 65 535 байт. Переносить новый предел на физический столбец только по совпадению слова MAX нельзя.
Различие показывает, почему тестирование должно проверять не только успешную промежуточную конкатенацию, но и место окончательного сохранения результата. Строка может помещаться в вычислении и не помещаться в выбранном столбце таблицы. Это вывод из разных документированных границ, а не сообщение о найденной нами ошибке Redshift или о фактической потере пользовательских данных.
Как новый предел соотносится с типом SUPER
SUPER предназначен для полуструктурированных значений: массивов, структур и скаляров, включая строки, числа, логические значения и null. Документация описывает динамическую типизацию и работу через PartiQL. Разные варианты структуры могут находиться в одной колонке без предварительного сведения каждого входного документа к одинаковому набору обычных SQL-столбцов.
При этом ограничение отдельного строкового значения и максимальный размер всего объекта SUPER — разные величины. Увеличение строки не означает неограниченного роста вложенного документа со всеми его полями. AWS заявляет доступность обновления во всех регионах, где предлагается Redshift, включая GovCloud. Это региональная доступность функции, а не подтверждение доступа конкретной организации к сервису, наличия нужной конфигурации или результатов нашего нагрузочного теста.


