Перейти к содержанию
ERITKOM
ОблакаНовость

S3 Tables получили журналы запросов: аудит доступа отделён от доставки в CloudWatch

Новая функция записывает обращения ко всем таблицам и пространствам имён выбранного table bucket. Файлы поступают в обычный S3 bucket, но полнота и время их доставки не гарантируются.

Архивная фотография серверных стоек NERSC 2011 года, тематическая иллюстрация хранения данных, не AWS S3
Derrick Coetzee, серверные стойки NERSC, 14 октября 2011 года, CC0. Архивная тематическая фотография, не дата-центр AWS. Изменены размер и формат JPEG→WebP.

Запросы к таблицам получили собственный журнал

Amazon 10 ноября объявила поддержку server access logging для S3 Tables. Функция позволяет анализировать обращения к таблицам, операции с пространствами имён и доступ к данным. В записи присутствуют сведения об инициаторе, операции, таблице, пространстве имён, результате и времени обработки запроса. Эти данные предназначены для анализа доступа, расследования проблем и распределения расходов.

Журналирование включается для table bucket целиком, а не для одной выбранной таблицы. Существующие процессы анализа можно использовать повторно: записи представляют собой текст с разделителями-пробелами, пригодный для обработки Athena или DuckDB. Доступность анонсирована во всех регионах AWS, где работает S3 Tables. Настройка поддерживается через консоль, CLI, SDK и CloudFormation; по умолчанию сбор таких журналов выключен.

Получатель — обычный bucket с ограничениями

Получатель должен находиться в том же аккаунте и регионе. Документация запрещает Object Lock и Requester Pays и требует шифрование SSE-S3. Для AWS-managed tables этот сбор недоступен. Отправка в CloudWatch Logs не поддерживается: S3 Tables передаёт эти журналы только в обычный S3 bucket.

В справочнике AWS SDK for Ruby операция put_table_bucket_logging задаёт либо обновляет конфигурацию, а пустой tableBucketLoggingStatus отключает её. Для вызова требуется отдельное разрешение s3tables:PutTableBucketLogging. В конфигурации указываются назначение, префикс и разбиение ключей по времени события или доставки. Поэтому наличие доступа к самим таблицам не следует автоматически считать правом менять сбор журналов. Пример SDK показывает эти параметры в одном запросе вместе с ARN исходного table bucket: получатель файлов и источник обращений остаются разными ресурсами с разными назначениями.

Доставка не является полным учётом обращений

Доставка выполняется по принципу best effort: записи могут запаздывать, изредка теряться или дублироваться. После включения и изменения назначения требуется время. Отсутствие записи не доказывает отсутствия обращения; журнал не гарантирует непрерывного реестра каждой операции.

За генерацию и доставку отдельной платы S3 Tables нет. Хранение файлов, запросы и передача данных при работе с получателем оплачиваются по обычным правилам S3. «Бесплатные журналы» не означают отсутствие расходов на последующее хранение и анализ.

CloudTrail различает управление и операции с данными

В отдельном руководстве CloudTrail AWS описывает события управления S3 Tables, включая создание и удаление таблиц, пространства имён и table bucket, а также изменение политик. Эти management events регистрируются по умолчанию. Обслуживание таблиц, например уплотнение данных и истечение срока снимков, имеет отдельные признаки события TablesMaintenanceEvent, позволяющие отличать автоматические действия сервиса.

Для data events ситуация другая: по умолчанию trails их не записывают, соответствующую регистрацию нужно настроить. Документация перечисляет типы ресурсов AWS::S3Tables::Table и AWS::S3Tables::TableBucket и операции чтения, записи и multipart upload. Следовательно, наличие server access logs не подтверждает, что CloudTrail уже собирает нужные события доступа к данным. Состав источников для расследования определяется реально включёнными типами событий, а не самим фактом появления нового текстового журнала. Для автоматического обслуживания в записи используются eventSource сервиса S3 Tables и eventType AwsServiceEvent, а вид работы отмечается через activityType. Уплотнение Iceberg и управление сроком снимков при этом различаются. Это позволяет разбирать активность обслуживания отдельно от запросов, инициированных человеком или приложением, не приписывая каждую фоновую операцию пользователю.

Источники

Принципы журнала и исправления.

ERITKOM / НОВЫЙ ПРОЕКТ

Расскажите о задаче и оставьте контакты. Мы свяжемся с вами, чтобы обсудить проект.

  1. 01 Контакты
  2. 02 Ваша задача