Перейти к содержимому
Digital Business BY · БЕЛАРУСЬ
НБ РБUSD2.9915EUR3.3599RUB0.0365PLN0.7651CNY0.4483Конвертер →
IT и стартапы

Amazon S3 Tables получили управляемую миграцию Hive-таблиц в Apache Iceberg

Перевод данных без остановки продакшн-нагрузок и без необходимости строить собственные пайплайны

Редакция
1 мин
Концептуальная иллюстрация: Amazon S3 Tables получили управляемую миграцию Hive-таблиц в Apache Iceberg
Иллюстрация Digital Belarus, созданная с помощью ИИ; не фотография события.

Amazon S3 Tables теперь поддерживают управляемую миграцию Apache Hive-таблиц в Apache Iceberg. Источником служат Parquet-таблицы в Amazon S3, зарегистрированные в AWS Glue Data Catalog; производственные нагрузки при этом продолжают работать.

Что делает сервис автоматически

S3 Tables берут на себя весь процесс: проверку данных, отчёт о совместимости, конвертацию типов, перекомпрессию файлов и компакцию. Целевая таблица остаётся доступна только для чтения до момента завершения миграции, после чего переходит в режим чтения-записи. Синхронизацию можно запускать многократно — каждый раз копируется только изменившееся; запись в исходную таблицу прерывается лишь на несколько минут во время финального переключения.

Стоимость и инструменты

По сравнению с самостоятельными подходами оплачивается только скопированный объём данных: конвертация из Hive в Iceberg не тарифицируется, а объекты в S3 Intelligent-Tiering сохраняют текущий уровень доступа. Запустить миграцию можно через консоль S3, AWS CLI, SDK или Agent Toolkit for AWS с командой start-table-migration. Готовые таблицы доступны напрямую через Amazon Athena, Amazon SageMaker Unified Studio или любой инструмент с поддержкой Apache Iceberg REST API.

Курс AMZN · NASDAQ
ПоделитьсяVK

Свежие новости

Все новости
Концептуальная иллюстрация: Compute Engine API получил мультиверсионность: стабильные и preview-версии теперь в общем доступе
IT и стартапы

Compute Engine API получил мультиверсионность: стабильные и preview-версии теперь в общем доступе

Google перевёл мультиверсионность Compute Engine API в общую доступность. Теперь рядом с /v1 существуют неизменяемые датированные версии — стабильные и preview, — а переключение между ними требует изменения одного заголовка или параметра запроса.

Редакция
1 мин
Концептуальная иллюстрация: Google Classroom получил режим Guided Learning для заданий
IT и стартапы

Google Classroom получил режим Guided Learning для заданий

В Google Classroom запущена интеграция с Guided Learning: учителя прикрепляют к любому заданию режим Gemini, который ведёт ученика шаг за шагом, не давая прямого ответа. Функция доступна глобально на всех языках, поддерживаемых Gemini.

Редакция
1 мин
Концептуальная иллюстрация: Google представила бенчмарк PLE для оценки ИИ-агентов в инженерных задачах
IT и стартапы

Google представила бенчмарк PLE для оценки ИИ-агентов в инженерных задачах

Google AI & Infrastructure совместно с Mercor выпустила бенчмарк Physical-Engineering's Last Exam (PLE) — открытый набор задач для проверки того, способны ли фронтирные модели выполнять полноценную инженерную работу. Лучший из 14 протестированных агентов набрал лишь 48,3%.

Редакция
1 мин
Концептуальная иллюстрация: Dependabot получил поддержку Python 3.15
IT и стартапы

Dependabot получил поддержку Python 3.15

GitHub добавил поддержку Python 3.15 в Dependabot. Пользователи github.com могут получать автоматические обновления зависимостей для проектов на этой версии уже сейчас; в GitHub Enterprise Server функция появится в версии 3.24.

Редакция
1 мин
Концептуальная иллюстрация: Vercel MCP теперь принимает клиентов через Client ID Metadata Documents
IT и стартапы

Vercel MCP теперь принимает клиентов через Client ID Metadata Documents

Vercel обновил авторизацию в своём MCP-сервере: теперь любой MCP-клиент может запросить подключение без предварительного одобрения со стороны Vercel. Вместо ручного вайтлистинга используется Client ID Metadata Document.

Редакция
1 мин
Концептуальная иллюстрация: Amazon SageMaker AI поддерживает разделение GPU для инференса в реальном времени
IT и стартапы

Amazon SageMaker AI поддерживает разделение GPU для инференса в реальном времени

Amazon SageMaker AI добавил поддержку разделения GPU на реальных эндпоинтах: технология NVIDIA MIG делит один ускоритель на до семи изолированных разделов, каждый со своей памятью и вычислительными ресурсами.

Редакция
1 мин