Перейти к содержимому
Digital Business BY · БЕЛАРУСЬ
НБ РБUSD2.9976EUR3.3551RUB0.0365PLN0.7648CNY0.4495Конвертер →
IT и стартапы

Как госучреждениям внедрить ИИ без облачных сервисов

Компактные языковые модели решают проблему безопасности данных в государственном секторе, где облако недоступно или опасно.

Казакевич Алексей
4 мин
Обновлено 14 мая
Как госучреждениям внедрить ИИ без облачных сервисов

Государственный сектор попал под давление внедрять ИИ, но не может использовать стандартные решения частных компаний. По исследованию Capgemini, 79% руководителей госучреждений обеспокоены безопасностью данных при работе с ИИ. Проблема в том, что государственные данные требуют максимальной защиты и часто не могут покидать локальную сеть. Кроме того, многие госорганизации работают в условиях ненадёжного или отсутствующего интернета, что делает облачные решения невозможными.

В отличие от частного сектора, который полагается на облачную инфраструктуру и готов к определённым рискам, государство требует полного контроля над информацией, её верифицируемости и минимальных перебоев в работе. Исследование Elastic показало, что 65% руководителей госучреждений испытывают трудности с обработкой данных в реальном времени и в масштабе. Добавьте к этому нехватку GPU-ресурсов (государство редко закупает мощные видеокарты в отличие от IT-компаний), и становится ясно: большие языковые модели типа ChatGPT здесь просто не работают.

Решение — компактные специализированные языковые модели (SLM), которые используют миллиарды параметров вместо сотен миллиардов. Они работают локально, требуют меньше вычислительных ресурсов и дешевле в содержании. Исследования показывают, что SLM работают не хуже, а иногда лучше, чем большие модели. Данные хранятся защищённо вне модели и извлекаются только при запросе. Такой подход позволяет госучреждениям использовать чувствительную информацию эффективно, избегая сложности управления огромными моделями в облаке.

Самое интересное — SLM открывают возможности, о которых часто забывают при обсуждении ИИ. Государство накопило горы неструктурированных данных: технические отчёты, документы закупок, протоколы, счета. Современный ИИ может индексировать всё это (включая PDF, сканы, изображения, таблицы, аудиозаписи) и давать точные ответы на естественном языке. Это радикально улучшает поиск информации и помогает чиновникам принимать решения на основе данных. По прогнозу Gartner, к 2027 году специализированные SLM будут использоваться в три раза чаще, чем большие модели.

Дополнительный плюс — прозрачность и соответствие регуляциям. SLM-алгоритмы можно документировать и сертифицировать, они соответствуют GDPR и другим требованиям конфиденциальности. Локальное хранение данных минимизирует риски, а целевое обучение модели на специфических данных снижает ошибки и «галлюцинации» ИИ. Совет экспертов простой: начните не с чат-бота, а с улучшения поиска. Большая часть ИИ-интеллекта — это просто умение найти нужную информацию из правильных источников.

ПоделитьсяVK

Свежие новости

Все новости
Концептуальная иллюстрация: Amazon S3 Access Points для FSx расширили региональное покрытие
IT и стартапы

Amazon S3 Access Points для FSx расширили региональное покрытие

AWS расширила доступность S3 Access Points для файловых систем Amazon FSx: FSx for NetApp ONTAP получила поддержку в 4 новых регионах, FSx for OpenZFS — в 20. Данные остаются на файловой системе, но становятся доступны через S3 API для сервисов ИИ, аналитики и бессерверных вычислений.

Редакция
1 мин
Концептуальная иллюстрация: Claude Fable 5.2 доступен в Vercel AI Gateway
IT и стартапы

Claude Fable 5.2 доступен в Vercel AI Gateway

Anthropic Claude Fable 5.2 появился в Vercel AI Gateway. Модель ориентирована на открытые технические задачи: кодирование, рассуждение и компьютерное зрение. Доступ требует хранения данных — ZDR не поддерживается.

Редакция
2 мин
Концептуальная иллюстрация: Google открыла TPU Sync: библиотека для управления KV-кэшем и весами моделей на TPU
IT и стартапы

Google открыла TPU Sync: библиотека для управления KV-кэшем и весами моделей на TPU

Google выпустила TPU Sync — открытую C++-библиотеку, которая организует передачу тензоров между HBM, оперативной памятью хоста, локальными SSD и сетевым хранилищем как единой иерархией памяти. Для MoE-моделей от 235B до 480B параметров библиотека сокращает задержку передачи KV-кэша и время до первого токена в среднем на 90% по сравнению с работой без TPU Sync.

Редакция
2 мин
Концептуальная иллюстрация: Cloud Pathways для GKE перешёл в статус GA
IT и стартапы

Cloud Pathways для GKE перешёл в статус GA

Google Cloud объявил об общей доступности Cloud Pathways на Google Kubernetes Engine. Среда выполнения, созданная в Google DeepMind для обучения и инференса фронтирных моделей, включая Gemini, теперь открыта для всех клиентов платформы.

Редакция
2 мин
Концептуальная иллюстрация: NVIDIA Dynamo получил рецепты развёртывания для ведущих корейских открытых моделей
IT и стартапы

NVIDIA Dynamo получил рецепты развёртывания для ведущих корейских открытых моделей

NVIDIA выпустила оптимизированные рецепты развёртывания на базе Dynamo для четырёх корейских открытых моделей. Конфигурации рассчитаны на GPU NVIDIA B200 и заявляют до двукратного прироста производительности из коробки.

Редакция
1 мин
Концептуальная иллюстрация: AWS Elemental MediaConvert получил встроенную генерацию субтитров на базе ИИ
IT и стартапы

AWS Elemental MediaConvert получил встроенную генерацию субтитров на базе ИИ

AWS Elemental MediaConvert интегрировал Smart Subtitles — решение на основе ИИ и современных моделей распознавания речи. Функция автоматически транскрибирует аудио и встраивается непосредственно в VOD-пайплайны без внешних сервисов субтитрования.

Редакция
1 мин