RAP в Spotify: индекс для точечных запросов
RAP в Spotify показывает, как внешний индекс поверх Parquet ускоряет point queries в data lake без копирования данных в serving databases
Облачная архитектура
«Облачная архитектура» на ThecoreGrid — это практический разбор проектирования и эксплуатации надежных cloud-native систем в динамичной production-среде.
Мы рассматриваем архитектурные паттерны для контейнеров и Kubernetes, service discovery, управление конфигурацией, autoscaling и immutable infrastructure. В центре внимания — реальные требования продакшена: multi-cluster эксплуатация, отказоустойчивость при сбоях, контроль стоимости, observability и безопасная изоляция workload’ов. Публикуем глубокие материалы по platform engineering, GitOps, Infrastructure as Code, управлению трафиком, стратегиям rollout и day-2 operations в highload-сценариях. Вместо базовых туториалов — инженерные компромиссы: переносимость vs managed-сервисы провайдера, скорость delivery vs governance, гибкость vs операционная сложность. Контент основан на практиках BigTech, post-mortems инцидентов и опыте масштабных cloud migration. Тег полезен архитекторам, backend- и platform-инженерам, DevOps- и SRE-командам, которые строят и развивают критичную облачную инфраструктуру.
Service Topology: как Netflix держит карту зависимостей вживую
Netflix Service Topology: как real-time service map сохраняет целостность под нагрузкой, используя backpressure, SSE и три стадии обработки
QUIC load balancing без state и переписывания
QUIC load balancing без state: как data plane обеспечивает PCC, снижает latency и блокирует 0-RTT атаки без изменений серверов
Scalability в data-intensive системах без иллюзий
Scalability в data-intensive системах: как выбрать между horizontal scaling и vertical scaling и избежать роста latency и стоимости
KEDA autoscaling по backlog в SQS
KEDA autoscaling по backlog в SQS: как масштабировать Kubernetes по очереди, а не CPU, и снизить задержки и затраты. —>
Cloudflare Workers масштабирует cdnjs до 9 млрд
Cloudflare Workers cdnjs: как CDN обрабатывает 9 млрд запросов и мигрирует пайплайн на R2 и Workflows без потери консистентности
ThecoreGrid Radar: Тренды недели в высокопроизводительных вычислениях и архитектуре
Подборка архитектурных инсайтов и релизов, которые мы читали на этой неделе. Infrastructure 🔹 Spanergy: Энергоосознанный распределенный трейсинг для микросервисов Представляет собой решение для оптимизации мониторинга микросервисов, позволяющее снизить потребление энергии при трассировке, что особенно актуально для облачных архитектур. Читать релиз (EN) 🔹 ProFlow: Проактивное размещение потоков на основе RL Использует алгоритмы машинного обучения … Читать далее
controller-runtime cache как источник правды
controller-runtime cache: как устроены чтения, watch и reconcile loop в Kubernetes и почему это влияет на latency, память и консистентность —>
Satellite inference на континентах без деградации
Satellite inference на терабайтах данных: как устроена платформа OlmoEarth и какие архитектурные решения убирают I/O и масштабные bottlenecks
Serverless clean architecture без vendor lock-in
Как serverless clean architecture снижает vendor lock-in и изолирует бизнес-логику в multi-cloud среде с Spring Cloud Function и Terraform CDK