11 posts tagged Apache Spark. See all posts
This week: bool.dev explains how Raft commits writes and survives failures; Uber composes search indexes across independently owned services; Meta moves reusable privacy checks into data-access libraries; and LinkedIn connects user interactions to backend traces with OpenTelemetry.
This week: two bool.dev guides on hidden EF Core costs and consolidating microservices without losing module boundaries; Booking.com’s production investigation into Node.js resource efficiency; and LinkedIn’s move to a dedicated shuffle service for Spark and Flink.
This week: featuring MCP protocol deep dive, Airbnb's dynamic configuration platform Sitar, Pinterest's 96% reduction in Spark OOM errors with Auto Memory Retries, and Lyft's LLM-powered localization pipeline for faster internationalization.
This chapter explores NoSQL Databases questions that .NET engineers should be able to answer in an interview.
Weekend Reading: A weekly roundup of interesting Software Architecture and Programming articles from tech companies. Find fresh ideas and insights every weekend.
This article discovers the differences between ETL and ELT processes and how they could be used for data integration.
Weekend Reading: A weekly roundup of interesting Software Architecture and Programming articles from tech companies. Find fresh ideas and insights every weekend.
Разбираем статью с блога Linkedin, как они построили Real-Time Streaming Processing который суппортит нагрузку в 4 триллиона ивентов в день.
В этой статье мы обсудим основные use-cases, где и как LinkedIn использует свой DARWIN и какую архитектуру она выбрала для постройки этого решения
В этой статье рассмотрим дорожную карту, как развиваться и что учить для тех, кто хочет стать Data engineerом.
В этой статье попробуем разобраться как построена архитектура Netflix и что они используют для поддержания true highload'а