Data Engineering
про инжиниринг данных и аналитику
🏢 %company% Engineering
AirBnb Engineering
последний пост 5 часов назад
Personalization without user identity
Personalization without user identity Personalization without user identity

How Airbnb uses proximity signals to personalize without relying on individual user history.By: Wei Jiang, Bin Xu, Bharathi Thangamani, Weiwei Guo, Sundar Srinivasavaradhan, Tracy Yu, Huiji Gao, Swapnil Ghike, Michael KinotiGreat personalization starts with knowing your user. But what happens when the user is a stranger?A significant share of Airbnb users arrive without a login, without a recent search history, or without any prior booking — especially those landing from paid advertising or organic search. For these users, the ML models that power search ranking, destination recommendations, and marketing landing pages face the cold-start problem: there is little to no user signal available…

5 часов назад @ medium.com
The guest journey, updated in real time: extending Airbnb’s sequence recommender with Chronon
The guest journey, updated in real time: extending Airbnb’s sequence recommender with Chronon The guest journey, updated in real time: extending Airbnb’s sequence recommender with Chronon

How two new Chronon capabilities, Push Mode and NRT Model Transform, allows us to provide more relevant search results instantly as a guest explores, rather than waiting for the next batch run.By: Pengyu Hou, Yuli Han, Daochen Zha, Haozhen Ding, Xin Liu, Sophie Wang, Pallavi Adusumilli, Sherry Li, Henry Saputra, Chun How Tan, Huiji Gao, Yan Zhang, Stephanie Moyerman, Yi Li, and Sanjeev KatariyaA guest’s interaction with Airbnb doesn’t pause to wait for a nightly batch job. Someone might browse a dozen listings on a Tuesday afternoon, run a new search that evening, and expect the next search to reflect the recent activity; it’s also to Airbnb’s benefit for that to be the case. In our previou…

1 week, 5 days назад @ medium.com
Beyond the Model: Engineering AI Infra with Scientific Judgement
Beyond the Model: Engineering AI Infra with Scientific Judgement Beyond the Model: Engineering AI Infra with Scientific Judgement

How Airbnb’s agent harness transforms unstructured data exploration by encoding scientific methodology into scalable, reproducible, and audit-ready infrastructure.Wren DoughertyAsk a coding agent to analyze 100,000 customer support conversations and within minutes you’ll have a polished taxonomy, precise prevalence numbers, and an executive-ready summary. What you can’t see is the investigation that produced them: the methods it chose, the evidence it weighed, how much to trust it, or whether a second request would agree. All that reaches you is the polish. The model is undeniably intelligent, but intelligence without methodology is not science.LLMs certainly make for confident scientists, …

2 weeks назад @ medium.com
Project Lighthouse — Part 3: Introducing project-lighthouse-anonymize
Project Lighthouse — Part 3: Introducing project-lighthouse-anonymize Project Lighthouse — Part 3: Introducing project-lighthouse-anonymize

Project Lighthouse — Part 3: Introducing project-lighthouse-anonymizeThe data in Project Lighthouse is powered by privacy-preserving anonymization code. We’ve put this code into open source, and published two new technical papers detailing the scalable algorithms and data quality frameworks behind it.By: Adam BloomstonIntroductionIn 2020, we launched Project Lighthouse, which we developed in partnership with leading civil rights and privacy organizations. As our 2020 announcement details, Project Lighthouse enables us to measure potential disparities in user experiences. This work uses perceived race data that is never linked to individual accounts; we only use this data for measuring poten…

1 month назад @ medium.com
How we knew COVID was over (and what our models had to unlearn)
How we knew COVID was over (and what our models had to unlearn) How we knew COVID was over (and what our models had to unlearn)

When we retrain, when we rebuild, and when we leave a model alone.By: Harrison KatzA forecast that carries weightThe Forecasting Data Science team at Airbnb produces many of the forecasts the rest of the company plans around: demand, bookings, cancellations, and a range of finer cuts by market and segment, refreshed continuously across thousands of markets. The targets differ, and the models differ, but they have one thing in common: Other teams build on top of them.This means a forecast that is casually wrong is not a clean miss, as it might be in an academic setting. That’s because a small bias does not stay small once a lot of decisions are riding on it. So when one of those forecasts st…

1 month, 1 week назад @ medium.com
Flexible Authentication: Reimagining authentication for millions of users at Airbnb
Flexible Authentication: Reimagining authentication for millions of users at Airbnb Flexible Authentication: Reimagining authentication for millions of users at Airbnb

Rebuilding login and signup surfaced product insights, not just technical challenges. Here’s how we designed Flexible Authentication at the intersection of product intuition and technical architecture.By: Jose Santos, Mike BarryFor Airbnb, logins at irregular intervals are normal. A guest books a trip in January and may not open the app again until summer. A host checks back only when a reservation comes in, and may be busy with other activities when it does. For a two-sided marketplace where a failed login means a lost booking, and lost revenue for both the guest and the host, long gaps between sessions are a structural challenge, not an edge case.Our authentication system had grown organi…

1 month, 2 weeks назад @ medium.com
Eval-driven development: Lessons from evaluating GenAI at scale
Eval-driven development: Lessons from evaluating GenAI at scale Eval-driven development: Lessons from evaluating GenAI at scale

How Airbnb teams build trustworthy Generative AI products by treating evaluation as a first-class engineering discipline; not an afterthought.Nestled into the lush hillside, this stunning modern retreat features striking natural wood architecture, terraced balconies, and a serene landscape.By: Rohit Girme, Dan Miller, Mia Zhao, Lifan Yang, Clint KellyIntroductionGenerative AI breaks a lot of the assumptions that used to hold true for software testing. Unlike traditional software, LLM outputs are non-deterministic, and “correct” is subjective. Because so much judgment is involved, you often need an AI to evaluate an AI, which introduces its own potential failure modes. Making matters more co…

2 months назад @ medium.com
Personalizing Airbnb search by learning from the guest journey
Personalizing Airbnb search by learning from the guest journey Personalizing Airbnb search by learning from the guest journey

How we built a Transformer-based sequence model that encodes years of guest behavior to surface the right listings at the right time.By: Daochen Zha, Chun How Tan, Xin Liu, Bin Xu, Han Zhao, Xiaowei Liu, Jun Shi, Tracy Yu, Hui Gao, Huiji Gao, Liwei He, Michael Kinoti, Stephanie Moyerman, and Sanjeev KatariyaIntroductionPlanning a trip on Airbnb rarely happens in a single session. A guest searching for a place to stay in San Francisco might browse dozens of listings over several days, leaving behind a trail of views. Typically, over a period of years, that same guest will have accumulated many previous bookings, reviews, and the occasional cancellation. Taken together, these events reveal a …

2 months, 1 week назад @ medium.com
From weeks to a day: how we made LLM evaluation fast enough to iterate on
From weeks to a day: how we made LLM evaluation fast enough to iterate on From weeks to a day: how we made LLM evaluation fast enough to iterate on

Training an LLM is the easy part. The hard part is designing experiments and evaluations that you can trust enough to know whether the new model is actually an improvement.By: Baharak SaberidokhtIntroductionShipping a production LLM system means iterating fast on improvements to something that is, by construction, non-deterministic. Models drift, judges disagree with themselves, references regenerate as different strings, and bugs may persist until the next release, because retraining takes weeks. Most of this friction comes from infrastructure challenges, not model quality, and the fixes come from classical software engineering techniques.At Airbnb, we built reliable LLM infrastructure by …

2 months, 2 weeks назад @ medium.com
Scaling beyond one: How Airbnb evolved its data architecture for a multi-product world
Scaling beyond one: How Airbnb evolved its data architecture for a multi-product world Scaling beyond one: How Airbnb evolved its data architecture for a multi-product world

How Airbnb’s data engineers and analytics engineers built a consistent and flexible data modeling framework to support the expansion into Homes, Experiences, and Services.By: Patrick Lam, Namrata Lamba, Jamie StoberWith the May 2025 Summer Release, Airbnb redesigned its app, relaunched Experiences, and debuted Services, pushing us beyond our traditional Homes focus. For the data teams, this meant rapidly evolving a decade-old infrastructure to integrate two brand-new product pillars. Our data engineers and analytics engineers rose to the challenge by building a consistent and flexible framework to serve as a robust and scalable data foundation for the next decade of growth.But getting there…

3 months, 3 weeks назад @ medium.com
Sitar-agent: Building a reliable dynamic configuration sidecar at scale
Sitar-agent: Building a reliable dynamic configuration sidecar at scale Sitar-agent: Building a reliable dynamic configuration sidecar at scale

How Airbnb built a Kubernetes sidecar to deliver dynamic configuration reliably at scale.By: Bo Teng, Cosmo Qiu, Siyuan Zhou, Ankur Soni, Xin Huang, Willis HarveyIntroductionIn our previous post, we explored Airbnb’s dynamic configuration system, Sitar, with a focus on service architecture and configuration change safety. Now for the harder question: once a config change is committed, which happens several times each minute, how does it actually reach the thousands of Airbnb’s service instances reliably, quickly, and without redeploying the services?This post describes sitar agent: a lightweight Kubernetes sidecar that runs alongside every subscribed service pod, continuously synchronizing …

3 months, 3 weeks назад @ medium.com
When history fails you, borrow from geography
When history fails you, borrow from geography When history fails you, borrow from geography

How Airbnb used sequential geographic recovery signals and prior propagation to generate reliable corridor-level forecasts when local data was scarce.By: Harrison KatzThe problem with unprecedented shocksAlmost every forecasting system is built on the same implicit assumption: the future will resemble the past. You train on historical data, you validate on holdout periods, and you trust that past patterns will at least roughly indicate future performance. When this assumption breaks, the model does not gracefully degrade; it fails confidently. It produces precise, well-calibrated intervals around the wrong answer.The acute phase of COVID, from early to late 2020, was a clear illustration of…

3 months, 4 weeks назад @ medium.com
Scaling Airbnb’s identity graph with a unified knowledge graph infrastructure
Scaling Airbnb’s identity graph with a unified knowledge graph infrastructure Scaling Airbnb’s identity graph with a unified knowledge graph infrastructure

How Airbnb shifts from PaaS to an internal knowledge graph infrastructure at scale.By: Lucen Zhao, Shukun Yang, Ashish JainKnowledge graphs offer a natural and powerful way to represent relationships between entities. Many real-world systems are fundamentally about connections.Airbnb’s identity graph captures relationships between users in a graph database. The identity graph serves aggregated insights that enable user identity resolution and relationship understanding. These capabilities support a wide range of Trust and Safety use cases, from detecting suspicious activities to identifying linked accounts. Over time, the identity graph has grown into one of the largest and most complex gra…

4 months, 1 week назад @ medium.com
Viaduct 1.0 and the future of Airbnb’s data mesh
Viaduct 1.0 and the future of Airbnb’s data mesh Viaduct 1.0 and the future of Airbnb’s data mesh

Moving from an internal tool to a community-driven, production-ready data mesh.By: Ryan Tanner, Raymie Stata, Adam MiskiewiczIntroductionWe’re excited to announce the 1.0 release of the Viaduct. This release marks a shift from Viaduct being an Airbnb-internal tool that happens to be open source to a true community-driven project with a stable public API. The 1.0 release includes substantial new features and enhancements which we describe in the Viaduct blog.Viaduct is for platform engineers building a company-wide data API, service owners who want to contribute to a shared graph without spinning up their own server, or engineering organizations that have outgrown a single GraphQL service.Wh…

4 months, 2 weeks назад @ medium.com
Monitoring reliably at scale
Monitoring reliably at scale Monitoring reliably at scale

Designing monitoring that works when everything else doesn’t.By: Abdurrahman J. AllawalaIntroductionWhen an incident hits, teams lean on observability to answer the only questions that matter: what’s broken, and why? Monitoring systems are designed to help you answer these questions, and they usually do.But what happens when your observability stack is dependent on the same systems that are failing? In that moment, the dashboards go dark, alerts stop firing, and the tools meant to guide recovery become part of the outage.This is an increasingly common challenge as organizations consolidate onto shared platforms like Kubernetes, service meshes, and other common infrastructure components. At …

4 months, 3 weeks назад @ medium.com
Netflix Engineering Netflix Engineering
последний пост 4 days, 6 hours назад
Trading a Cloud Identity for Your Own: Workload Attestation on Managed Compute
Trading a Cloud Identity for Your Own: Workload Attestation on Managed Compute Trading a Cloud Identity for Your Own: Workload Attestation on Managed Compute

By Dhruv PratapIntroductionOrganizations that have been around for a while usually run two identity systems side by side. One belongs to the cloud provider: IAM roles, instance profiles, execution roles. The other is your own, and it is the one your internal services actually check when they decide whether to answer a request.On infrastructure you build yourself, you can bootstrap your own identity however you like. On managed compute you cannot. The provider hands your process a cloud identity and nothing else.This post describes how we close that gap for Apache Spark workloads running on Amazon EMR. A workload that starts with only an AWS identity has to end up holding a first-class inter…

4 days, 6 hours назад @ netflixtechblog.com
Leave the Class Path in the Rearview Mirror
Leave the Class Path in the Rearview Mirror Leave the Class Path in the Rearview Mirror

Introducing composable, module system native and agent friendly command line tools for modern Java developmentBy Danny Thomas, JVM Ecosystem TeamRecent work on the Java language to pave the on-ramp has made it easier than ever to start a Java program and evolve it using the full language and platform. At the end of that on-ramp lies Java’s mature build and dependency management ecosystem, capable of carrying software to enormous scale and complexity.That ecosystem reached its maturity by developing strong models for projects, dependencies, and builds. When the Java Module System arrived, those models were already serving developers exceptionally well. The module descriptor consequently beca…

1 week, 4 days назад @ netflixtechblog.com
MAPS: Netflix’s Multimodal Asset Personalization at Scale
MAPS: Netflix’s Multimodal Asset Personalization at Scale MAPS: Netflix’s Multimodal Asset Personalization at Scale

By Emma Yanyang Kong, Aditya Deshpande, Asad Abbasi, Bowei Yan, David Fagnan, Ashish Rastogi, Dhaval Patel, Ray ZhangIntroductionThe Netflix experience is a journey of discovery. Every visual cue, from the artwork on a title to the video previews that autoplay while you browse, is there to connect you with a story you will love. We call these visual cues assets, and choosing the right one for each member is a personalization problem of its own. But which image or video preview of Squid Game should we show you? And what do we do right after a title launches, when there’s far too little interaction data to know which asset we should recommend to each member?For years, our models answered the …

1 month назад @ netflixtechblog.com
A Tale of Two Flink Autoscalers
A Tale of Two Flink Autoscalers A Tale of Two Flink Autoscalers

Samuel Yeboah, Francesco Di Chiara and Mingliang LiuToday, Netflix runs two Flink autoscalers. That is exactly one more than we want. We built the first one in-house years ago, when there was no mature option suited to our platform. The second came from the Apache Flink community, and it can scale workloads our homegrown system was never designed for. We now run both in production and are steadily converging on the open-source one. Along the way we learned some hard lessons about metrics, cost, and the real price of maintaining infrastructure you could instead adopt, and we hope they are useful whether you run a handful of Flink jobs or tens of thousands.Why autoscaling is not optional at o…

1 month, 1 week назад @ netflixtechblog.com
How and Why Netflix Built a Real-Time Distributed Graph: Part 3 — Querying the graph with gRPC…
How and Why Netflix Built a Real-Time Distributed Graph: Part 3 — Querying the graph with gRPC… How and Why Netflix Built a Real-Time Distributed Graph: Part 3 — Querying the graph with gRPC…

How and Why Netflix Built a Real-Time Distributed Graph: Part 3 — Querying the graph with gRPC execution APIAuthors: Nilesh Mishra and Ajit KotiThis is the third entry of a multi-part blog series describing how we built a Real-Time Distributed Graph (RDG). In Part 1, we discussed the motivation for creating the RDG and the architecture of the data processing pipeline that populates it. In Part 2, we discussed how we designed the storage layer to handle billions of nodes and edges while maintaining single-digit-millisecond latency. In Part 3, we will explore how we designed a fast, flexible serving layer to efficiently query the graph.IntroductionIn Part 1 of this series, we described why Ne…

1 month, 3 weeks назад @ netflixtechblog.com
Modeling Device Capabilities for Analytics
Modeling Device Capabilities for Analytics Modeling Device Capabilities for Analytics

by Aarti Laddha, Richard Diaz-Cool, Rishika Idnani, Venkatesh SelverajNetflix supports a vast and evolving set of features and content types, ranging from 4K streaming and immersive audio to live streaming and cloud gaming, across a diverse ecosystem of devices. However, not all devices are created equal. Hardware limitations such as available RAM, CPU cores, display capabilities, or platform support mean that some features cannot be supported on certain device models. To ensure the best possible user experience, we rely on a deep understanding of device capabilities. We have invested in building a comprehensive device capability data model and integrating feature flags from internal system…

2 months назад @ netflixtechblog.com
GenRec: Towards LLM-Native Recommendation at Netflix
GenRec: Towards LLM-Native Recommendation at Netflix GenRec: Towards LLM-Native Recommendation at Netflix

Authors: Ying Li, Arjun Rao, Shradha SehgalIntroductionRecommendations sit at the heart of the Netflix experience. Our current production models rely on thousands of hand‑crafted features over users, items, and interactions, along with specialized architectures for sequence modeling, feature interactions, and multi‑task objectives. This stack has evolved over many years to support diverse content types (movies, series, games, live, podcasts) and product surfaces, but its complexity makes it costly to onboard new use cases: adding a content type or surface can require significant feature engineering, architecture change, infrastructure work, and experimentation.At the same time, large langua…

2 months назад @ netflixtechblog.com
In-House LLM Serving at Netflix
In-House LLM Serving at Netflix In-House LLM Serving at Netflix

By AI Platform’s Model Runtime team and Inference teamIntroductionMost organizations consume LLMs through hosted APIs. Netflix went further — we run the full stack ourselves, from model deployment through inference, inside our existing production environment rather than a separate ML silo. Some of those decisions weren’t obvious, and a few revealed their trade-offs only under production load.This post focuses on the choices where alternatives were seriously considered: engine selection, model packaging, API surface design, deployment strategy, and output constraints enforcement. The goal is to share not just what was built, but why — and what production revealed that the design phase didn’t…

2 months, 2 weeks назад @ netflixtechblog.com
Building Service Topology at Scale: Architecture, Challenges, and Lessons Learned
Building Service Topology at Scale: Architecture, Challenges, and Lessons Learned Building Service Topology at Scale: Architecture, Challenges, and Lessons Learned

By Parth Jain, Rakesh Sukumar, Yingwu Zhao, Renzo Sanchez-Silva & Nathan FisherA deep dive into the engineering challenges of building a real-time service dependency map at Netflix scale — from streaming architectures and distributed aggregation pipelines to time-travel queries and the methodology that made it work.IntroductionIn our first post, we introduced the problem: engineers at Netflix needed a unified, real-time view of service dependencies to troubleshoot faster, understand blast radius, and navigate our distributed architecture. We described our multi-source approach — combining eBPF network flows, IPC metrics, and distributed tracing into physically separate graph layers that can…

2 months, 2 weeks назад @ netflixtechblog.com
GenPage: Towards End-to-End Generative Homepage Construction at Netflix
GenPage: Towards End-to-End Generative Homepage Construction at Netflix GenPage: Towards End-to-End Generative Homepage Construction at Netflix

Authors: Lequn Wang, Jiangwei Pan, and Linas BaltrunasFigure 1. Autoregressive homepage generation. GenPage builds a Netflix homepage one row or entity at a time, each one conditioned on what’s already on the page and the user’s context.IntroductionThe Netflix homepage is the first thing users see when they open the app and the primary way they discover content to enjoy. Almost every part of it is personalized, including which rows appear, which entities show up within those rows, and how everything is arranged on the page.Constructing that homepage is a genuinely hard problem. It is not simply producing one ranked list. The homepage is a structured, two-dimensional layout, made up of recom…

3 months назад @ netflixtechblog.com
Toward More Controllable AI Video Editing: An Early Research Exploration at Netflix
Toward More Controllable AI Video Editing: An Early Research Exploration at Netflix Toward More Controllable AI Video Editing: An Early Research Exploration at Netflix

By Zhuoning Yuan, Ta-Ying Cheng, Benjamin Klein, Bahareh AzarnoushIntroductionAt Netflix, we build technology to help storytellers bring their creative visions to life and to help members discover the stories they love.To connect stories with diverse audiences around the world, we produce promotional assets, including trailers, teasers, and social short‑form videos, that build on and elevate the original footage. Through close collaboration with the teams crafting these assets, we identified a recurring gap in current tools. Transforming raw footage into a polished final asset often requires complex edits like seamlessly adding new visual elements, patching or replacing backgrounds, or remo…

3 months, 1 week назад @ netflixtechblog.com
How Netflix Simplified Batch Compute with Kueue
How Netflix Simplified Batch Compute with Kueue How Netflix Simplified Batch Compute with Kueue

By Alvin Bao, Alex Petrov, Jennifer Lai, Aidan Sherr, and Samartha ChandrashekarAs a part of the journey to transition Netflix’s compute infrastructure to be more Kubernetes-native, we have leaned into incorporating components from the Kubernetes ecosystem into our container platform Titus. One example of this is our use of Kueue, a cloud-native job queueing system for batch workloads, which has largely replaced the custom queuing and scheduling logic in our homegrown managed batch solution Compute Managed Batch (CMB). In this post, we’ll give an overview of what motivated the migration, how we migrated millions of batch jobs to use Kueue, and what Kueue allows us to offer as a Compute plat…

3 months, 1 week назад @ medium.com
The Data Canary: How Netflix Validates Catalog Metadata
The Data Canary: How Netflix Validates Catalog Metadata The Data Canary: How Netflix Validates Catalog Metadata

By Celina AmadosAt Netflix, our catalog metadata is crucial to our member experience, and a single corrupted data state can impact millions of viewers immediately. To protect streaming reliability, we built an automated data canary system that validates data transformations using production traffic. This canary detects issues in under 10 minutes, and blocks bad data from reaching our members.IntroCatalog metadata is what makes Netflix functional. It defines what titles exist, where they’re available, whether they can be played, and more. This data gets transformed and distributed across our vast infrastructure near-continuously, powering everything that helps members find what they want to …

3 months, 1 week назад @ netflixtechblog.com
Predicting Risk in Content Launches: How Data-Driven Insights can Transform Launch Planning
Predicting Risk in Content Launches: How Data-Driven Insights can Transform Launch Planning Predicting Risk in Content Launches: How Data-Driven Insights can Transform Launch Planning

by Emily GillEach year, we bring the Analytics Engineering community together for an Analytics Summit — a multi-day internal conference to share analytical deliverables across Netflix, discuss analytic practice, and build relationships within the community. This post is one of several topics presented at the Summit highlighting the breadth and impact of Analytics work across different areas of the business.Understanding Risk in Content LaunchesEvery title you see on Netflix goes through several key phases: Development, Pre-Production, Production/Principal Photography, Post-Production, and finally, Launch Preparation, all leading up to the Title Launch. Once Principal Photography wraps, the …

3 months, 1 week назад @ netflixtechblog.com
VMAF v1: Good Is Not Good Enough
VMAF v1: Good Is Not Good Enough VMAF v1: Good Is Not Good Enough

By Christos G. Bampis, Zhi Li, Kyle Swanson, Nil Fons Miret and Pavan MadhusudanaraoWill this encode look good to Netflix members? Does switching to a new codec improve quality at the same bitrate and by how much? What is the best way to encode a movie title given a target bitrate budget? For years, VMAF has reliably helped us answer those questions and deliver an optimized quality of experience to our members.But good is not good enough. If VMAF misjudges quality, that may lead to loss of detail for a suspenseful close-up or banding for a stunning wide-angle sky shot. That’s a lot of trust to put in one number, so we strive to make sure it earns it. Over time, we collected feedback from VM…

3 months, 1 week назад @ medium.com
Pinterest Engineering
последний пост 4 days, 7 hours назад
Partition Finalization in Pinterest’s Next-Generation DB Ingestion Framework
Partition Finalization in Pinterest’s Next-Generation DB Ingestion Framework Partition Finalization in Pinterest’s Next-Generation DB Ingestion Framework

Qianrui Zhang | Sr Software Engineer, Logging PlatformKanchi Masalia | Software Engineer II, Stream Processing PlatformLiang Mou | Sr Staff Software Engineer, Logging PlatformYi Pan | Principal Engineer, Agent PlatformIntroductionThis is the third post in our series on Pinterest’s next-generation database ingestion framework. Part 1 introduced the DB ingestion framework built on Kafka, Flink, Spark, and Iceberg, and Part 2 covered automated schema evolution. This post tackles another challenge in migrating downstream customers to the new ingestion framework: knowing when data is complete enough to read.We’ll walk through that data completeness challenge and how we solve it: what “partition …

4 days, 7 hours назад @ medium.com
Beyond Two Towers: Launching the 3-Tower Engagement Co-Train Model (Part 2)
Beyond Two Towers: Launching the 3-Tower Engagement Co-Train Model (Part 2) Beyond Two Towers: Launching the 3-Tower Engagement Co-Train Model (Part 2)

Authors: Longyu Zhao (Staff Machine Learning Engineer), Gwendolyn Zhao (Staff Machine Learning Engineer), Peng Yan (Senior Machine Learning Engineer), Yuanlu Bai (Senior Machine Learning Engineer), Yuan Wang (Senior Machine Learning Engineer), Yao Cheng (Staff Machine Learning Engineer), Ang Xu (Principal Machine Learning Engineer), Zhaohong Han (Manager II, Ads Lightweight Ranking)IntroductionPreviously¹, we launched the next-generation serving stack for standard ads, which we call Nexus. Nexus decoupled candidate generation from scoring and moved us beyond the classic two-tower-only world, enabling richer model architectures while still meeting stringent latency and cost constraints.Build…

1 week, 5 days назад @ medium.com
Evolving Pinterest’s Embedding Retrieval Platform
Evolving Pinterest’s Embedding Retrieval Platform Evolving Pinterest’s Embedding Retrieval Platform

Authors: Bowen Zhou | Staff Software Engineer; Shan Gao | Senior Software Engineer; Jingwen Hu | Software Engineer II; Wenjiang Chu | Staff Software EngineerThe Billion-Embedding ChallengeAt Pinterest, the “signal” is our lifeblood. Whether it’s a home decor enthusiast finding the perfect rug or a fashion seeker discovering a new aesthetic, our discovery engine relies on understanding deep semantic relationships to help our users find inspirations. Over the last few years, the explosive growth of embedding-based retrieval has fundamentally transformed how we surface these signals — and at the heart of that transformation is Manas, Pinterest’s in-house distributed search platform.Embedding R…

2 weeks, 4 days назад @ medium.com
Building Pinterest’s VLM Serving Stack on NVIDIA Dynamo
Building Pinterest’s VLM Serving Stack on NVIDIA Dynamo Building Pinterest’s VLM Serving Stack on NVIDIA Dynamo

Lei Pan | Senior Software Engineer; Salina Wu | Senior Software Engineer; Cristian Lopez | Software Engineer I; Guangtong Bai | Staff Software Engineer; Soam Acharya | Principal Engineer; Saurabh Vishwas Joshi | Principal Engineer; Chia-Wei Chen | Staff Software Engineer; Ambud Sharma | Principal EngineerWhy VLM Serving Matters at PinterestPinterest is a visual search and discovery platform, so its AI systems must reason over both language and visual content. Vision-language models (VLMs), which can interpret images, compare visual candidates, and respond naturally to user intent, are becoming the foundation for the next generation of Pinterest experiences: Pinterest Assistant, hybrid searc…

2 weeks, 4 days назад @ medium.com
Becoming an AI Team
Becoming an AI Team Becoming an AI Team

John Grass | Sr. Manager, EngineeringA Fundamental TransformationAn AI team is fundamentally more than just a group whose members incorporate AI tools into their existing workflows. The journey to becoming an AI team necessitates a fundamental and comprehensive paradigm shift in how the team defines ownership, engages in strategic planning, and, most critically, executes on its core goals and objectives. This transformation is not merely an addition of new technology; it is a restructuring of the team’s operating model, philosophy, and individual roles.Becoming an AI team requires a holistic shift: team members transition from routine, manual execution to empowered, AI-augmented strategists…

4 weeks назад @ medium.com
Scaling Conditional Learned Retrieval for Pinterest Home Feed
Scaling Conditional Learned Retrieval for Pinterest Home Feed Scaling Conditional Learned Retrieval for Pinterest Home Feed

Devin Kreuzer | Sr. Machine Learning Engineer; Yichi Wang | Machine Learning Engineer I; Sujan Reddy Ale | Machine Learning Engineer I; Zelun Wang | Sr. Machine Learning Engineer; Hongtao Lin | Sr. Machine Learning Engineer; Piyush Maheshwari | Staff Machine Learning EngineerPinterest home feed candidate generation is a large-scale User-to-Pin retrieval problem. A common approach is a two-tower model: a user tower encodes the user, an item tower encodes candidate Pins, and approximate nearest neighbor search retrieves Pins close to the user embedding. But Pinterest users often have multiple intentions at once — planning a renovation, saving recipes, exploring fashion, or organizing travel i…

1 month назад @ medium.com
Pinner Progression: Better Use-Case Representation Driving Weekly Active User Growth at Pinterest
Pinner Progression: Better Use-Case Representation Driving Weekly Active User Growth at Pinterest Pinner Progression: Better Use-Case Representation Driving Weekly Active User Growth at Pinterest

Part 1 of 2AuthorsPersonalization (Homefeed): Yuke Yan, Chuxi Wang, Andreanne Lemay, Olafur Gudmundsson, Anna Kiyantseva, Krystal Benitez, Jongho Kim, Jiacong He, Rahul Goutam, James Li, Dylan WangUser Understanding: Simin Li, Sufyan Suliman, Yingjian Ding, Hongbo DengData Science: Armando Ordorica, Yan Chen, Ellie Zhang, Karim WahbaIntroductionPinterest’s mission is to help people discover the inspiration to create a life they love. Our recommendation system serves hundreds of millions of users, surfacing billions of Pins across interests ranging from home renovation to meal planning to wedding decor. The home feed , where much of that discovery happens, is powered by a multi-stage pipelin…

2 months назад @ medium.com
Securing Infrastructure at Scale: Introducing Pinterest’s Resource Provisioner Pipeline (RPP)
Securing Infrastructure at Scale: Introducing Pinterest’s Resource Provisioner Pipeline (RPP) Securing Infrastructure at Scale: Introducing Pinterest’s Resource Provisioner Pipeline (RPP)

Ammar Ekbote | Senior Software EngineerChan Kim | Senior Software EngineerManaging Infrastructure as Code (IaC) across a massive organization comes with a unique set of security and logistical challenges, particularly when operating within a distributed, multi-repository architecture. At Pinterest, we designed the Resource Provisioner Pipeline (RPP), our specialized, proprietary Terraform execution engine to safely manage both critical and non-critical infrastructure changes.In this post, we will look under the hood of the first iteration of the RPP system. We will explore how it established compliance and provides robust security guardrails for our global AWS operations by utilizing dual c…

2 months, 1 week назад @ medium.com
Achieving Near-Linear Training Scalability for Pinterest’s Foundation Models
Achieving Near-Linear Training Scalability for Pinterest’s Foundation Models Achieving Near-Linear Training Scalability for Pinterest’s Foundation Models

Sheng Huang | Software Engineer, AI Platform; Pong Eksombatchai | Machine Learning Engineer, Applied Sciences; Saurabh Vishwas Joshi | Software Engineer, AI Platform; Gaurav Arora | Software Engineer, AI Platform; Karthik Anantha Padmanabhan | Engineering Director, AI PlatformAt Pinterest, foundation models power recommendations for over 600 million monthly active users. Our latest Foundation Model (ACM RecSys 2025) pre-trains on two years of user activity data and is deployed into Home feed and Related Pins ranking, the platform’s two most important recommendation systems. Multi-node distributed training is the key to unlocking the next level of that capacity.¹But when we first attempted m…

3 months назад @ medium.com
Automated Schema Evolution in Pinterest’s Next-Generation DB Ingestion Framework
Automated Schema Evolution in Pinterest’s Next-Generation DB Ingestion Framework Automated Schema Evolution in Pinterest’s Next-Generation DB Ingestion Framework

Yisheng Zhou | Software Engineer IILiang Mou | Sr Staff Software EngineerGabriel Raphael Garcia Montoya | Staff Software EngineerIstvan Podor | Staff Software EngineerIntroductionIn the first post of this series, we introduced Pinterest’s next-generation CDC-based ingestion platform built on Kafka, Flink, Spark, and Iceberg. In production, upstream schemas are constantly evolving, and in a distributed CDC pipeline, schema is not just metadata — it is a cross-system contract spanning ingestion, transformation, storage, and historical backfill. A schema change that is not handled carefully can break Flink jobs, block Spark upserts, or create inconsistencies between online and offline represen…

3 months, 1 week назад @ medium.com
Making User-Sequence Data More Cost-Efficient, Faster, and Easier to Use
Making User-Sequence Data More Cost-Efficient, Faster, and Easier to Use Making User-Sequence Data More Cost-Efficient, Faster, and Easier to Use

Authors (listed alphabetically)Ads Feature Engineering Infra team: Ajay Venkatakrishnan, Le ZhangCore ML Infra team: Eric Shang, Pihui WeiML Data team: Connor Votroubek, Yi HeUser Understanding team: Camilo Munoz, Simin LiIf you work on ranking, retrieval, or recommendation systems, you’ve probably asked for some version of the same thing: “Give me the last N meaningful actions this user took, with the right enrichments, in a format that’s easy to train and serve ML models.”On paper, that sounds simple. In practice, “user sequences” often become one of the most expensive and fragile parts of the ML data stack.They end up powering everything from training datasets to offline analysis and onl…

4 months, 1 week назад @ medium.com
An Engineer’s Guide to Better AI Skills: Implementing a Testing Process to Optimize Agent…
An Engineer’s Guide to Better AI Skills: Implementing a Testing Process to Optimize Agent… An Engineer’s Guide to Better AI Skills: Implementing a Testing Process to Optimize Agent…

An Engineer’s Guide to Better AI Skills: Implementing a Testing Process to Optimize Agent Performance in Any Repository or SkillAuthor: Daniel ReedThe tech industry is currently seeing a massive overhaul in the way we work and many are enjoying the benefits of AI agents, particularly when automating engineer workflows and serving domain-specific knowledge. However, relying on agents to consistently invoke a custom skill can be surprisingly unreliable at times.When adopting a new skill intended to help agents write code for Pinterest’s iOS architecture (I’ll call it rx-mvvm) we discovered that sometimes our knowledge skill wasn’t being loaded into our agents. To address this, we conducted a …

4 months, 2 weeks назад @ medium.com
Enhancing Ad Relevance: Integrating Real-Time Context into Sequential Recommender Models
Enhancing Ad Relevance: Integrating Real-Time Context into Sequential Recommender Models Enhancing Ad Relevance: Integrating Real-Time Context into Sequential Recommender Models

Huiqin Xin | Machine Learning Engineer II, Ads Vertical Modeling; Lakshmi Manoharan | Senior Machine Learning Engineer, Ads Vertical Modeling; Karthik Jayasurya | Staff Machine Learning Engineer, Ads Signals; Ziwei Guo | Senior Machine Learning Engineer, Ads Vertical Modeling; Alina Liviniuk | Machine Learning Engineer II, Ads Vertical ModelingMotivation: The Need for Real-Time ContextIn a previous post, Ads Candidate Generation using Behavioral Sequence Modeling, we introduced a candidate generator (CG) that uses a Transformer-based two-tower model to leverage a user’s offsite conversion history — a powerful signal — to predict future interactions with advertisers and specific products. Th…

4 months, 3 weeks назад @ medium.com
Optimizing ML Workload Network Efficiency (Part I): Feature Trimmer
Optimizing ML Workload Network Efficiency (Part I): Feature Trimmer Optimizing ML Workload Network Efficiency (Part I): Feature Trimmer

Guangtong Bai | Staff Software Engineer, Product ML Infrastructure*; Shantam Shorewala | Software Engineer II, Product ML Infrastructure*; Chi Zhang | Staff Software Engineer, AI Platform*; Neha Upadhyay | Software Engineer II, AI Platform*; Haoyang Li | Director, Product ML Infrastructure*These authors contributed equally to this article.BackgroundAt Pinterest, our online ML serving systems employ a root-leaf architecture. On a high level, the architecture looks as follows:Figure 1: Root-leaf Architecture of Online ML Serving Systems at PinterestIn the diagram, “Client Service” is responsible for recommending organic or promoted Pins to users. In order to know if a given Pin is relevant to…

5 months назад @ medium.com
From Clicks to Conversions: Architecting Shopping Conversion Candidate Generation at Pinterest
From Clicks to Conversions: Architecting Shopping Conversion Candidate Generation at Pinterest From Clicks to Conversions: Architecting Shopping Conversion Candidate Generation at Pinterest

Authors: Richard Huang | Machine Learning Engineer II; Yu Liu | Senior Machine Learning Engineer; Ziwei Guo | Senior Machine Learning Engineer; Andy Mao | Staff Machine Learning Engineer; Supeng Ge | Sr. Staff Machine Learning EngineerIntroductionAt Pinterest, conversion ads are crucial for matching users with products they are likely to purchase, boosting value for both users and advertisers¹. While conversion actions like checkout or add-to-cart are highly valuable, they are also technically challenging to optimize for. Because they occur offsite, conversion events are significantly sparser and noisier than onsite engagement signals. Historically, Pinterest’s shopping ads retrieval relied…

5 months назад @ medium.com
Facebook
последний пост 3 weeks, 6 days назад
An Organizational Second Brain: Building an AI That Learns From Experts
An Organizational Second Brain: Building an AI That Learns From Experts

We’ve built an AI agent that acts as a secondary expert for a given domain, making deep specialist knowledge readily available and preserved for anyone in an organization to access, share, and build upon. This is not a typical domain-specific agent. Its novelty comes from integrating two layers: A structured, auditable knowledge architecture separates what [...]

Read More...

The post An Organizational Second Brain: Building an AI That Learns From Experts appeared first on Engineering at Meta.

3 weeks, 6 days назад @ engineering.fb.com
From User Sequences to Scaling Laws: A Multi-Stage Architecture for Meta’s Ads Ranking
From User Sequences to Scaling Laws: A Multi-Stage Architecture for Meta’s Ads Ranking

Every day, Meta’s recommendation platforms handle billions of user interactions, generating rich temporal signals that capture individual preferences and intent across products, ads, and content. In our 2024 post on sequence learning for ads recommendations, we showed how modeling the order and timing of user actions (rather than relying on static, manually engineered sparse features) [...]

Read More...

The post From User Sequences to Scaling Laws: A Multi-Stage Architecture for Meta’s Ads Ranking appeared first on Engineering at Meta.

1 month, 3 weeks назад @ engineering.fb.com
GEM Training: How Meta Doubled the Efficiency of Its LLM-Scale Ads Foundation Model
GEM Training: How Meta Doubled the Efficiency of Its LLM-Scale Ads Foundation Model

Meta’s Generative Ads Recommendation Model (GEM), the foundation model behind ads recommendations across Instagram and Facebook, now trains at LLM scale on several thousand of the latest-generation GPUs. This post goes into the details on how we achieved: doubling end-to-end (E2E) training efficiency to 20–25% Model FLOPs Utilization (MFU) while scaling training FLOPs 4x in [...]

Read More...

The post GEM Training: How Meta Doubled the Efficiency of Its LLM-Scale Ads Foundation Model appeared first on Engineering at Meta.

1 month, 3 weeks назад @ engineering.fb.com
Exploring Hierarchical Interest Representation For Meta Ads Deep Funnel Optimization
Exploring Hierarchical Interest Representation For Meta Ads Deep Funnel Optimization

Hierarchical Interest Representation is a research area for Meta Ads. We’re exploring an upstream representation layer over the universe of Ads entities – users, advertisers, products, services – learning unified embeddings that connect users’ inferred interests with the breadth of what advertisers offer in their deep funnel ads. The innovations in Hierarchical Interest Representation are [...]

Read More...

The post Exploring Hierarchical Interest Representation For Meta Ads Deep Funnel Optimization appeared first on Engineering at Meta.

2 months, 2 weeks назад @ engineering.fb.com
Modernizing the Meta Ads Service With an Open-Source Kernel Scheduler
Modernizing the Meta Ads Service With an Open-Source Kernel Scheduler

TL; DR At Meta’s scale, a few milliseconds of latency degradation can have a significant negative impact on ads performance. When a Linux kernel upgrade risked regressing latency across Meta’s ad serving fleet, we turned to sched_ext — the upstream, BPF-based extensible scheduling framework — to build a scheduling policy customized to the Ads delivery [...]

Read More...

The post Modernizing the Meta Ads Service With an Open-Source Kernel Scheduler appeared first on Engineering at Meta.

2 months, 2 weeks назад @ engineering.fb.com
10 Years of Meta’s Commitment to Python
10 Years of Meta’s Commitment to Python

This year marks Meta’s 10th consecutive year as a sponsor of the Python Software Foundation (PSF), the charitable organization dedicated to advancing, supporting, and protecting the open-source Python programming language and the community that sustains it. Python is one of the world’s most influential programming languages, and we use it across our engineering stack, from [...]

Read More...

The post 10 Years of Meta’s Commitment to Python appeared first on Engineering at Meta.

3 months назад @ engineering.fb.com
Privacy-Aware Infrastructure in the AI-Native Era: An Asset Classification Case Study
Privacy-Aware Infrastructure in the AI-Native Era: An Asset Classification Case Study

Privacy controls — systems that enforce retention, access, allowed-purpose, downstream-sharing, or anonymization policies — require a reliable understanding of data to function. Before such a control can operate effectively, it must know exactly what it is looking at. This can be complex, as demonstrated by a field simply named “age“: In one context, it might [...]

Read More...

The post Privacy-Aware Infrastructure in the AI-Native Era: An Asset Classification Case Study appeared first on Engineering at Meta.

3 months назад @ engineering.fb.com
SilverTorch: Index as Model — A New Retrieval Paradigm for Recommendation Systems
SilverTorch: Index as Model — A New Retrieval Paradigm for Recommendation Systems

We’re introducing SilverTorch, a reimagining of recommendation systems that unifies all retrieval components for user generated content under a unified architecture. SilverTorch shows up to 23.7x higher throughput compared to the state-of-the-art approaches. It’s also showing 20.9x more compute cost efficiency compared to a CPU-based solution while also improving accuracy. Our research paper, “SilverTorch: A [...]

Read More...

The post SilverTorch: Index as Model — A New Retrieval Paradigm for Recommendation Systems appeared first on Engineering at Meta.

4 months назад @ engineering.fb.com
Reel Friends: Building Social Discovery that Scales to Billions
Reel Friends: Building Social Discovery that Scales to Billions

On its face the new Friend Bubbles feature looks simple enough. It highlights Reels your friends have watched and reacted to. But sometimes the features that seem the most straightforward require the deepest engineering work. On this episode of the Meta Tech Podcast, Pascal Hartig chats with Subasree and Joseph, two software engineers from the Facebook [...]

Read More...

The post Reel Friends: Building Social Discovery that Scales to Billions appeared first on Engineering at Meta.

4 months, 2 weeks назад @ engineering.fb.com
Modernizing the Facebook Groups Search to Unlock the Power of Community Knowledge
Modernizing the Facebook Groups Search to Unlock the Power of Community Knowledge

We’ve fundamentally transformed Facebook Groups Search to help people more reliably discover, sort through, and validate community content that’s most relevant to them. We’ve adopted a new hybrid retrieval architecture and implemented automated model-based evaluation to address the major friction points people experience when searching community content. Under this new framework, we’ve made tangible improvements [...]

Read More...

The post Modernizing the Facebook Groups Search to Unlock the Power of Community Knowledge appeared first on Engineering at Meta.

5 months, 1 week назад @ engineering.fb.com
Capacity Efficiency at Meta: How Unified AI Agents Optimize Performance at Hyperscale
Capacity Efficiency at Meta: How Unified AI Agents Optimize Performance at Hyperscale

We’re sharing insights into Meta’s Capacity Efficiency Program, where we’ve built an AI agent platform that helps automate finding and fixing performance issues throughout our infrastructure. By leveraging encoded domain expertise across a unified, standardized tool interface these agents help save power and free up engineers’ time away from addressing performance issues to innovating on [...]

Read More...

The post Capacity Efficiency at Meta: How Unified AI Agents Optimize Performance at Hyperscale appeared first on Engineering at Meta.

5 months, 2 weeks назад @ engineering.fb.com
How Meta Used AI to Map Tribal Knowledge in Large-Scale Data Pipelines
How Meta Used AI to Map Tribal Knowledge in Large-Scale Data Pipelines

AI coding assistants are powerful but only as good as their understanding of your codebase. When we pointed AI agents at one of Meta’s large-scale data processing pipelines – spanning four repositories, three languages, and over 4,100 files – we quickly found that they weren’t making useful edits quickly enough. We fixed this by building [...]

Read More...

The post How Meta Used AI to Map Tribal Knowledge in Large-Scale Data Pipelines appeared first on Engineering at Meta.

5 months, 3 weeks назад @ engineering.fb.com
KernelEvolve: How Meta’s Ranking Engineer Agent Optimizes AI Infrastructure
KernelEvolve: How Meta’s Ranking Engineer Agent Optimizes AI Infrastructure

This is the second post in the Ranking Engineer Agent blog series exploring the autonomous AI capabilities accelerating Meta’s Ads Ranking innovation. The previous post introduced Ranking Engineer Agent’s ML exploration capability, which autonomously designs, executes, and analyzes ranking model experiments. This post covers how to optimize the low-level infrastructure that makes those models run [...]

Read More...

The post KernelEvolve: How Meta’s Ranking Engineer Agent Optimizes AI Infrastructure appeared first on Engineering at Meta.

6 months назад @ engineering.fb.com
Meta Adaptive Ranking Model: Bending the Inference Scaling Curve to Serve LLM-Scale Models for Ads
Meta Adaptive Ranking Model: Bending the Inference Scaling Curve to Serve LLM-Scale Models for Ads

Meta continues to lead the industry in utilizing groundbreaking AI Recommendation Systems (RecSys) to deliver better experiences for people, and better results for advertisers. To reach the next frontier of performance, we are scaling Meta’s Ads Recommender runtime models to LLM-scale & complexity to further a deeper understanding of people’s interests and intent. This increase [...]

Read More...

The post Meta Adaptive Ranking Model: Bending the Inference Scaling Curve to Serve LLM-Scale Models for Ads appeared first on Engineering at Meta.

6 months назад @ engineering.fb.com
AI for American-Produced Cement and Concrete
AI for American-Produced Cement and Concrete

Meta is continuing its long-term roadmap to help the construction industry leverage AI to produce high-quality and more sustainable concrete mixes, as well as those exclusively produced in the United States. Concurrent with the 2026 American Concrete Institute (ACI) Spring Convention, Meta is releasing a new AI model for designing concrete mixes – Bayesian Optimization [...]

Read More...

The post AI for American-Produced Cement and Concrete appeared first on Engineering at Meta.

6 months назад @ engineering.fb.com
Uber Engineering
последний пост None
Spotify Engineering Spotify Engineering
последний пост None
Ripple Engineering Ripple Engineering
последний пост None
Dmitry Anoshin recommends
Snowflake
последний пост None
Cloudera Cloudera
последний пост None
Smart Data
последний пост 10 часов назад
OpenAI’s Government Website Incidents Raise a Hard Question for AI Agents: When Should They Stop?
OpenAI’s Government Website Incidents Raise a Hard Question for AI Agents: When Should They Stop?

OpenAI disclosed on Sept. 25 that its AI models had accessed public information

10 часов назад @ smartdatacollective.com
11 Best Sisense Alternatives for Embedded Analytics
11 Best Sisense Alternatives for Embedded Analytics

A practical comparison of 11 Sisense alternatives for teams building customer-facing embedded analytics.

2 weeks назад @ smartdatacollective.com
8 MCP Tools for Market and Consumer Intelligence Workflows
8 MCP Tools for Market and Consumer Intelligence Workflows

No single MCP tool does it all: the right stack combines search, extraction, cited synthesis, workflow control, and verified consumer data.

3 weeks, 3 days назад @ smartdatacollective.com
How Local Service Businesses Can Map Which Neighborhoods Generate the Most Revenue
How Local Service Businesses Can Map Which Neighborhoods Generate the Most Revenue

Revenue mapping compares paid invoices, job volume, and crew time by neighborhood to reveal where local service work is most profitable.

1 month назад @ smartdatacollective.com
How Business Intelligence Can Help Small Businesses Build Better Decision Rules
How Business Intelligence Can Help Small Businesses Build Better Decision Rules

Business intelligence turns recurring patterns in inventory, invoices, and costs into clear decision rules that prompt faster, more consistent action.

1 month назад @ smartdatacollective.com
18 Machine Learning Companies Worth Shortlisting in 2026 (And How to Hire One)
18 Machine Learning Companies Worth Shortlisting in 2026 (And How to Hire One)

These top artificial intelligence and machine learning companies are providing great options for anyone interested in AI or machine learning.

1 month, 2 weeks назад @ smartdatacollective.com
The Data Trends Shaping Analytics in 2026: 10 Shifts Worth Funding
The Data Trends Shaping Analytics in 2026: 10 Shifts Worth Funding

A practical guide to the current data trends worth funding in 2026: what changes, who feels it first, and what to do about each one in the next twelve months.

1 month, 2 weeks назад @ smartdatacollective.com
The 10 Best Analytics Tools in 2026, Grouped by Job
The 10 Best Analytics Tools in 2026, Grouped by Job

Top analytics tools grouped by the job they do, from business intelligence to data science, with pricing models, honest drawbacks and the ones we cut.

1 month, 2 weeks назад @ smartdatacollective.com
Data Modeling Tools: 14 Picks Compared by Modeling Layer in 2026
Data Modeling Tools: 14 Picks Compared by Modeling Layer in 2026

A layer-by-layer comparison of 14 data modeling tools, covering licensing, deployment, and round-tripping so teams can match each product to the right job.

1 month, 2 weeks назад @ smartdatacollective.com
5 Common Mistakes Businesses Make During the Risk Assessment Process
5 Common Mistakes Businesses Make During the Risk Assessment Process

A sound risk assessment stays current, uses clear scoring, and ties every treatment decision to an accountable owner, budget, and audit trail.

1 month, 2 weeks назад @ smartdatacollective.com
Protecting Brand Reputation During Digital Expansion
Protecting Brand Reputation During Digital Expansion

Tech founders protect their brand reputation during digital expansion by backing executive messaging with verified operational data and consistent metrics.

1 month, 2 weeks назад @ smartdatacollective.com
Building a Reliable Data Governance Foundation for Digital Expansion
Building a Reliable Data Governance Foundation for Digital Expansion

Strong data governance and quality management protects brand reputation during digital expansion by eliminating duplicate records and unifying customer communications.

1 month, 3 weeks назад @ smartdatacollective.com
Best Age Estimation Software in 2026: Which Facial Age Providers Actually Hold Up
Best Age Estimation Software in 2026: Which Facial Age Providers Actually Hold Up

A practical comparison of facial age estimation providers, focusing on independently validated accuracy, demographic bias, and fallback checks at legal age thresholds.

1 month, 3 weeks назад @ smartdatacollective.com
6 Top Agentic SDLC Platforms for Enterprise Engineering Organizations
6 Top Agentic SDLC Platforms for Enterprise Engineering Organizations

These six agentic SDLC platforms help enterprise teams govern AI agents across planning, delivery, operations, and compliance without sacrificing human accountability.

1 month, 3 weeks назад @ smartdatacollective.com
6 Best Runtime Intelligence Tools for Debugging AI-Generated Code in 2026
6 Best Runtime Intelligence Tools for Debugging AI-Generated Code in 2026

These six runtime intelligence tools show where AI-generated code succeeds or fails under real production traffic, giving agents and engineers the context to fix it.

1 month, 3 weeks назад @ smartdatacollective.com
Knoldus
последний пост None
We Cloud Data We Cloud Data
последний пост 5 days, 5 hours назад
How to Move AI From Prototype to Production
How to Move AI From Prototype to Production

Following the insights from LEAP 2026, AI has officially moved beyond the realm of experimentation. Organizations are no longer asking whether AI works; they are asking a much harder, operational question: How do we actually put AI into production? A prototype can demonstrate that a concept is possible in a controlled environment. However, production-ready AI […]

The post How to Move AI From Prototype to Production appeared first on WeCloudData.

5 days, 5 hours назад @ weclouddata.com
LEAP 2026: Inside Saudi Arabia’s AI Future
LEAP 2026: Inside Saudi Arabia’s AI Future

For four days in Riyadh, thousands of technology leaders, investors, startups, government organizations, and innovators gathered around a question that is becoming increasingly difficult for businesses to ignore: What does it actually take to turn AI ambition into real-world impact? That question was at the heart of LEAP 2026, held in Riyadh from August 31 […]

The post LEAP 2026: Inside Saudi Arabia’s AI Future appeared first on WeCloudData.

1 week, 5 days назад @ weclouddata.com
Saudi Arabia’s Year of AI (2026): What Vision 2030’s Pivot Means for Businesses
Saudi Arabia’s Year of AI (2026): What Vision 2030’s Pivot Means for Businesses

In March 2026, the Saudi Cabinet, chaired by Crown Prince and Prime Minister Mohammed bin Salman, made a landmark national announcement: officially designating 2026 as the “Year of Artificial Intelligence.” For technology leaders, enterprise executives, and founders tracking the Middle East, this declaration represents far more than a ceremonial theme. It marks the strategic acceleration […]

The post Saudi Arabia’s Year of AI (2026): What Vision 2030’s Pivot Means for Businesses appeared first on WeCloudData.

3 weeks назад @ weclouddata.com
7 AI Skills Every Professional Needs in 2026 (Beyond Prompt Engineering)
7 AI Skills Every Professional Needs in 2026 (Beyond Prompt Engineering)

When generative AI entered the mainstream, prompt engineering was often described as the next essential workplace skill. While writing effective prompts remains useful, today’s AI systems are increasingly capable of understanding natural language with minimal effort. As AI becomes embedded in everyday work, the skills that create long-term value are shifting. Organizations are no longer […]

The post 7 AI Skills Every Professional Needs in 2026 (Beyond Prompt Engineering) appeared first on WeCloudData.

1 month, 3 weeks назад @ weclouddata.com
How to Build AI Workflows That Actually Save Time
How to Build AI Workflows That Actually Save Time

Artificial intelligence adoption is moving beyond simple experimentation. A few years ago, organizations asked, “What can AI do?” Today, the question has changed to, “How can we integrate AI into the way we work?” Tools like ChatGPT, Claude, and Gemini have made AI accessible to millions of professionals, but simply having access to AI tools […]

The post How to Build AI Workflows That Actually Save Time appeared first on WeCloudData.

2 months назад @ weclouddata.com
How to Choose the Right AI Model for Your Team: An Enterprise Framework
How to Choose the Right AI Model for Your Team: An Enterprise Framework

Licensing AI models for an enterprise workforce is no longer as simple as handing out software subscriptions. Giving 100 employees unguided access to ChatGPT without an operational strategy creates wasted budget, compliance landmines, and low-value usage. As outlined in our analysis of ChatGPT vs Claude vs Gemini, individual models excel at distinctly different tasks. Choosing […]

The post How to Choose the Right AI Model for Your Team: An Enterprise Framework appeared first on WeCloudData.

2 months, 1 week назад @ weclouddata.com
ChatGPT vs Claude vs Gemini: How to Choose the Right AI Model for Every Task
ChatGPT vs Claude vs Gemini: How to Choose the Right AI Model for Every Task

Choosing an AI model has become more complicated than simply asking which one is “best.” ChatGPT, Claude, and Gemini each excel in entirely different areas—from creative writing and complex software engineering to deep research and seamless enterprise collaboration. Rather than searching for a single winner based on fleeting benchmark scores, organizations and individuals should understand […]

The post ChatGPT vs Claude vs Gemini: How to Choose the Right AI Model for Every Task appeared first on WeCloudData.

2 months, 2 weeks назад @ weclouddata.com
Build AI Capabilities Across Your Organization: A Practical Enterprise Framework
Build AI Capabilities Across Your Organization: A Practical Enterprise Framework

Artificial intelligence is no longer a future initiative for most organizations. Across industries, leaders are experimenting with AI-powered tools, deploying copilots, exploring AI agents, and identifying opportunities to automate workflows. Yet despite growing investment, many organizations struggle to move beyond isolated pilots. The challenge is rarely a lack of technology. More often, organizations discover that […]

The post Build AI Capabilities Across Your Organization: A Practical Enterprise Framework appeared first on WeCloudData.

2 months, 3 weeks назад @ weclouddata.com
Designing AI-Enabled Workflows for Logistics and Supply Chain Teams
Designing AI-Enabled Workflows for Logistics and Supply Chain Teams

Most logistics and supply chain organizations aren’t hurting for technology. They already run on a robust stack of enterprise software. Yet, walk into almost any operations hub, and you’ll still find teams caught in a cycle of manual coordination, fragmented decision-making, and reactive fire-fighting. The bottleneck is no longer access to data or software; it’s […]

The post Designing AI-Enabled Workflows for Logistics and Supply Chain Teams appeared first on WeCloudData.

2 months, 4 weeks назад @ weclouddata.com
Understanding Logistics and AI
Understanding Logistics and AI

The logistics industry generates enormous amounts of data every day—from fluctuating inventory levels and real-time shipment tracking to warehouse throughput metrics and shifting customer demands. As global supply chains grow increasingly complex and volatile, traditional, rule-based systems are no longer enough to keep pace. To navigate these challenges, forward-thinking organizations are turning to artificial intelligence […]

The post Understanding Logistics and AI appeared first on WeCloudData.

3 months назад @ weclouddata.com
How Financial Services Teams can use AI Agents
How Financial Services Teams can use AI Agents

The financial services industry has long relied on traditional automation to improve efficiency and reduce risk. The introduction of agentic ai in financial services represents the next stage of this evolution by enabling systems to reason, retrieve information, and execute complex, multi-step workflows with minimal human intervention. Rather than replacing professionals, ai agents in financial […]

The post How Financial Services Teams can use AI Agents appeared first on WeCloudData.

3 months, 2 weeks назад @ weclouddata.com
The Rise of AI Agents in Organizations
The Rise of AI Agents in Organizations

For the past few years, artificial intelligence has primarily functioned as an assistant—answering questions, generating content, and helping employees work more efficiently. If you needed a summary of a report, a draft of an email, or a line of code, you prompted a chatbot, and it was delivered. But we are transitioning into the next […]

The post The Rise of AI Agents in Organizations appeared first on WeCloudData.

3 months, 3 weeks назад @ weclouddata.com
7 New AI Roles Organizations Are Hiring For in 2026
7 New AI Roles Organizations Are Hiring For in 2026

When organizations first began experimenting with artificial intelligence, responsibility often fell to a handful of data scientists or isolated IT teams. Today, AI adoption is transitioning into an enterprise-wide initiative, creating a surging demand for entirely new AI roles that blend technical expertise, business strategy, governance, and workforce enablement. The emergence of these positions reveals […]

The post 7 New AI Roles Organizations Are Hiring For in 2026 appeared first on WeCloudData.

3 months, 4 weeks назад @ weclouddata.com
Designing a Custom AI Training Program for Legal and Compliance Teams
Designing a Custom AI Training Program for Legal and Compliance Teams

Everyone is talking about AI efficiency, but in a corporate legal or compliance department, a single unverified AI output can lead to severe consequences. If an AI tool hallucinates a case citation, leaks a privileged document to a public training set, or fails to spot a non-compliance clause, the cost isn’t just a bad draft—it’s […]

The post Designing a Custom AI Training Program for Legal and Compliance Teams appeared first on WeCloudData.

4 months, 1 week назад @ weclouddata.com
Understanding AI for Law and Legal Regulatory Affairs
Understanding AI for Law and Legal Regulatory Affairs

In 2026, the legal and regulatory landscape is moving faster than ever. Legal departments and compliance teams are currently facing a “quadruple threat”: a massive surge in document volume, a 500% increase in global regulatory changes over the last decade, constant pressure to improve operational efficiency, and the non-negotiable need to maintain strict data governance […]

The post Understanding AI for Law and Legal Regulatory Affairs appeared first on WeCloudData.

4 months, 1 week назад @ weclouddata.com
Learn Data Engineering
последний пост None
SCRIBD
последний пост 2 months, 2 weeks назад
Stop Building Models. Start Building Systems.
Stop Building Models. Start Building Systems. Stop Building Models. Start Building Systems.

LLM models change. Prompt quality changes. Cost changes. We assumed that from day one.

So instead of building a one-off system tied to a specific model or a single “perfect prompt,” we focused on a repeatable process that we successfully applied to two large-scale projects (Slideshare and Scribd). That repeatable process is what we’re sharing. What We Achieved

This process enabled projects that normally require far more people and time: Slideshare: scanned tens of millions of slideshows, classifying each against adult-related content categories (e.g., sexually explicit content, drugs, alcohol, tobacco) and flagging the small fraction that matched.

Scribd: scanned hundreds of millions of doc…

2 months, 2 weeks назад @ tech.scribd.com
Dual-Embedding Trust Scoring
Dual-Embedding Trust Scoring Dual-Embedding Trust Scoring

Scribd is a digital library serving academics and lifelong learners, offering hundreds of millions of documents. This very nature presents a significant concern: content trust and safety. Protecting our library from undesirable and unsafe content is a top priority, but the multilingual and multimodal (text and images) nature of our platform makes this mission very challenging. Also, while third-party tools exist, they often fall short, lacking the nuance to handle our specific trust and safety categories.

To this end, we capitalized on Generative AI (GenAI) signals and our proprietary multilingual embeddings, in conjunction with classical machine learning methods, to develop our Content Tru…

7 months назад @ tech.scribd.com
Screaming in the Cloud
Screaming in the Cloud

Scribd has absolutely fascinating data-at-scale type problems, all the way

down to the fundamentals of how we use AWS S3. In my previous

post I wrote about the design of Content

Crush and how Scribd is consolidating objects in S3 to minimize our costs.

Related to that work I was fortunate enough to join the (in)famous Corey

Quinn to talk about Engineering around Extreme S3 scale:

Checking if files are damaged? $100K. Using newer S3 tools? Way too expensive.

Normal solutions don’t work anymore. Tyler shares how with this much data, you

can’t just throw money at the problem, but rather you have to engineer your way

out.

You can also listen

On Everand

or watch via the Last Week in AWS YouTube …

7 months, 3 weeks назад @ tech.scribd.com
Deploying a Cost-Effective, Scalable PhotoDNA System for CSAM Detection
Deploying a Cost-Effective, Scalable PhotoDNA System for CSAM Detection Deploying a Cost-Effective, Scalable PhotoDNA System for CSAM Detection

Child safety is a non‑negotiable responsibility for any platform that hosts user‑generated content. Over the last year, we designed and deployed a production system that detects known Child Sexual Abuse Material (CSAM) using PhotoDNA perceptual hashes, integrates with the National Center for Missing and Exploted Children’s (NCMEC) reporting system, and scales efficiently across our ingestion surfaces. This post explains the problem we set out to solve, how PhotoDNA hashing works, the online child-protection ecosystem (NCMEC, Tech Coalition, Project Lantern), our architecture and operational model, cost considerations, and key learnings.

Note: This article discusses safety technology at a hi…

8 months, 1 week назад @ tech.scribd.com
Supercharging S3 Intelligent Tiering with Content Crush
Supercharging S3 Intelligent Tiering with Content Crush Supercharging S3 Intelligent Tiering with Content Crush

Scribd and Slideshare have been using AWS S3 for almost twenty years and

store hundreds of billions of objects making storage management quite a

challenge. My focus at Scribd has generally been around data and storage but

only in the past twelve months have I started to really focus on one of our

hardest technology problems: cost-effective storage and availability for the

hundreds of billions of objects that represent our content library.

Since adopting S3 for our object storage in 2007 a lot has changed with the service, most

notably Intelligent

Tiering which was

introduced in

2018.

At a very high level Intelligent Tiering allows object access patterns to

dictate the storage tier for a sma…

8 months, 2 weeks назад @ tech.scribd.com
Don’t hardcode IAM credentials in GitHub!
Don’t hardcode IAM credentials in GitHub! Don’t hardcode IAM credentials in GitHub!

Scribd deploys a lot of code from GitHub to AWS using GitHub Actions, which

means many of our Actions need to access AWS resources. Managing AWS API keys

and tokens for different IAM users is time-consuming, brittle, and insecure.

Managing key-distribution between AWS and GitHub also makes it difficult to

track which keys go where, when they should be rotated, and what permissions

those keys have. Fortunately AWS supports creating OpenID Connect identity

providers

which is an ideal tool handle this kind of cross-cloud authentication in a more

maintainable way.

From the AWS documentation: IAM OIDC identity providers are entities in IAM that describe an external

identity provider (IdP) servic…

8 months, 3 weeks назад @ tech.scribd.com
Jesse Anderson Jesse Anderson
последний пост None
Data Quest
последний пост None
Infrastructure
AWS
последний пост 2 часа назад
Bring near-Astra intelligence to everyday work with GPT-6.1 Sol on Amazon Bedrock
Bring near-Astra intelligence to everyday work with GPT-6.1 Sol on Amazon Bedrock

GPT-6.1 Sol is now generally available on Amazon Bedrock, bringing stronger reasoning to coding, computer use, and professional workloads that run frequently.

2 часа назад @ aws.amazon.com
Prompt engineering fundamentals for Amazon Quick
Prompt engineering fundamentals for Amazon Quick

Prompt engineering in Amazon Quick shapes how accurately its AI-powered features respond to your requests. Part 1 of a two-part series covers the foundational principles and reusable frameworks (specificity, context-setting, few-shot examples, and the CRISPE framework) for consistent, high-quality results across Amazon Quick.

5 часов назад @ aws.amazon.com
Prompt engineering by Quick component: Patterns and pitfalls
Prompt engineering by Quick component: Patterns and pitfalls

Part 2 of our Amazon Quick prompt engineering series goes component by component. Learn the prompt patterns that get the best results from Amazon Quick Research, Quick Flows, Quick Sight, chat agents, and action integrations, plus the common pitfalls to avoid.

5 часов назад @ aws.amazon.com
Building an LLM-powered DAG failure analysis plugin for Amazon MWAA
Building an LLM-powered DAG failure analysis plugin for Amazon MWAA

Debugging Apache Airflow DAG failures across services like AWS Glue, Amazon EMR, and Amazon Athena is slow and manual. In this post, we show you how to build a custom Airflow plugin that integrates with Amazon Bedrock to automatically analyze DAG task failures and deliver on-demand root cause analysis on Amazon MWAA.

6 часов назад @ aws.amazon.com
Building an AI-powered contract intelligence platform with Amazon Quick and Amazon Bedrock AgentCore
Building an AI-powered contract intelligence platform with Amazon Quick and Amazon Bedrock AgentCore

Manually extracting data from hundreds of vendor contracts doesn't scale, and RAG chat tools fall short on portfolio-wide questions. This post shares a contract intelligence platform on AWS that uses AI agents to extract and verify contract fields, then answers aggregate and single-contract questions through Amazon Quick analytics.

6 часов назад @ aws.amazon.com
Announcing Spark Connect on Amazon EMR on EKS: Interactive PySpark development, anywhere
Announcing Spark Connect on Amazon EMR on EKS: Interactive PySpark development, anywhere

Announcing Spark Connect on Amazon EMR on EKS: build, test, and debug Spark applications from VS Code, PyCharm, Jupyter notebooks, Amazon SageMaker Unified Studio, or dbt, while running full-scale Spark operations on your existing Amazon EKS clusters.

6 часов назад @ aws.amazon.com
Aurora PostgreSQL zero-ETL integration with Amazon SageMaker
Aurora PostgreSQL zero-ETL integration with Amazon SageMaker

Amazon Aurora PostgreSQL zero-ETL integration with Amazon SageMaker replicates your operational data to a lakehouse in near real time, without building custom ETL pipelines. Learn the architecture and change data capture mechanics, then set up the integration and query your data in Amazon SageMaker.

6 часов назад @ aws.amazon.com
Building a Slack-powered AI development agent with Kiro CLI and headless authentication
Building a Slack-powered AI development agent with Kiro CLI and headless authentication

Every code review discussion, incident response thread, and standup happens in Slack. But when an engineer needs to analyze a service or debug a failing test, they leave Slack, open a terminal, navigate to the repository, run commands, and paste the output back. That round trip takes 30 seconds for someone who knows exactly where […]

6 часов назад @ aws.amazon.com
Accelerating development workflows with Kiro CLI as a Pre-Commit and Git Hook Agent
Accelerating development workflows with Kiro CLI as a Pre-Commit and Git Hook Agent

Code review feedback is most valuable when it arrives early. A security vulnerability caught in a pull request saves hours. The same vulnerability caught in production costs days. But what if you could catch it before the code even leaves the developer’s machine – at the time of git commit? Git hooks run automatically at […]

6 часов назад @ aws.amazon.com
How Condé Nast built multimodal video discovery with Amazon Bedrock
How Condé Nast built multimodal video discovery with Amazon Bedrock

Condé Nast's editorial teams spent an average of 250 minutes per task searching a library of more than 140,000 videos using only titles and descriptions. Working with the AWS Generative AI Innovation Center, they built a multimodal video discovery solution on Amazon Bedrock and Amazon OpenSearch Service that cut discovery time to under 2 minutes.

6 часов назад @ aws.amazon.com
Grok 4.7 is now available on Amazon Bedrock
Grok 4.7 is now available on Amazon Bedrock

xAI's Grok 4.7 is now available on Amazon Bedrock: a frontier model for coding, long-running agents, and knowledge work. It offers a 500K token context window and four configurable reasoning effort levels, reachable through the Responses, Chat Completions, and Converse APIs.

1 day назад @ aws.amazon.com
How Property Finder automated incident management with AWS DevOps Agent
How Property Finder automated incident management with AWS DevOps Agent

Property Finder built end-to-end autonomous incident management with AWS DevOps Agent. The full lifecycle, from alert to root cause analysis, Jira ticket, on-call page, and an auto-remediation pull request, completes in 14 minutes, down from 2 to 3 days for detection alone.

1 day, 3 hours назад @ aws.amazon.com
Introducing Claude Sonnet 5.5 on AWS
Introducing Claude Sonnet 5.5 on AWS

Claude Sonnet 5.5 is now available on Amazon Bedrock and Claude Platform on AWS. It's a smarter, more efficient Sonnet model for focused coding and knowledge work, with a lower cost per task at faster speed. This post covers what's new, when to choose Sonnet, and how to get started.

1 day, 3 hours назад @ aws.amazon.com
Resolving query plan regressions after a MySQL engine upgrade
Resolving query plan regressions after a MySQL engine upgrade

After a major or minor version upgrade on Amazon Aurora MySQL or Amazon RDS for MySQL, some queries regress because the optimizer's cost models, defaults, and execution strategies change. This post walks through a diagnostic workflow that traces each regression to the specific version change behind it and applies the right fix.

1 day, 5 hours назад @ aws.amazon.com
Build real-time voice applications with vLLM-Omni on SageMaker AI – Part 1
Build real-time voice applications with vLLM-Omni on SageMaker AI – Part 1

Deploy a text-to-speech model on Amazon SageMaker AI with the AWS vLLM-Omni Deep Learning Container and stream generated speech over a persistent bidirectional connection. This Part 1 tutorial deploys Qwen3-TTS and streams speech through a Gradio application.

1 day, 6 hours назад @ aws.amazon.com
AWS
последний пост 2 часа назад
Generate images and video with vLLM-Omni on SageMaker AI – Part 2
Generate images and video with vLLM-Omni on SageMaker AI – Part 2

Deploy two generative media models from one AWS vLLM-Omni Deep Learning Container on Amazon SageMaker AI. Generate an image with FLUX.2-klein through real-time inference, then animate it into video with Wan2.1-VACE through asynchronous inference, and retrieve the MP4 from Amazon S3.

1 day, 6 hours назад @ aws.amazon.com
Audit trails for autonomous agents with AWS DevOps Agent
Audit trails for autonomous agents with AWS DevOps Agent

AWS DevOps Agent investigates production incidents and proposes or applies fixes on your behalf, raising two questions for every operation and security review: what did the agent do, and how do you understand its impact? Learn how to build a durable, low-maintenance audit trail using the agent journal, Amazon EventBridge lifecycle events, and AWS CloudTrail.

1 day, 6 hours назад @ aws.amazon.com
Implementing synthetic monitoring using Amazon Nova Act
Implementing synthetic monitoring using Amazon Nova Act

Learn an agent-driven approach to synthetic monitoring using Amazon Nova Act and Amazon Bedrock AgentCore. The post covers the architecture and patterns for resilient, managed user-journey validation that moves beyond brittle UI scripts, with a complete sample implementation.

1 day, 6 hours назад @ aws.amazon.com
Automating Amazon Textract adapter lifecycle management across accounts
Automating Amazon Textract adapter lifecycle management across accounts

Learn how to operationalize Amazon Textract Custom Queries adapters for production: infrastructure as code with AWS CloudFormation and Terraform, a cross-account adapter promotion process, a pre-classification routing pattern for multiple form versions, and production security controls such as VPC endpoints, encryption, and least-privilege IAM.

1 day, 6 hours назад @ aws.amazon.com
Getting started with Apache Iceberg write support in Amazon Redshift – Part 3
Getting started with Apache Iceberg write support in Amazon Redshift – Part 3

Amazon Redshift now supports evolving Apache Iceberg table schemas and partition layouts through ALTER statements, with no data rewrites or pipeline rebuilds. In this final post of the series, you rename, add, drop, and widen columns, evolve partitions, and create AWS Lake Formation resource links for governed cross-engine access to Amazon S3 Tables.

1 day, 6 hours назад @ aws.amazon.com
Enforce IAM permissions boundaries for Amazon SageMaker Unified Studio Tooling blueprints
Enforce IAM permissions boundaries for Amazon SageMaker Unified Studio Tooling blueprints

Amazon SageMaker Unified Studio now supports custom permissions boundaries for the IAM roles its Tooling blueprint creates. Learn how to create a permissions boundary that restricts AI agent capabilities, configure it on the Tooling blueprint with the AWS CLI, and validate that every provisioned role carries the boundary.

1 day, 6 hours назад @ aws.amazon.com
Scaling MoE reinforcement learning on Amazon EKS with EFA and DeepEP with 40% more throughput
Scaling MoE reinforcement learning on Amazon EKS with EFA and DeepEP with 40% more throughput

Learn how to scale Mixture-of-Experts (MoE) reinforcement learning on Amazon EKS using Elastic Fabric Adapter (EFA) and DeepEP. This post presents an architecture that combines Amazon EKS, EFA, and Amazon S3 and increased aggregate reinforcement learning rollout throughput by 40% for large-scale RLHF and GRPO training.

4 days, 5 hours назад @ aws.amazon.com
How to stream PostgreSQL changes to Amazon S3 with AWS Fargate
How to stream PostgreSQL changes to Amazon S3 with AWS Fargate

In this post, we show you how to build a fully managed, event-driven change data capture (CDC) pipeline. It streams row-level changes from Amazon RDS for PostgreSQL or Amazon Aurora PostgreSQL to Amazon S3 in near real time. You deploy the entire pipeline with a single AWS CloudFormation template, and it can run in private subnets with no internet gateway without exposing resources to the public internet.

4 days, 6 hours назад @ aws.amazon.com
Accelerate multimodal RL training with SkyRL on Amazon SageMaker HyperPod
Accelerate multimodal RL training with SkyRL on Amazon SageMaker HyperPod

Learn how to run SkyRL, an open-source reinforcement learning framework, on Amazon SageMaker HyperPod to post-train a Qwen3-VL-8B vision-language model with GRPO. This walkthrough covers building the container image, launching a Ray cluster from SageMaker Studio, submitting and monitoring the job, and hosting the trained LoRA adapter for inference.

4 days, 6 hours назад @ aws.amazon.com
NarrateAI: production-ready LLM quality assurance on Amazon Bedrock
NarrateAI: production-ready LLM quality assurance on Amazon Bedrock

NarrateAI delivers production-ready LLM quality assurance on Amazon Bedrock. This post details five techniques—adaptive pipeline orchestration, cross-account multi-model failover, real-time streaming evaluation, composite evaluation, and data accuracy verification—that reach about 99% numerical accuracy while streaming responses in real time.

4 days, 6 hours назад @ aws.amazon.com
Deploying real-time personalized speech with Qwen3-TTS on Amazon SageMaker AI
Deploying real-time personalized speech with Qwen3-TTS on Amazon SageMaker AI

Deploy the publicly available Qwen3-TTS-12Hz-1.7B-Base text-to-speech model from Amazon SageMaker JumpStart to a fully managed, real-time endpoint, and clone a voice from a short reference clip. Cross-lingual cloning preserves the speaker's identity across languages.

4 days, 6 hours назад @ aws.amazon.com
How Datacor built self-service rental analytics with Amazon Quick Sight
How Datacor built self-service rental analytics with Amazon Quick Sight

Learn how Datacor built a self-service rental analytics experience for gas and welding distributors by embedding Amazon Quick Sight dashboards and natural language querying into its TrackAbout platform, powered by an automated cross-cloud data pipeline and multi-tenant row-level security.

4 days, 6 hours назад @ aws.amazon.com
Multi-Region training with Amazon SageMaker HyperPod and Qumulo
Multi-Region training with Amazon SageMaker HyperPod and Qumulo

Amazon SageMaker HyperPod and Cloud Native Qumulo let you place training compute in one AWS Region while keeping your dataset in another. This post shares the architecture and validation results from a cross-Region training run, where a remote cluster matched a co-located cluster's throughput after a brief NeuralCache warmup.

4 days, 6 hours назад @ aws.amazon.com
Speaker-labeled transcription with WhisperX on SageMaker AI
Speaker-labeled transcription with WhisperX on SageMaker AI

The AWS WhisperX Deep Learning Container packages Whisper, wav2vec2 forced alignment, and speaker diarization into a GPU-ready image. Learn how to deploy it to Amazon SageMaker AI real-time and asynchronous endpoints for word-level, speaker-labeled transcription, plus the production details that matter: the GPU AMI pin, scaling, and cost controls.

5 days, 6 hours назад @ aws.amazon.com
Build a multi-account AI agent with AgentCore Gateway and MCP
Build a multi-account AI agent with AgentCore Gateway and MCP

Build a multi-account architecture that keeps each team's data in its own AWS account while giving AI agents a unified way to query across them. A central platform account runs the agent using Amazon Bedrock AgentCore Gateway and MCP, while line-of-business accounts expose their data as MCP servers with secure cross-account access and fine-grained authorization.

5 days, 6 hours назад @ aws.amazon.com
Astronomer Astronomer
последний пост None
DBT — Data Build Tool DBT — Data Build Tool
последний пост None
FiveTran FiveTran
последний пост None
DataBricks
последний пост None
Mix
/r/DataEngineering
последний пост 12 часов назад
Why text-to-SQL is not successful?
Why text-to-SQL is not successful?

I thought text-to-SQL will solve adhoc analysis, but still i see companies at all size are unsuccessful. Anyone using Omni / Sigma seen some success. submitted by /u/de4all [link] [comments]

12 часов назад @ reddit.com
Splink 5 – Open-source probabilistic record linkage at billion-row scale
Splink 5 – Open-source probabilistic record linkage at billion-row scale

submitted by /u/RobinL [link] [comments]

16 часов назад @ reddit.com
Advice if anybody could spare some
Advice if anybody could spare some

I am in my final year of college, didn't do much in software engineering. Thought i was the problem (mostly i was) but then i switched to data engineering and turns out I actually do like engineering just - Data Engineering. The things that I do in order to be a junior data engineering after i graduate much for compatible with my own self. I would like advice or just words for the path that i have taken to become a junior data engineer after graduating from college, my current path: I started a month ago with building etl pipelines using python. I use ai to self learn - after i get my scripts written by ai i take my time 1-3 hours understanding each line deeply. I did this for a month and h…

1 day, 2 hours назад @ reddit.com
Does not being open to remote roles hurt my job chances significantly?
Does not being open to remote roles hurt my job chances significantly?

I started a job search recently and I am targeting hybrid or on-site roles in two large metropolitan areas in the Northeast US, as that is where I am based. They're both pretty significant tech hubs. 5 YOE, no sponsorship needed. The weird thing I am noticing, is that the vast majority of roles I receive in my LinkedIn messages from recruiters are fully remote. I never marked myself as open to that and that is just not what I want at this point in my career. I've applied to 20-30 in-office roles over the past couple of weeks on my own time, although no luck there. It seems like the vast majority of job opportunities I am receiving are remote now, and it has been quite frustrating. I'm sure …

1 day, 4 hours назад @ reddit.com
Is Data Engineering Still a Sustainable Career Path for a Junior?
Is Data Engineering Still a Sustainable Career Path for a Junior?

I recently graduated with a BS in Data Science. I'm currently working on skills to become a DE. But after lurking on this subreddit for a few weeks, I'm getting the impression that this is a dying/AI-compromised field and that if you're not a senior right now, your opportunities are slim to none. Furthermore, if you do find an opportunity, most of the ingenuity and "fun" that comes out of the job is slowly being replaced with AI models that can fully generate pipelines and Spark jobs. I'm worried that I'm wasting my time trying to get into this field if in the end it's unsatisfying or worse, unattainable. It feels like I'm constantly seeing doom and gloom posts on this subreddit, and it's r…

1 day, 4 hours назад @ reddit.com
Next level commitment!
Next level commitment! Next level commitment!

You should give up on this and start coaching on focus and commitment. This is some next level commitment to create 400+ queries in Power Query editor Btw, this is to fill a single Spreadsheet in Excel. No words! submitted by /u/Far-Inspection9930 [link] [comments]

1 day, 7 hours назад @ reddit.com
Why is my LinkedIn feed filled with knowledge posts from 20-26 year old Indian guys who are AI experts? How are they getting so accomplished at AI?
Why is my LinkedIn feed filled with knowledge posts from 20-26 year old Indian guys who are AI experts? How are they getting so accomplished at AI?

Hunting for a new job and when I open LinkedIn it’s filled with non-stop AI knowledge and I am wondering if I have become too dumb and slow or if these guys are really working on cutting edge stuff. submitted by /u/Throwaway081920231 [link] [comments]

1 day, 7 hours назад @ reddit.com
Returning after a year of Mat Leave
Returning after a year of Mat Leave

So, I am on mat leave and will be rejoining work in Jan after a year. I have 7 years of experience in the role but I don't think I have the AI skills needed to get my work done. While I was working, we could use cursor to code and review, but I am hearing from colleagues that the pace is just out of the world these days and no one codes anymore. I worry about work I will go back to. As it is, I do feel like I have lost a bit of the context of work because of the long mat leave. To help this, I am constantly doing courses on coursera to feel connected to work. But how do I prep myself to familiarize myself to the job environment and the new working ways of using agents, skills, commands and …

1 day, 9 hours назад @ reddit.com
What is the cheapest way to transfer data from GCS to BQ?
What is the cheapest way to transfer data from GCS to BQ?

Hey everyone, I'm currently looking for a way to reduce the migration cost of moving data from my data lake stored in GCS (Google Cloud Storage) to BQ (BigQuery), which are my current lakehouse tools. Today, we use the load_table_from_uri method for batch loading Parquet files, but it's becoming very expensive because my GCS dataset is in a single-region and my BQ dataset is in a multi-region, which incurs a very high cross-region data transfer fee. However, I'm not sure if there's any way to reduce or improve this data migration process. Below are some specifications about the business rules that impact the choices made for the current process and its cost: What cannot be changed: Buckets …

1 day, 10 hours назад @ reddit.com
Thoughts on AI in DE After Drinking the KoolAid For 10 months
Thoughts on AI in DE After Drinking the KoolAid For 10 months

Currently lead data eng (ic) w/ about 9 yoe at a large-ish adtech company. I've been doing the whole AI song and dance for the past 10 months and I just don't see a future in this career anymore that fits all of us. Earlier in the year I felt differently since it still took a lot of hand holding to get models to produce correct output for small-ish scoped tasks in a # of iterations that was competitive to human counterparts, but w/ better models and better training docs we have it building enterprise pipelines across our entire data eng stack in hours of iterations that would have been like a project that we would need to budget like a month for. It's not always right and obviously we still…

1 day, 18 hours назад @ reddit.com
AI vs Human
AI vs Human

Which one do you feel is more correct? View Poll submitted by /u/morpho4444 [link] [comments]

2 days, 7 hours назад @ reddit.com
Foundry offer
Foundry offer

Let’s say you had this offer on the table: Offer: $210,000 annually for a palantir foundry de role, in person Current: $160,000 for Python-heavy work with mostly on-prem sql servers, mostly remote, salary flat for 2 years I’ve seen nothing but bad things about foundry as a tool. But I’m wondering if it’s bad enough to forgo a big raise in a HCOL area. For the folks that worked with foundry and went back to a more traditional data stack: were the foundry skills transferable or were they just lost years skill-wise? Realistically, it wouldn’t be a permanent career move, but a stint. Edit for clarity: job is not with palantir, it’s a different company using foundry submitted by /u/ursamajorm82 …

2 days, 8 hours назад @ reddit.com
AI has been making me moody about my career
AI has been making me moody about my career

I’m not looking for advice in this post just looking to be heard. But lately I’ve been frustrated with my career path due to AI. it’s just been so overwhelming feeling like I‘m behind with everything when in the last 10 years I’ve worked hard to master my domain. I’ve got kids and life hasn’t exactly given me the free time I needed. spend more time with kids or focus on leveling up in AI to give the kids a better life. I’ve been using AI for work but nothing at the caliber that you hear people creating agents etc. I’ve been using it more as an assistant to help with bolder plate code. Whenever I talk to my peers I just hear about the cool stuff they’ve been building with AI, Im just listeni…

3 days, 3 hours назад @ reddit.com
Is dbt the red-headed stepchild to data engineers?
Is dbt the red-headed stepchild to data engineers?

I know the functions of a "data engineer" can be wide and varied depending on the company, but at my current shop(10 DE's), it seems like every data engineer who's never worked in dbt considers it to be trash or a nuisance, and every one who has, appreciates its functionality. Is this a common theme? What's your experience/role, and what is your perspective? submitted by /u/ntdoyfanboy [link] [comments]

3 days, 6 hours назад @ reddit.com
Do you see that also ?
Do you see that also ?

I see that 1- Frontend mostly ended ( except in big companies) 2- Backend will merge with Ai engineering ( Rag systems…etc) i think this is the new backend 3- Data engineer + data analysis + data science + ML = full stack data engineer ( and that will require high math , statistical skills) and mostly cs degree or Ai degree to have infra statistics and descriptive ( may be master like Data science) I do not know if anyone see that also 🤷 am i alone ? submitted by /u/Glittering_Rip5167 [link] [comments]

3 days, 11 hours назад @ reddit.com
Towards Data Science
последний пост 6 часов назад
I Compacted 1,000 Apache Iceberg Files Into 6. Here’s What Happened to Query Performance.
I Compacted 1,000 Apache Iceberg Files Into 6. Here’s What Happened to Query Performance.

Benchmarking the impact of fewer, larger files across three SQL workloads

The post I Compacted 1,000 Apache Iceberg Files Into 6. Here’s What Happened to Query Performance. appeared first on Towards Data Science.

6 часов назад @ towardsdatascience.com
AI Made Data Scientists Faster. Now It’s Expanding the Job.
AI Made Data Scientists Faster. Now It’s Expanding the Job.

The real shift is bigger than productivity: AI is reshaping ownership, judgment, and the career path of data scientists.

The post AI Made Data Scientists Faster. Now It’s Expanding the Job. appeared first on Towards Data Science.

8 часов назад @ towardsdatascience.com
When All You Have Are Decoders, Every Decision Looks Like Generation
When All You Have Are Decoders, Every Decision Looks Like Generation

Not every decision needs a decoder, generation Is not always a decision

The post When All You Have Are Decoders, Every Decision Looks Like Generation appeared first on Towards Data Science.

8 часов назад @ towardsdatascience.com
How to Design Architectural Guardrails Around AI Agents
How to Design Architectural Guardrails Around AI Agents

Agent design patterns every data engineer must know

The post How to Design Architectural Guardrails Around AI Agents appeared first on Towards Data Science.

9 часов назад @ towardsdatascience.com
Building Fair Evaluation Sets Is a Combinatorial Problem
Building Fair Evaluation Sets Is a Combinatorial Problem

Here’s how to solve it exactly.

The post Building Fair Evaluation Sets Is a Combinatorial Problem appeared first on Towards Data Science.

11 часов назад @ towardsdatascience.com
Guided Merge Sort : An Optimized Sorting that Picks the Best from Ordinary and Multi-Way Merge Sort Algorithms
Guided Merge Sort : An Optimized Sorting that Picks the Best from Ordinary and Multi-Way Merge Sort Algorithms

A solution where the "goto" operator becomes irreplaceable.

The post Guided Merge Sort : An Optimized Sorting that Picks the Best from Ordinary and Multi-Way Merge Sort Algorithms appeared first on Towards Data Science.

1 day, 6 hours назад @ towardsdatascience.com
How to Make Your Own JEV Model from an Open LLM
How to Make Your Own JEV Model from an Open LLM

Turn a small open-source Qwen LLM into a fast, single-pass text classifier by swapping its language-modeling head

The post How to Make Your Own JEV Model from an Open LLM appeared first on Towards Data Science.

1 day, 8 hours назад @ towardsdatascience.com
The AI That Learned to Understand Long After It Stopped Trying
The AI That Learned to Understand Long After It Stopped Trying

A small, strange discovery in machine learning called grokking

The post The AI That Learned to Understand Long After It Stopped Trying appeared first on Towards Data Science.

1 day, 9 hours назад @ towardsdatascience.com
How to Catch Data Drift When Every Feature Looks Normal
How to Catch Data Drift When Every Feature Looks Normal

Detect hidden shifts in feature relationships with adversarial validation and scikit-learn

The post How to Catch Data Drift When Every Feature Looks Normal appeared first on Towards Data Science.

1 day, 11 hours назад @ towardsdatascience.com
GraphRAG with TypeSafe Jev: A System One Approach to Scalable Knowledge Graphs
GraphRAG with TypeSafe Jev: A System One Approach to Scalable Knowledge Graphs

How calibrated decision models can handle high-frequency graph decisions while LLMs remain focused on reasoning, synthesis, and open-ended generation.

The post GraphRAG with TypeSafe Jev: A System One Approach to Scalable Knowledge Graphs appeared first on Towards Data Science.

2 days, 7 hours назад @ towardsdatascience.com
Good Architecture Deletes the Signals Your Agent Depends On
Good Architecture Deletes the Signals Your Agent Depends On

Every boundary you draw removes a signal your tooling was relying on. That is a structure problem, not a search problem.

The post Good Architecture Deletes the Signals Your Agent Depends On appeared first on Towards Data Science.

2 days, 10 hours назад @ towardsdatascience.com
AI Slop Is in Your Training Dataset Now. I Tested Three Ways to Spot It.
AI Slop Is in Your Training Dataset Now. I Tested Three Ways to Spot It.

My AI detectors flagged many genuine reviews, and filtering them made the sentiment model less accurate.

The post AI Slop Is in Your Training Dataset Now. I Tested Three Ways to Spot It. appeared first on Towards Data Science.

3 days, 7 hours назад @ towardsdatascience.com
Your LLM Has a Curved Space of Paragraphs
Your LLM Has a Curved Space of Paragraphs

Inside a transformer, token index is a coordinate. Paragraph structure is what turns it into a metric.

The post Your LLM Has a Curved Space of Paragraphs appeared first on Towards Data Science.

3 days, 10 hours назад @ towardsdatascience.com
10 Things I’m Learning Beyond AI to Become More Technologically Fluent
10 Things I’m Learning Beyond AI to Become More Technologically Fluent

Part 1: Understanding the technologies shaping our future

The post 10 Things I’m Learning Beyond AI to Become More Technologically Fluent appeared first on Towards Data Science.

4 days, 6 hours назад @ towardsdatascience.com
Your Model's MSE Is Lying to You: Part II
Your Model's MSE Is Lying to You: Part II

Autoregressive rollout and uncertainty propagation. Second in a series on probabilistic forecasting for physical signals.

The post Your Model's MSE Is Lying to You: Part II appeared first on Towards Data Science.

4 days, 8 hours назад @ towardsdatascience.com
DE Telegram
DataEng DataEng
последний пост 1 month, 1 week назад
Официальная документация по Python теперь доступна на русском языке: https://blog.python.org/2026/08/the-python-documentation-is-now-available-in-russian/
Официальная документация по Python теперь доступна на русском языке: https://blog.python.org/2026/08/the-python-documentation-is-now-available-in-russian/

Официальная документация по Python теперь доступна на русском языке: https://blog.python.org/2026/08/the-python-documentation-is-now-available-in-russian/

1 month, 1 week назад @ t.me
PostgreSQL 18 изнутриPostgres Pro выпустили новую версию книги про устройство PostgreSQL: PostgreSQL 18 изнутриВ настоящем издании учтены замечания читателей и исправлены опечатки, а также отражены такие новинки версии PostgreSQL 18, как поддержка асинхрон
PostgreSQL 18 изнутриPostgres Pro выпустили новую версию книги про устройство PostgreSQL: PostgreSQL 18 изнутриВ настоящем издании учтены замечания читателей и исправлены опечатки, а также отражены такие новинки версии PostgreSQL 18, как поддержка асинхрон

PostgreSQL 18 изнутриPostgres Pro выпустили новую версию книги про устройство PostgreSQL: PostgreSQL 18 изнутриВ настоящем издании учтены замечания читателей и исправлены опечатки, а также отражены такие новинки версии PostgreSQL 18, как поддержка асинхронного ввода-вывода, изменения в настройке автоочистки и появление оптимизации пропуска.Скачать по ссылке.

2 months, 1 week назад @ t.me
На канале Елизаветы Осетинской вышло интересное интервью с создателем ClickHouse Алексеем Миловидовым: https://www.youtube.com/watch?v=FSGhaMmqWTA
На канале Елизаветы Осетинской вышло интересное интервью с создателем ClickHouse Алексеем Миловидовым: https://www.youtube.com/watch?v=FSGhaMmqWTA

На канале Елизаветы Осетинской вышло интересное интервью с создателем ClickHouse Алексеем Миловидовым: https://www.youtube.com/watch?v=FSGhaMmqWTA

2 months, 2 weeks назад @ t.me
🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня
🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня

🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня без кода запустила AI-бота для изучения английского → первые ~$200 уже в 1 месяцРазные результаты. Разный масштаб. Но общие правила:1. не придумывать «гениальную идею», а брать существующий спрос2. делать простой MVP и быстро запускаться3. докручивать монетизацию и продукт по факту использованияРебята сделали всё без команды, без инвестиций, а самое главное — без ожидания «идеального момента». Да, не у всех получается сразу. И не у всех в…

3 months, 2 weeks назад @ t.me
🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня
🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня

🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня без кода запустила AI-бота для изучения английского → первые ~$200 уже в 1 месяцРазные результаты. Разный масштаб. Но общие правила:1. не придумывать «гениальную идею», а брать существующий спрос2. делать простой MVP и быстро запускаться3. докручивать монетизацию и продукт по факту использованияРебята сделали всё без команды, без инвестиций, а самое главное — без ожидания «идеального момента». Да, не у всех получается сразу. И не у всех в…

3 months, 2 weeks назад @ telegram.me
Приглашаем вас на совместный вебинар AXENIX и вендора BR Systems, посвященный XLTable — OLAP‑системе с широким функционалом для работы с данными ClickHouse и Trino и поддержкой протокола XMLA в Excel.Эксперты подробно расскажут об XLTable и его основных пр
Приглашаем вас на совместный вебинар AXENIX и вендора BR Systems, посвященный XLTable — OLAP‑системе с широким функционалом для работы с данными ClickHouse и Trino и поддержкой протокола XMLA в Excel.Эксперты подробно расскажут об XLTable и его основных пр Приглашаем вас на совместный вебинар AXENIX и вендора BR Systems, посвященный XLTable — OLAP‑системе с широким функционалом для работы с данными ClickHouse и Trino и поддержкой протокола XMLA в Excel.Эксперты подробно расскажут об XLTable и его основных пр

Приглашаем вас на совместный вебинар AXENIX и вендора BR Systems, посвященный XLTable — OLAP‑системе с широким функционалом для работы с данными ClickHouse и Trino и поддержкой протокола XMLA в Excel.Эксперты подробно расскажут об XLTable и его основных преимуществах: быстроте внедрения, отсутствии дублирования данных, снижении затрат на TCO, бессрочной лицензии и других.В рамках вебинара вас ждет:🔸Обзор рынка OLAP-систем🔸Демо системы XL Table от BR Systems🔸Разбор реальных кейсов крупных компанийТакже у вас будет возможность задать свои вопросы.Для участия необходимо зарегистрироваться на сайте. На указанную вами почту придет ссылка на вебинар. Подключайтесь к нам 21 мая в 16:00.До встречи!…

4 months, 2 weeks назад @ t.me
PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга неб
PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга неб

PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга небольшая и без лишней воды, сразу приступает к делу без длительных прелюдий и философских размышлений.Рекомендую 🍻

5 months назад @ t.me
PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга неб
PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга неб

PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга небольшая и без лишней воды, сразу приступает к делу без длительных прелюдий и философских размышлений.Рекомендую 🍻

5 months назад @ telegram.me
Эффективно управлять сложностью можно через абстракции. Например, через практики внедрения дизайн-паттернов, DDD, выбор более высокоуровневых технологий.РасширяемостьТребования к работе приложений меняются, а значит и оно само должно меняться. Чтобы внесен
Эффективно управлять сложностью можно через абстракции. Например, через практики внедрения дизайн-паттернов, DDD, выбор более высокоуровневых технологий.РасширяемостьТребования к работе приложений меняются, а значит и оно само должно меняться. Чтобы внесен

Эффективно управлять сложностью можно через абстракции. Например, через практики внедрения дизайн-паттернов, DDD, выбор более высокоуровневых технологий.РасширяемостьТребования к работе приложений меняются, а значит и оно само должно меняться. Чтобы внесение изменений не превратились в страшный сон необходимо постоянно пересматривать организацию кода, закрывать технический долг, внедрять непрерывное тестирование через практики TDD, XP. Чем проще вносить изменения в систему тем выше её расширяемость и тем ниже связность между её частями.

5 months назад @ telegram.me
Эффективно управлять сложностью можно через абстракции. Например, через практики внедрения дизайн-паттернов, DDD, выбор более высокоуровневых технологий.РасширяемостьТребования к работе приложений меняются, а значит и оно само должно меняться. Чтобы внесен
Эффективно управлять сложностью можно через абстракции. Например, через практики внедрения дизайн-паттернов, DDD, выбор более высокоуровневых технологий.РасширяемостьТребования к работе приложений меняются, а значит и оно само должно меняться. Чтобы внесен

Эффективно управлять сложностью можно через абстракции. Например, через практики внедрения дизайн-паттернов, DDD, выбор более высокоуровневых технологий.РасширяемостьТребования к работе приложений меняются, а значит и оно само должно меняться. Чтобы внесение изменений не превратились в страшный сон необходимо постоянно пересматривать организацию кода, закрывать технический долг, внедрять непрерывное тестирование через практики TDD, XP. Чем проще вносить изменения в систему тем выше её расширяемость и тем ниже связность между её частями.

5 months назад @ t.me
Отказоустойчивость железа достигается через добавление избыточных компонентов, например, в системе может быть несколько жестких дисков, подключенных в режиме RAID-массива. В случае распределённых систем, запросы могут был равномерно распределены между неск
Отказоустойчивость железа достигается через добавление избыточных компонентов, например, в системе может быть несколько жестких дисков, подключенных в режиме RAID-массива. В случае распределённых систем, запросы могут был равномерно распределены между неск

Отказоустойчивость железа достигается через добавление избыточных компонентов, например, в системе может быть несколько жестких дисков, подключенных в режиме RAID-массива. В случае распределённых систем, запросы могут был равномерно распределены между несколькими независимыми машинами внутри дата-центра. Случается и так, что требуется отказоустойчивость на уровне дата-центра, тогда машины распределяют по нескольким физически независимым точкам (например, разные регионы AWS). Важно придерживаться здравого смысла и понимать какого уровня отказоустойчивости вам будет достаточно.Отказоустойчивость кода чуть сложнее. В первую очередь потому что один и тот же код может исполняться на большом пуле…

5 months назад @ t.me
Designing Data-Intensive ApplicationsГлава 2. Defining Nonfunctional RequirementsВторая глава книги посвящена нефункциональным требованиям к разрабатываемым нами системам. Под нефункциональными требованиями автор подразумевает:- Производительность (Perform
Designing Data-Intensive ApplicationsГлава 2. Defining Nonfunctional RequirementsВторая глава книги посвящена нефункциональным требованиям к разрабатываемым нами системам. Под нефункциональными требованиями автор подразумевает:- Производительность (Perform

Designing Data-Intensive ApplicationsГлава 2. Defining Nonfunctional RequirementsВторая глава книги посвящена нефункциональным требованиям к разрабатываемым нами системам. Под нефункциональными требованиями автор подразумевает:- Производительность (Performance)- Надёжность (Reliability) и отказоустойчивость (Fault Tolerance)- Масштабирование (Scalability)- Поддержка (Maintainability)Система может быть полностью корректна с точки зрения функциональных (т.н. бизнес) требований, но неудобна в использования из-за проблем с надёжностью (потеря данных), производительностью (частые “зависания” из-за нагрузки). Поэтому нефункциональным требованиям также необходимо уделять внимание.Мартин во второй …

5 months назад @ t.me
Designing Data-Intensive ApplicationsГлава 2. Defining Nonfunctional RequirementsВторая глава книги посвящена нефункциональным требованиям к разрабатываемым нами системам. Под нефункциональными требованиями автор подразумевает:- Производительность (Perform
Designing Data-Intensive ApplicationsГлава 2. Defining Nonfunctional RequirementsВторая глава книги посвящена нефункциональным требованиям к разрабатываемым нами системам. Под нефункциональными требованиями автор подразумевает:- Производительность (Perform

Designing Data-Intensive ApplicationsГлава 2. Defining Nonfunctional RequirementsВторая глава книги посвящена нефункциональным требованиям к разрабатываемым нами системам. Под нефункциональными требованиями автор подразумевает:- Производительность (Performance)- Надёжность (Reliability) и отказоустойчивость (Fault Tolerance)- Масштабирование (Scalability)- Поддержка (Maintainability)Система может быть полностью корректна с точки зрения функциональных (т.н. бизнес) требований, но неудобна в использования из-за проблем с надёжностью (потеря данных), производительностью (частые “зависания” из-за нагрузки). Поэтому нефункциональным требованиям также необходимо уделять внимание.Мартин во второй …

5 months назад @ telegram.me
Отказоустойчивость железа достигается через добавление избыточных компонентов, например, в системе может быть несколько жестких дисков, подключенных в режиме RAID-массива. В случае распределённых систем, запросы могут был равномерно распределены между неск
Отказоустойчивость железа достигается через добавление избыточных компонентов, например, в системе может быть несколько жестких дисков, подключенных в режиме RAID-массива. В случае распределённых систем, запросы могут был равномерно распределены между неск

Отказоустойчивость железа достигается через добавление избыточных компонентов, например, в системе может быть несколько жестких дисков, подключенных в режиме RAID-массива. В случае распределённых систем, запросы могут был равномерно распределены между несколькими независимыми машинами внутри дата-центра. Случается и так, что требуется отказоустойчивость на уровне дата-центра, тогда машины распределяют по нескольким физически независимым точкам (например, разные регионы AWS). Важно придерживаться здравого смысла и понимать какого уровня отказоустойчивости вам будет достаточно.Отказоустойчивость кода чуть сложнее. В первую очередь потому что один и тот же код может исполняться на большом пуле…

5 months назад @ telegram.me
Ребят, всем привет!Я не забыл про книгу, скоро будет конспект по второй главе (был перерыв). А пока я пишу конспект, то предлагаю вам насладиться подкастом с автором книги Designing Data-Intensive Applications Martin Kleppmann у Gergely Orosz — Designing D
Ребят, всем привет!Я не забыл про книгу, скоро будет конспект по второй главе (был перерыв). А пока я пишу конспект, то предлагаю вам насладиться подкастом с автором книги Designing Data-Intensive Applications Martin Kleppmann у Gergely Orosz — Designing D

Ребят, всем привет!Я не забыл про книгу, скоро будет конспект по второй главе (был перерыв). А пока я пишу конспект, то предлагаю вам насладиться подкастом с автором книги Designing Data-Intensive Applications Martin Kleppmann у Gergely Orosz — Designing Data-intensive Applications with Martin Kleppmann

5 months, 1 week назад @ t.me
Инжиниринг Данных Инжиниринг Данных
последний пост 1 day, 4 hours назад
Народ жгет с AI🙌 PS Сегодня вечером можно выпить сидорка в Seattle на Lake Union, там сейчас проходи Seattle Space Week и я хочу сходить на их Symposium, и сессии для стартапов и AI Manufacturing.
Народ жгет с AI🙌 PS Сегодня вечером можно выпить сидорка в Seattle на Lake Union, там сейчас проходи Seattle Space Week и я хочу сходить на их Symposium, и сессии для стартапов и AI Manufacturing.

Народ жгет с AI🙌 PS Сегодня вечером можно выпить сидорка в Seattle на Lake Union, там сейчас проходи Seattle Space Week и я хочу сходить на их Symposium, и сессии для стартапов и AI Manufacturing.

1 day, 4 hours назад @ t.me
Насколько быстро сейчас вендоры двигаются. Только появилась новая модель Jev, а Omni BI уже добавил фичи https://docs.omni.co/demos/2026/20260925 Omni сейчас прям очень hot! Но дорогой, как Sigma BI + токены есть Я добавил еще настройки LLM в Omni. Они выд
Насколько быстро сейчас вендоры двигаются. Только появилась новая модель Jev, а Omni BI уже добавил фичи https://docs.omni.co/demos/2026/20260925 Omni сейчас прям очень hot! Но дорогой, как Sigma BI + токены есть Я добавил еще настройки LLM в Omni. Они выд Насколько быстро сейчас вендоры двигаются. Только появилась новая модель Jev, а Omni BI уже добавил фичи https://docs.omni.co/demos/2026/20260925 Omni сейчас прям очень hot! Но дорогой, как Sigma BI + токены есть Я добавил еще настройки LLM в Omni. Они выд

Насколько быстро сейчас вендоры двигаются. Только появилась новая модель Jev, а Omni BI уже добавил фичи https://docs.omni.co/demos/2026/20260925 Omni сейчас прям очень hot! Но дорогой, как Sigma BI + токены есть Я добавил еще настройки LLM в Omni. Они выдают доступ к подписке и отдельно платим.

1 day, 6 hours назад @ t.me
ИИ-агент за пару кликов — создаем персонального помощника без кодаЗапустить ИИ-агента теперь можно в Agents Space от Cloud.ru. Это пространство в формате чата, где вы легко создать агента и подключить к нему нужные сервисы. Внутри:• ИИ-агенты для решения п
ИИ-агент за пару кликов — создаем персонального помощника без кодаЗапустить ИИ-агента теперь можно в Agents Space от Cloud.ru. Это пространство в формате чата, где вы легко создать агента и подключить к нему нужные сервисы. Внутри:• ИИ-агенты для решения п ИИ-агент за пару кликов — создаем персонального помощника без кодаЗапустить ИИ-агента теперь можно в Agents Space от Cloud.ru. Это пространство в формате чата, где вы легко создать агента и подключить к нему нужные сервисы. Внутри:• ИИ-агенты для решения п

ИИ-агент за пару кликов — создаем персонального помощника без кодаЗапустить ИИ-агента теперь можно в Agents Space от Cloud.ru. Это пространство в формате чата, где вы легко создать агента и подключить к нему нужные сервисы. Внутри:• ИИ-агенты для решения повседневных задач- Возможность создать собственного агента под конкретные задачи- Популярные ИИ-модели на выбор: Kimi K2.5, Qwen 3.6-35B-A3B, Claude Opus 4.8 и другие- Коннекторы к почте, календарю и другим сервисамПри этом не нужно кодить, настраивать модели, серверы и среду.Попробовать можно здесь

1 day, 7 hours назад @ t.me
Вот это я понимаю персональная страница созданная с Claudehttps://felixrieseberg.com/
Вот это я понимаю персональная страница созданная с Claudehttps://felixrieseberg.com/ Вот это я понимаю персональная страница созданная с Claudehttps://felixrieseberg.com/

Вот это я понимаю персональная страница созданная с Claudehttps://felixrieseberg.com/

1 day, 23 hours назад @ t.me
Переходим к новостям про Vibe Coding. Благодаря нему, у меня появлась возможность добавить много ништячков в Surfalytics. Несколько человек согласились делать Q&A и сразу чинят, добавляют контент с Claude Code и делают PR в main, смотрят в Supabase и N
Переходим к новостям про Vibe Coding. Благодаря нему, у меня появлась возможность добавить много ништячков в Surfalytics. Несколько человек согласились делать Q&A и сразу чинят, добавляют контент с Claude Code и делают PR в main, смотрят в Supabase и N Переходим к новостям про Vibe Coding. Благодаря нему, у меня появлась возможность добавить много ништячков в Surfalytics. Несколько человек согласились делать Q&A и сразу чинят, добавляют контент с Claude Code и делают PR в main, смотрят в Supabase и N

Переходим к новостям про Vibe Coding. Благодаря нему, у меня появлась возможность добавить много ништячков в Surfalytics. Несколько человек согласились делать Q&A и сразу чинят, добавляют контент с Claude Code и делают PR в main, смотрят в Supabase и Netlify. Все стали Front/Back разработчиками без опыта. А кто-то решил добавить свой end-to-end курс по System Design. Цель просто собрать все вместе и дать возможность автономного обучения.

2 days, 4 hours назад @ t.me
Пост выше с советами показал, что человеку сложно меняться. Как бы ни хотели и ни мечтали, очень сложно поменять привычки. Одним пост зашёл — именно советы от проактивного человека. Его деятельность мы здесь не рассматриваем, она out of scope, как говоритс
Пост выше с советами показал, что человеку сложно меняться. Как бы ни хотели и ни мечтали, очень сложно поменять привычки. Одним пост зашёл — именно советы от проактивного человека. Его деятельность мы здесь не рассматриваем, она out of scope, как говоритс

Пост выше с советами показал, что человеку сложно меняться. Как бы ни хотели и ни мечтали, очень сложно поменять привычки. Одним пост зашёл — именно советы от проактивного человека. Его деятельность мы здесь не рассматриваем, она out of scope, как говорится.Другим категорически не понравился. Для меня это лишь подтверждение того, что человеку очень сложно меняться. Даже если для одних это очевидные вещи, для других это «дичь» и «зашквар», и сразу находятся какие-то причины и факты, почему это именно так, а не иначе.В какой-то степени за последние лет 8 я часто общался с людьми с позиции эксперта по поиску работы, построении карьеры, и видел много ситуаций и примеров — у меня уже «глаз намёт…

2 days, 4 hours назад @ t.me
Не жалуйся на систему, а разумно подстраивай себя под обстоятельства, чтобы получить преимущество и эксплуатировать устройство вселенной. Это куда более продуктивный подход.
Не жалуйся на систему, а разумно подстраивай себя под обстоятельства, чтобы получить преимущество и эксплуатировать устройство вселенной. Это куда более продуктивный подход.

Не жалуйся на систему, а разумно подстраивай себя под обстоятельства, чтобы получить преимущество и эксплуатировать устройство вселенной. Это куда более продуктивный подход.

3 days, 5 hours назад @ t.me
Увидел сегодня советы, как стать лучше и успешней, ничего нового, но хочу вам напомнить, если вдруг вы не знаете как быть и с чего начать:Было бы желание, а поднять свои доходы с низкой базы довольно легко. Из 100 т.р. в мес дорасти до 500-1000 займет не о
Увидел сегодня советы, как стать лучше и успешней, ничего нового, но хочу вам напомнить, если вдруг вы не знаете как быть и с чего начать:Было бы желание, а поднять свои доходы с низкой базы довольно легко. Из 100 т.р. в мес дорасти до 500-1000 займет не о

Увидел сегодня советы, как стать лучше и успешней, ничего нового, но хочу вам напомнить, если вдруг вы не знаете как быть и с чего начать:Было бы желание, а поднять свои доходы с низкой базы довольно легко. Из 100 т.р. в мес дорасти до 500-1000 займет не очень много времени, не более года.Инструкция следующая: 1. Перестать общаться с кем-либо, кто не нужен тебе для решения задач развития, и начать общаться только с теми, кто реально вкалывает и получает результат. Друзья будут обижаться, но мы же решили стать другим человеком? Без жертв тут не обойтись. 2. Перестать тратить время на приятные расслабляющие вещи и начать тратить время исключительно на решение финансовых задач. Выработать у се…

3 days, 5 hours назад @ t.me
И еще одно видео по теме Jev CEO: I made ChatGPT, now I'm building what's next, оно датировано 1 июля 2026 года, еще до релиза Jev. В нем очень хорошо рассказывают про проблемы с современными моделями - "Why do all LLMs require a human in the loop? The sim
И еще одно видео по теме Jev CEO: I made ChatGPT, now I'm building what's next, оно датировано 1 июля 2026 года, еще до релиза Jev. В нем очень хорошо рассказывают про проблемы с современными моделями - "Why do all LLMs require a human in the loop? The sim И еще одно видео по теме Jev CEO: I made ChatGPT, now I'm building what's next, оно датировано 1 июля 2026 года, еще до релиза Jev. В нем очень хорошо рассказывают про проблемы с современными моделями - "Why do all LLMs require a human in the loop? The sim

И еще одно видео по теме Jev CEO: I made ChatGPT, now I'm building what's next, оно датировано 1 июля 2026 года, еще до релиза Jev. В нем очень хорошо рассказывают про проблемы с современными моделями - "Why do all LLMs require a human in the loop? The simple answer is we literally put them in the loop" — то есть человек буквально был встроен в процесс обучения через RLHF (Reinforcement Learning from Human Feedback).Логика RLHF проста: собрать человеческие предпочтения о том, какие ответы модели нравятся людям, а затем оптимизировать модель так, чтобы она давала ответы, которые получают высокую оценку по этим предпочтениям. Цель этого цикла — понравиться человеку, а не автономно и надёжно в…

3 days, 20 hours назад @ t.me
Вы уже слышали про новую фронтир-модель Jev? Чтобы лучше понять, для чего она нужна и как её использовать, можете посмотреть видео Jev will 10x your Claude Code.Мне понравилось, как автор ссылается на книгу "Думай медленно, решай быстро" Даниэля Канемана.
Вы уже слышали про новую фронтир-модель Jev? Чтобы лучше понять, для чего она нужна и как её использовать, можете посмотреть видео Jev will 10x your Claude Code.Мне понравилось, как автор ссылается на книгу "Думай медленно, решай быстро" Даниэля Канемана. Вы уже слышали про новую фронтир-модель Jev? Чтобы лучше понять, для чего она нужна и как её использовать, можете посмотреть видео Jev will 10x your Claude Code.Мне понравилось, как автор ссылается на книгу "Думай медленно, решай быстро" Даниэля Канемана.

Вы уже слышали про новую фронтир-модель Jev? Чтобы лучше понять, для чего она нужна и как её использовать, можете посмотреть видео Jev will 10x your Claude Code.Мне понравилось, как автор ссылается на книгу "Думай медленно, решай быстро" Даниэля Канемана. Jev — это система 1, она максимально быстро выдаёт ответ, но ответ простой: не текст, а типизированное решение (choice, score или noul/вероятность), выбранное из заранее заданных вами вариантов, с калиброванной вероятностью уверенности. Она не рассуждает пошагово и не пишет объяснений — просто мгновенно "судит" ситуацию, как человек делает быструю интуитивную оценку Система 2 — это традиционные модели, такие как Claude и ChatGPT. Они рассу…

3 days, 20 hours назад @ t.me
Как понять, что агенты в команде реально заработалиЭффект от AI-агента распределен по сотне мелких задач: SQL тут, дашборд там, презентация, ответ продакту. В новом выпуске «Доверительного интервала» аналитики Яндекса рассказали, как они это измеряют у себ
Как понять, что агенты в команде реально заработалиЭффект от AI-агента распределен по сотне мелких задач: SQL тут, дашборд там, презентация, ответ продакту. В новом выпуске «Доверительного интервала» аналитики Яндекса рассказали, как они это измеряют у себ

Как понять, что агенты в команде реально заработалиЭффект от AI-агента распределен по сотне мелких задач: SQL тут, дашборд там, презентация, ответ продакту. В новом выпуске «Доверительного интервала» аналитики Яндекса рассказали, как они это измеряют у себя.Схема такая:— основные метрики — adoption (доля аналитиков, которые пользуются инструментами) и время сессий с агентами;— взяли топ-10 самых активных пользователей;— их средние показатели сделали целевым ориентиром для остальной команды.И adoption здесь не самоцель, а важная практика на старте внедрения ИИ: сначала нужно, чтобы им начали пользоваться, и только потом смотреть на эффект. Ориентир при этом понятный и достижимый — это не абс…

4 days, 15 hours назад @ t.me
Наконец-то могу сказать, что накопленная дата имеет ценность. За 3 года (вот время летит-то) в Surfalytics в Discord мы накопили много ценных советов по поиску работы, резюме и тп. Это огромный объем информации и вручную сложно в нем ковыряться, но с помощ
Наконец-то могу сказать, что накопленная дата имеет ценность. За 3 года (вот время летит-то) в Surfalytics в Discord мы накопили много ценных советов по поиску работы, резюме и тп. Это огромный объем информации и вручную сложно в нем ковыряться, но с помощ Наконец-то могу сказать, что накопленная дата имеет ценность. За 3 года (вот время летит-то) в Surfalytics в Discord мы накопили много ценных советов по поиску работы, резюме и тп. Это огромный объем информации и вручную сложно в нем ковыряться, но с помощ

Наконец-то могу сказать, что накопленная дата имеет ценность. За 3 года (вот время летит-то) в Surfalytics в Discord мы накопили много ценных советов по поиску работы, резюме и тп. Это огромный объем информации и вручную сложно в нем ковыряться, но с помощью ИИ можно сделать ценный easy-going курс с примерами и цитатами.

4 days, 23 hours назад @ t.me
AI конечно уже не тот;У нас накопилось много ценной информации в Discord про лучшие практики поиска работы. Я настроил Airflow и DuckLake, чтобы вытащить всю историю и на базе нее сделать курс. AI говорит “ай яй яй”, наверно это комплимент, ведь по честном
AI конечно уже не тот;У нас накопилось много ценной информации в Discord про лучшие практики поиска работы. Я настроил Airflow и DuckLake, чтобы вытащить всю историю и на базе нее сделать курс. AI говорит “ай яй яй”, наверно это комплимент, ведь по честном AI конечно уже не тот;У нас накопилось много ценной информации в Discord про лучшие практики поиска работы. Я настроил Airflow и DuckLake, чтобы вытащить всю историю и на базе нее сделать курс. AI говорит “ай яй яй”, наверно это комплимент, ведь по честном

AI конечно уже не тот;У нас накопилось много ценной информации в Discord про лучшие практики поиска работы. Я настроил Airflow и DuckLake, чтобы вытащить всю историю и на базе нее сделать курс. AI говорит “ай яй яй”, наверно это комплимент, ведь по честному работу практически не найти

5 days, 3 hours назад @ t.me
Стоимость data stack растёт на границах между его компонентамиКогда загрузка, хранение, обработка и визуализация реализованы в отдельных системах, data-команда поддерживает не только сами инструменты, но и обмен между ними. Изменение источника, схемы данны
Стоимость data stack растёт на границах между его компонентамиКогда загрузка, хранение, обработка и визуализация реализованы в отдельных системах, data-команда поддерживает не только сами инструменты, но и обмен между ними. Изменение источника, схемы данны

Стоимость data stack растёт на границах между его компонентамиКогда загрузка, хранение, обработка и визуализация реализованы в отдельных системах, data-команда поддерживает не только сами инструменты, но и обмен между ними. Изменение источника, схемы данных или способа расчета затрагивает сразу несколько интеграций.DataLens Platform объединяет основные этапы работы с данными. В основе находится lakehouse на S3 и Apache Iceberg. Trino отвечает за интерактивные запросы, Spark — за ресурсоемкие преобразования, Airflow — за оркестрацию процессов.На уровне всей платформы работают каталог метаданных и общая модель доступа. Хранение и вычисления масштабируются отдельно.ИИ-помощник становится еще о…

5 days, 4 hours назад @ t.me
На LinkediIn есть небольшой бесплатный курс (временно) - Build with AI: SQL AI Agents in ProductionНа примере SQL задачек автор использует AI агентов вместе с различными методами. Я его не смотрел, но посмотрю, всего 1,5 часа. Мне понравилась идея посмотре
На LinkediIn есть небольшой бесплатный курс (временно) - Build with AI: SQL AI Agents in ProductionНа примере SQL задачек автор использует AI агентов вместе с различными методами. Я его не смотрел, но посмотрю, всего 1,5 часа. Мне понравилась идея посмотре На LinkediIn есть небольшой бесплатный курс (временно) - Build with AI: SQL AI Agents in ProductionНа примере SQL задачек автор использует AI агентов вместе с различными методами. Я его не смотрел, но посмотрю, всего 1,5 часа. Мне понравилась идея посмотре

На LinkediIn есть небольшой бесплатный курс (временно) - Build with AI: SQL AI Agents in ProductionНа примере SQL задачек автор использует AI агентов вместе с различными методами. Я его не смотрел, но посмотрю, всего 1,5 часа. Мне понравилась идея посмотреть его, чтобы понять, что можно в свое резюме закинуть, чтобы рассказывать как мы с SQL строим космические корабли делаем AI.

5 days, 5 hours назад @ t.me
Left Join Left Join
последний пост 1 day, 11 hours назад
В одной ячейке Excel можно будет хранить массивы значенийНаконец-то важные новости и не про очередной побег ИИ из тестовой среды. В Excel готовится большое обновление:🔵В одной ячейке можно будет хранить списки из нескольких значений, разделенных запятой ил
В одной ячейке Excel можно будет хранить массивы значенийНаконец-то важные новости и не про очередной побег ИИ из тестовой среды. В Excel готовится большое обновление:🔵В одной ячейке можно будет хранить списки из нескольких значений, разделенных запятой ил

В одной ячейке Excel можно будет хранить массивы значенийНаконец-то важные новости и не про очередной побег ИИ из тестовой среды. В Excel готовится большое обновление:🔵В одной ячейке можно будет хранить списки из нескольких значений, разделенных запятой или точкой с запятой. Их можно добавлять, редактировать, убирать, использовать в формулах и применять к ним фильтры. 🔵Также в одну ячейку теперь будет занести целый массив данных — его больше не придется растягивать его на несколько ячеек. Для этого надо будет записать данные, либо формулу, которая должна их вернуть, в скобках { }. Это еще и позволит создавать вложенные массивы вот такого вида: {{1,2,3};{4,5,6}}. 🔵Появится поддержка новых фо…

1 day, 11 hours назад @ t.me
Новый ИИ-бенчмарк подвезли Тем, как ИИ пишет код, взламывает сайты или решает математические задачи тысячелетия уже никого не удивишь. Современные флагманские модели уже давно переросли эти мелочи и созрели для того, чтобы показать, на что они способны в р
Новый ИИ-бенчмарк подвезли Тем, как ИИ пишет код, взламывает сайты или решает математические задачи тысячелетия уже никого не удивишь. Современные флагманские модели уже давно переросли эти мелочи и созрели для того, чтобы показать, на что они способны в р

Новый ИИ-бенчмарк подвезли Тем, как ИИ пишет код, взламывает сайты или решает математические задачи тысячелетия уже никого не удивишь. Современные флагманские модели уже давно переросли эти мелочи и созрели для того, чтобы показать, на что они способны в реальном мире.Например, как они умеют водить машину.За руль Тойоты посадили Astra, Sol, Grok и Fable и выпустили их на пустую парковку, где им нужно было за три попытки преодолеть трассу длиной 134 метра. Они «видели» дорогу через камеры, а через Comma four крутили руль и нажимали педали. Человек сидел рядом только для подстраховки. 🔵Успешнее всего справилась GPT-6 Astra: она вообще единственная, кто доехал до конца, еще и со 2 раза. Ей пон…

4 days, 12 hours назад @ t.me
Как грамотно делегировать задачи ИИВнедрение искусственного интеллекта и агентов в работу — это все еще острый вопрос. Его обсудили в одном из недавних выпусков подкаста «Доверительный интервал» от сообщества аналитиков Яндекса. В чём суть:🔵 Активнее всего
Как грамотно делегировать задачи ИИВнедрение искусственного интеллекта и агентов в работу — это все еще острый вопрос. Его обсудили в одном из недавних выпусков подкаста «Доверительный интервал» от сообщества аналитиков Яндекса. В чём суть:🔵 Активнее всего

Как грамотно делегировать задачи ИИВнедрение искусственного интеллекта и агентов в работу — это все еще острый вопрос. Его обсудили в одном из недавних выпусков подкаста «Доверительный интервал» от сообщества аналитиков Яндекса. В чём суть:🔵 Активнее всего агентов используют джуны, а сеньоры все еще настроены скептически, потому что даже с очень умным ИИ многие задачи им быстрее сделать руками. Приходится выбирать: заморочиться со скиллами и агентами, чтобы когда-нибудь потом увидеть результат, или выполнить важную для бизнеса задачу прямо сейчас.🔵Общение с ИИ — это навык, который нужно целенаправленно развивать. Без этого попытка работать с ИИ может закончиться именно так, как скептик и ож…

6 days, 12 hours назад @ t.me
Что делать с тепловыми картами и хороплетами?Все виды графиков и чартов по-своему хороши и заслуживают любви, но, если честно, значительную часть из них большинство любят на расстоянии. Старых добрых линейных и столбчатых диаграмм хватает под большинство з
Что делать с тепловыми картами и хороплетами?Все виды графиков и чартов по-своему хороши и заслуживают любви, но, если честно, значительную часть из них большинство любят на расстоянии. Старых добрых линейных и столбчатых диаграмм хватает под большинство з Что делать с тепловыми картами и хороплетами?Все виды графиков и чартов по-своему хороши и заслуживают любви, но, если честно, значительную часть из них большинство любят на расстоянии. Старых добрых линейных и столбчатых диаграмм хватает под большинство з

Что делать с тепловыми картами и хороплетами?Все виды графиков и чартов по-своему хороши и заслуживают любви, но, если честно, значительную часть из них большинство любят на расстоянии. Старых добрых линейных и столбчатых диаграмм хватает под большинство задач, их легко нарисовать в любом инструменте для визуализации и, самое главное, легко читать.Более хитрые варианты вроде тех же тепловых карт или хороплетов используются реже, потому что и поводов для этого меньше, и работать с ними сложнее. А вот сделать нечитабельное разноцветное месиво, наоборот, легко. 🔜 И все же, если вы связаны с визуализацией данных, однажды они могут пригодится, так что ловите шпаргалку на Tableau Public. 4 график…

1 week, 4 days назад @ t.me
3D-карты СУБДОтвлечемся от новостей про ИИ и скандалов вокруг OpenAI и посмотрим, что внутри Redis и PostgreSQL. 🔵Redis — это NoSQL СУБД типа ключ-значение, которая которая хранит данные в оперативной памяти. Для тех, кто хочет разобраться, как же она это
3D-карты СУБДОтвлечемся от новостей про ИИ и скандалов вокруг OpenAI и посмотрим, что внутри Redis и PostgreSQL. 🔵Redis — это NoSQL СУБД типа ключ-значение, которая которая хранит данные в оперативной памяти. Для тех, кто хочет разобраться, как же она это

3D-карты СУБДОтвлечемся от новостей про ИИ и скандалов вокруг OpenAI и посмотрим, что внутри Redis и PostgreSQL. 🔵Redis — это NoSQL СУБД типа ключ-значение, которая которая хранит данные в оперативной памяти. Для тех, кто хочет разобраться, как же она это делает, нарисовали целую интерактивную карту. Ее можно повертеть со всех сторон, понажимать на отдельные элементы и посмотреть, как байты данных перемещаются между ними. У каждого объекта есть короткое описание со ссылками на исходный код на гитхабе. 🔵Похожая визуализация есть и для PostgreSQL Она не только масштабнее, но и информативнее. Если на предыдущей все пояснения очень краткие, то здесь функции элемента расписаны намного подробнее.

1 week, 6 days назад @ t.me
Решение математических проблем это не просто бенчмарк На прошлой неделе разгорелся серьезный скандал вокруг одной из математических задач тысячелетия — а именно доказательство существования определенного способа решения уравнений Навье-Стокса. OpenAI объяв
Решение математических проблем это не просто бенчмарк На прошлой неделе разгорелся серьезный скандал вокруг одной из математических задач тысячелетия — а именно доказательство существования определенного способа решения уравнений Навье-Стокса. OpenAI объяв

Решение математических проблем это не просто бенчмарк На прошлой неделе разгорелся серьезный скандал вокруг одной из математических задач тысячелетия — а именно доказательство существования определенного способа решения уравнений Навье-Стокса. OpenAI объявила, что их внутренняя модель, более мощная, чем Astra, нашла решение проблемы — только вот ее опередили. Два математика сделали это раньше, причем с использованием Codex и Claude. Они предполагают, что OpenAI получила доступ к их данным и использовала их для поиска своего решения.На science.org есть более подробное описание скандала, даже с объяснением, в чем же состоят эти уравнения.Эта история поднимает не только вопросы безопасности, д…

2 weeks, 1 day назад @ t.me
Astra смогла, а вы сможете?Мы с вами недавно обсуждали эссе, опубликованное на сайте OpenAI, где автор сказал следующее:Чтобы начать влиять на реальный мир — стать очень полезным или очень опасным — ИИ не надо стать лучше людей во всех сферах. Ему надо ста
Astra смогла, а вы сможете?Мы с вами недавно обсуждали эссе, опубликованное на сайте OpenAI, где автор сказал следующее:Чтобы начать влиять на реальный мир — стать очень полезным или очень опасным — ИИ не надо стать лучше людей во всех сферах. Ему надо ста Astra смогла, а вы сможете?Мы с вами недавно обсуждали эссе, опубликованное на сайте OpenAI, где автор сказал следующее:Чтобы начать влиять на реальный мир — стать очень полезным или очень опасным — ИИ не надо стать лучше людей во всех сферах. Ему надо ста

Astra смогла, а вы сможете?Мы с вами недавно обсуждали эссе, опубликованное на сайте OpenAI, где автор сказал следующее:Чтобы начать влиять на реальный мир — стать очень полезным или очень опасным — ИИ не надо стать лучше людей во всех сферах. Ему надо стать лучше в достаточном количестве из них.И кое в чем новая их модель уже стала лучше многих людей: она прошла все 48 уровней I Am Not A Robot, где надо решать все более абсурдные и сложные капчи. В результате она даже получила сертификат, что является человеком.Весь процесс запечатлел и запостил другой сотрудник OpenAI. А сколько уровней пройдете вы? 👀

2 weeks, 4 days назад @ t.me
Продукты 24 × ffdd2d: конференция Т-Банка для тех, кто хочет превращать данные в решенияЭто не очередная конференция про цифры и метрики, где спикеры похвастаются кейсами, а зрители посмотрят и разойдутся. Вместо этого будут: 🟡 Акцент на решения: не просто
Продукты 24 × ffdd2d: конференция Т-Банка для тех, кто хочет превращать данные в решенияЭто не очередная конференция про цифры и метрики, где спикеры похвастаются кейсами, а зрители посмотрят и разойдутся. Вместо этого будут: 🟡 Акцент на решения: не просто Продукты 24 × ffdd2d: конференция Т-Банка для тех, кто хочет превращать данные в решенияЭто не очередная конференция про цифры и метрики, где спикеры похвастаются кейсами, а зрители посмотрят и разойдутся. Вместо этого будут: 🟡 Акцент на решения: не просто

Продукты 24 × ffdd2d: конференция Т-Банка для тех, кто хочет превращать данные в решенияЭто не очередная конференция про цифры и метрики, где спикеры похвастаются кейсами, а зрители посмотрят и разойдутся. Вместо этого будут: 🟡 Акцент на решения: не просто как и что считать, а что потом с этим делать. Как данные и метрики превращаются в идеи, а идеи — в продукты. 🟡 Интерактив: форматы, где можно и нужно присоединиться к дискуссии и поспорить со спикерами. Спикеры, кстати, из Авито, Яндекса, Т-Банка, Додо и других компаний.🟡 Не только доклады и не только ИТ: спецвыпуск подкаста математика Андрея Коняева про то, как научный подход помогает находить новые решения.🟡 Нетворкинг: афтепати с видом…

2 weeks, 5 days назад @ t.me
Чуждый разум ChatGPTOpenAI показала GPT‑6 Astra и вновь заговорила на любимую тему — риски приближающейся эпохи AGI (artificial general intelligence или общего искусственного интеллекта). Ведущий научный сотрудник компании Джейкоб Пачоки написал на эту тем
Чуждый разум ChatGPTOpenAI показала GPT‑6 Astra и вновь заговорила на любимую тему — риски приближающейся эпохи AGI (artificial general intelligence или общего искусственного интеллекта). Ведущий научный сотрудник компании Джейкоб Пачоки написал на эту тем

Чуждый разум ChatGPTOpenAI показала GPT‑6 Astra и вновь заговорила на любимую тему — риски приближающейся эпохи AGI (artificial general intelligence или общего искусственного интеллекта). Ведущий научный сотрудник компании Джейкоб Пачоки написал на эту тему эссе «Чуждый разум».Ключевые мысли: 🔵ИИ не столько создают, сколько выращивают с помощью постоянной оптимизации и сложных вычислений. В результате получается система, умеющая работать с абстрактными понятиями и имитировать человеческое поведение. Разработчики и исследователи догадываются, как как она это делает, но не понимают ее до конца. 🔵Главная проблема ИИ — это научить его не просто выполнять указания, но и понимать и применять обще…

3 weeks назад @ t.me
Lead Data Engineer, найдись!Valiotti Data — AI-native команда дата-инженеров и аналитиков. Консультируем растущие компании: встраиваемся в бизнес, решаем задачу, строим систему и передаем знания команде клиента.Задачи: архитектура данных, менторинг дата-ин
Lead Data Engineer, найдись!Valiotti Data — AI-native команда дата-инженеров и аналитиков. Консультируем растущие компании: встраиваемся в бизнес, решаем задачу, строим систему и передаем знания команде клиента.Задачи: архитектура данных, менторинг дата-ин

Lead Data Engineer, найдись!Valiotti Data — AI-native команда дата-инженеров и аналитиков. Консультируем растущие компании: встраиваемся в бизнес, решаем задачу, строим систему и передаем знания команде клиента.Задачи: архитектура данных, менторинг дата-инженеров, общение с заказчиками.Пример проекта. Клиент из Канады продает лидов через LeadByte, платежи принимает через Stripe. Нужно свести две системы: сколько выручки обещали проданные лиды и сколько реально выставлено в счетах. Единица отчета не кампания, а «продукт × язык», поэтому нужен свой справочник продуктов и слой маппинга. Требования на десятки страниц, работу режем на фазы.Стек: Fivetran → BigQuery → dbt → Looker Studio. Источни…

3 weeks, 3 days назад @ t.me
Для важных переговоровБывает у вас такое, что коллега отправил вам сообщение в ответ на ваш вопрос, вы читаете и понимаете — он сам тут ни слова не написал.Может быть даже не читал.Он просто отправил ваш вопрос Claude или ChatGPT и переслал вам их ответ. Н
Для важных переговоровБывает у вас такое, что коллега отправил вам сообщение в ответ на ваш вопрос, вы читаете и понимаете — он сам тут ни слова не написал.Может быть даже не читал.Он просто отправил ваш вопрос Claude или ChatGPT и переслал вам их ответ. Н

Для важных переговоровБывает у вас такое, что коллега отправил вам сообщение в ответ на ваш вопрос, вы читаете и понимаете — он сам тут ни слова не написал.Может быть даже не читал.Он просто отправил ваш вопрос Claude или ChatGPT и переслал вам их ответ. Наверное, кто-то к такому относиться с пониманием, но если вам такой подход не по душе — ловите полезную ссылку. Копируете и отправляете вашему собеседнику, можно даже не читать, что там написано — он же тоже, скорее всего, не читал, что ему ИИ написал. Там даже есть версии на разных языках и типа жесткий вариант (хотя на самом деле тоже довольно беззубый). Такой вот Let me google that for you турбулентной ИИ-эры.

3 weeks, 5 days назад @ t.me
Как боты пользуются интернетомПродолжаем тему ИИ и визуализации данных — на этот раз смотрим, как боты захватывают интернет.Вы наверняка видели новости про то, что объем трафика, сгенерированного ботами, превысил объемы человеческого. В The Agentic Web Ind
Как боты пользуются интернетомПродолжаем тему ИИ и визуализации данных — на этот раз смотрим, как боты захватывают интернет.Вы наверняка видели новости про то, что объем трафика, сгенерированного ботами, превысил объемы человеческого. В The Agentic Web Ind

Как боты пользуются интернетомПродолжаем тему ИИ и визуализации данных — на этот раз смотрим, как боты захватывают интернет.Вы наверняка видели новости про то, что объем трафика, сгенерированного ботами, превысил объемы человеческого. В The Agentic Web Index можно посмотреть, из чего он складывается и что за боты ходят по нашим сайтам. 🔵Значительная его часть приходится на поисковых ботов (они же краулеры), которые индексируют сайты для баз данных поисковиков, и SEO-ботов, анализирующих структуру и контент сайтов для последующей оптимизации. А вот на уже 3 месте оказались боты, которые собирают данные для ИИ-выдачи.🔵На ИИ-скрейперов приходится 11% бототрафика, из которых 26% генерирует Clau…

4 weeks, 1 day назад @ t.me
«ИИ станет либо величайшим уравнителем из когда-либо созданных, либо худшим источником несправедливости»Билл Гейтс опубликовал эссе о влиянии ИИ на общество: как оно меняется уже сейчас, что ждет его в будущем и что нужно сделать, чтобы эти перемены были м
«ИИ станет либо величайшим уравнителем из когда-либо созданных, либо худшим источником несправедливости»Билл Гейтс опубликовал эссе о влиянии ИИ на общество: как оно меняется уже сейчас, что ждет его в будущем и что нужно сделать, чтобы эти перемены были м

«ИИ станет либо величайшим уравнителем из когда-либо созданных, либо худшим источником несправедливости»Билл Гейтс опубликовал эссе о влиянии ИИ на общество: как оно меняется уже сейчас, что ждет его в будущем и что нужно сделать, чтобы эти перемены были менее болезненными для всех нас. Далеко не первый и не последний материал на эту тему, но интересный за счет попытки смотреть на вопрос непредвзято, без нагнетания паники. Вот несколько ключевых мыслей: 🔵Даже при самых идеальных условиях переход в новую эру ИИ станет одной из самых турбулентных эпох в истории человечества. Одна из причин этого — то, что люди до сих пор недооценивают искусственный интеллект и не понимают, насколько сильно и …

1 month назад @ t.me
Независимый рейтинг ИИArtificial Analysis — проект на стыке наших с вами любимых тем: ИИ, аналитика и визуализация данных. Там сравнивают модели ИИ по всем возможным показателям: интеллект в целом и успешность прохождения разных бенчмарков по отдельности,
Независимый рейтинг ИИArtificial Analysis — проект на стыке наших с вами любимых тем: ИИ, аналитика и визуализация данных. Там сравнивают модели ИИ по всем возможным показателям: интеллект в целом и успешность прохождения разных бенчмарков по отдельности,

Независимый рейтинг ИИArtificial Analysis — проект на стыке наших с вами любимых тем: ИИ, аналитика и визуализация данных. Там сравнивают модели ИИ по всем возможным показателям: интеллект в целом и успешность прохождения разных бенчмарков по отдельности, скорость работы, стоимость, «открытость» и прозрачность для публики. 🔵В рейтинге участвуют не только ChatGPT с Claude — там сотни моделей, включая совсем маленькие и малоизвестные. Отдельные блоки выделены для ИИ, генерирующих изображения и видео. У каждой модели есть отдельная страничка с краткой сводкой конкретно по ней. 🔵Если запутались в таком изобилии, можно воспользоваться сервисом Model Recommender, который помогает подобрать ИИ под…

1 month назад @ t.me
Охота на баг в SQLiteПодустали читать про ИИ, релиз очередной модели, результаты бенчмарков и новости про то, как хитрые агенты что-нибудь взломали? Если да, то почему бы не почитать лонгрид про то, как компания Tailscale искала в SQLite хитрый баг, которы
Охота на баг в SQLiteПодустали читать про ИИ, релиз очередной модели, результаты бенчмарков и новости про то, как хитрые агенты что-нибудь взломали? Если да, то почему бы не почитать лонгрид про то, как компания Tailscale искала в SQLite хитрый баг, которы

Охота на баг в SQLiteПодустали читать про ИИ, релиз очередной модели, результаты бенчмарков и новости про то, как хитрые агенты что-нибудь взломали? Если да, то почему бы не почитать лонгрид про то, как компания Tailscale искала в SQLite хитрый баг, который прятался в ней 16 лет? 🔜 Если кратко:Данные компания хранит в SQLite на отдельных серверах. Каждые несколько минут система делает «снимок» базы и отправляет файл SQLite в хранилище S3. Такой подход работал с 2023 года, но в августе 2025 начал сбоить — именно тогда Tailscale обнаружили, что один бекап поврежден. А потом этот случай повторился, а потом еще, и так 19 раз за 6 месяцев.В инцидентах не было никакой логики: они затрагивали разн…

1 month назад @ t.me
SQLite на практике SQLite на практике
последний пост None
Datalytics Datalytics
последний пост 14 часов назад
Команда DevCrowd запустила ежегодное исследование специалистов по работе с данными.*В этом году фокус на том, как меняется профессия: что AI реально сделал с составом работы, где проходят границы между дата-сайентистом, ML- и MLOps-инженером, что происходи
Команда DevCrowd запустила ежегодное исследование специалистов по работе с данными.*В этом году фокус на том, как меняется профессия: что AI реально сделал с составом работы, где проходят границы между дата-сайентистом, ML- и MLOps-инженером, что происходи Команда DevCrowd запустила ежегодное исследование специалистов по работе с данными.*В этом году фокус на том, как меняется профессия: что AI реально сделал с составом работы, где проходят границы между дата-сайентистом, ML- и MLOps-инженером, что происходи

Команда DevCrowd запустила ежегодное исследование специалистов по работе с данными.*В этом году фокус на том, как меняется профессия: что AI реально сделал с составом работы, где проходят границы между дата-сайентистом, ML- и MLOps-инженером, что происходит с порогом входа в профессию и рынком труда.Часть вопросов задается третий год подряд, что дает реальную динамику, а не просто срез.Опрос анонимный, 12–15 минут. В ноябре ребята опубликуют отчет со всеми данными, а также списками рекомендованных телеграм-каналов и курсов, собранными из ответов участников.Пройти опрос: https://survey.devcrowd.ru/data-2026*DevCrowd — это независимые исследования IT-профессий: 15 000+ участников, публичные о…

14 часов назад @ t.me
📊 Аналитик данных: системные знания для профессионального роста14 октября на Факультете компьютерных наук НИУ ВШЭ стартует программа профессиональной переподготовки «Аналитик данных». Программа охватывает ключевые направления работы с данными: от Python, S
📊 Аналитик данных: системные знания для профессионального роста14 октября на Факультете компьютерных наук НИУ ВШЭ стартует программа профессиональной переподготовки «Аналитик данных». Программа охватывает ключевые направления работы с данными: от Python, S 📊 Аналитик данных: системные знания для профессионального роста14 октября на Факультете компьютерных наук НИУ ВШЭ стартует программа профессиональной переподготовки «Аналитик данных». Программа охватывает ключевые направления работы с данными: от Python, S

📊 Аналитик данных: системные знания для профессионального роста14 октября на Факультете компьютерных наук НИУ ВШЭ стартует программа профессиональной переподготовки «Аналитик данных». Программа охватывает ключевые направления работы с данными: от Python, SQL и статистики до продуктовой аналитики, визуализации и машинного обучения.📚 В программе:• Python и SQL для анализа данных;• математика и статистика;• проверка гипотез и A/B-тестирование;• визуализация данных и BI;• продуктовая аналитика;• машинное обучение;• хранилища данных и основы работы с большими данными;• итоговый проект на основе реальной задачи.🎓 Главное о программе:• ФКН НИУ ВШЭ — один из ведущих факультетов России в области ком…

1 day, 10 hours назад @ t.me
⚡ Почему аналитики данных так востребованы и как стать аналитиком в 2026 году? Большинство новичков совершают одну и ту же ошибку: учат всё подряд.SQL, Python, Power BI, статистика… Но работодатели оценивают кандидатов не только по базовым навыкам, но и по
⚡ Почему аналитики данных так востребованы и как стать аналитиком в 2026 году? Большинство новичков совершают одну и ту же ошибку: учат всё подряд.SQL, Python, Power BI, статистика… Но работодатели оценивают кандидатов не только по базовым навыкам, но и по ⚡ Почему аналитики данных так востребованы и как стать аналитиком в 2026 году? Большинство новичков совершают одну и ту же ошибку: учат всё подряд.SQL, Python, Power BI, статистика… Но работодатели оценивают кандидатов не только по базовым навыкам, но и по

⚡ Почему аналитики данных так востребованы и как стать аналитиком в 2026 году? Большинство новичков совершают одну и ту же ошибку: учат всё подряд.SQL, Python, Power BI, статистика… Но работодатели оценивают кандидатов не только по базовым навыкам, но и по другим критериям. Из-за этого многие месяцами рассылают резюме и получают только отказы или полное игнорирование.Андрон Алексанян - аналитик с опытом 9 лет и СEO Симулейтив проведет бесплатный урок и покажет, как выглядит путь к первой работе аналитиком в 2026 году.Вы узнаете:🔶Какие навыки действительно проверяют на собеседованиях;🔶Что должно быть в портфолио, чтобы его открывали работодатели;🔶Почему многие резюме аналитиков сразу отправл…

2 weeks назад @ t.me
Айтишники, горит вакансия ❗️ Позиция: Дата-аналитик Компания: Яндекс.Маркет Зарплата: 200,000-350,000₽ Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большая Один товарищ — Ваня, д
Айтишники, горит вакансия ❗️ Позиция: Дата-аналитик Компания: Яндекс.Маркет Зарплата: 200,000-350,000₽ Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большая Один товарищ — Ваня, д

Айтишники, горит вакансия ❗️ Позиция: Дата-аналитик Компания: Яндекс.Маркет Зарплата: 200,000-350,000₽ Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большая Один товарищ — Ваня, для…

2 weeks, 1 day назад @ t.me
Айтишники, горит вакансия ❗️Позиция: Дата-аналитикКомпания: Яндекс.МаркетЗарплата: 200,000-350,000₽Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большаяОдин товарищ — Ваня, для вас
Айтишники, горит вакансия ❗️Позиция: Дата-аналитикКомпания: Яндекс.МаркетЗарплата: 200,000-350,000₽Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большаяОдин товарищ — Ваня, для вас Айтишники, горит вакансия ❗️Позиция: Дата-аналитикКомпания: Яндекс.МаркетЗарплата: 200,000-350,000₽Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большаяОдин товарищ — Ваня, для вас

Айтишники, горит вакансия ❗️Позиция: Дата-аналитикКомпания: Яндекс.МаркетЗарплата: 200,000-350,000₽Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большаяОдин товарищ — Ваня, для вас дюжину раз доказал, что даже с базовыми знаниями о Python ты можешь претендовать на такую зарплату хоть этой веснойОн сам работал продуктовым аналитиком в крупных компаниях и в блоге делится инфой, которую не расскажет ни один коллега:- Как уверенно проходить собеседования? [Полный гайд]- Какие ошибки не позволяют тебе получать офферы от 250,000₽? [Читать]- Разборы задач с ваших будущих собеседований [Открыть]Кто сохранит канал сейчас — за…

2 weeks, 4 days назад @ t.me
⚡️Вышло новое исследование «AI в BI Круг Громова 2026»!ИИ в бизнес-аналитике выходит за пределы обычного чат-помощника. Следующий этап – агентная аналитика и переход от модели «вопрос–ответ» к модели «задача–результат»: ИИ не просто отвечает на отдельный з
⚡️Вышло новое исследование «AI в BI Круг Громова 2026»!ИИ в бизнес-аналитике выходит за пределы обычного чат-помощника. Следующий этап – агентная аналитика и переход от модели «вопрос–ответ» к модели «задача–результат»: ИИ не просто отвечает на отдельный з ⚡️Вышло новое исследование «AI в BI Круг Громова 2026»!ИИ в бизнес-аналитике выходит за пределы обычного чат-помощника. Следующий этап – агентная аналитика и переход от модели «вопрос–ответ» к модели «задача–результат»: ИИ не просто отвечает на отдельный з

⚡️Вышло новое исследование «AI в BI Круг Громова 2026»!ИИ в бизнес-аналитике выходит за пределы обычного чат-помощника. Следующий этап – агентная аналитика и переход от модели «вопрос–ответ» к модели «задача–результат»: ИИ не просто отвечает на отдельный запрос, а самостоятельно планирует анализ, ищет нужные данные и инструменты, выстраивает многошаговую цепочку и выполняет действия.В отчет «AI в BI-круг Громова 2026» вошли более 10 российских BI-решений с поддержкой AI-функций, среди которых: Yandex DataLens, Навигатор BI, Insight SOLARIS, PIX BI, Easy Report, DataForge AI, Glarus AI, Visiology Cortex, Luxms AI, Polyanalyst и ТЕРН ИИ Ассистент. Решения при этом разделены на 4 архитектурных…

2 weeks, 4 days назад @ t.me
Как построить управляемый Data Lakehouse за неделю на Evolution Data Platform ⤵️На вебинаре 8 сентября эксперты Cloud.​ru покажут, как за неделю с нуля построить архитектуру Data Lakehouse на Evolution Data Platform — от загрузки сырых данных до курированн
Как построить управляемый Data Lakehouse за неделю на Evolution Data Platform ⤵️На вебинаре 8 сентября эксперты Cloud.​ru покажут, как за неделю с нуля построить архитектуру Data Lakehouse на Evolution Data Platform — от загрузки сырых данных до курированн Как построить управляемый Data Lakehouse за неделю на Evolution Data Platform ⤵️На вебинаре 8 сентября эксперты Cloud.​ru покажут, как за неделю с нуля построить архитектуру Data Lakehouse на Evolution Data Platform — от загрузки сырых данных до курированн

Как построить управляемый Data Lakehouse за неделю на Evolution Data Platform ⤵️На вебинаре 8 сентября эксперты Cloud.​ru покажут, как за неделю с нуля построить архитектуру Data Lakehouse на Evolution Data Platform — от загрузки сырых данных до курированных витрин — с помощью управляемых сервисов, без эксплуатационной нагрузки и с фокусом на бизнес-результат.В программе:▶️принципы построения Lakehouse-архитектуры с единым слоем хранения в S3 в формате Apache Iceberg с поддержкой ACID-гарантий и версионирования;▶️подходы к централизованному управлению метаданными и происхождением данных через Managed Metastore;▶️способы реализации контроля качества данных в Managed Spark без остановки пайпл…

3 weeks, 4 days назад @ t.me
⚡️ Вышел отчет «Отечественные решения Data Lakehouse-круг Громова 2026»Российский рынок Data Lakehouse перешёл от пилотных проектов к промышленным внедрениям. При этом рынок разделился на два архитектурных подхода, а информационная безопасность стала одним
⚡️ Вышел отчет «Отечественные решения Data Lakehouse-круг Громова 2026»Российский рынок Data Lakehouse перешёл от пилотных проектов к промышленным внедрениям. При этом рынок разделился на два архитектурных подхода, а информационная безопасность стала одним ⚡️ Вышел отчет «Отечественные решения Data Lakehouse-круг Громова 2026»Российский рынок Data Lakehouse перешёл от пилотных проектов к промышленным внедрениям. При этом рынок разделился на два архитектурных подхода, а информационная безопасность стала одним

⚡️ Вышел отчет «Отечественные решения Data Lakehouse-круг Громова 2026»Российский рынок Data Lakehouse перешёл от пилотных проектов к промышленным внедрениям. При этом рынок разделился на два архитектурных подхода, а информационная безопасность стала одним из главных критериев выбора платформы.В исследование вошли 10 отечественных решений: MWS Data Lakehouse, Платформа Selena, Digital Q.DataFactory, CedrusData Platform, Data Ocean Nova, Tengri Data Platform, Arenadata Hyperwave, VK Data Platform, YTsaurus и Yandex Data Platform.➡️ Отчёт даст ориентиры:– чем отличаются интегрированные платформы от унифицированных систем,– когда важнее гибкость и технологическая свобода, а когда – простота вн…

1 month назад @ t.me
3 бесплатных курса, 30+ уроков, 100+ задач 🫠Кажется, Симулейтив сошли с ума, они отдают бесплатно три курса, за которые многие берут деньги. Если вы хотите прокачаться в аналитике данных - начните с бесплатных курсов по самым важным разделам. Именно эти бл
3 бесплатных курса, 30+ уроков, 100+ задач 🫠Кажется, Симулейтив сошли с ума, они отдают бесплатно три курса, за которые многие берут деньги. Если вы хотите прокачаться в аналитике данных - начните с бесплатных курсов по самым важным разделам. Именно эти бл 3 бесплатных курса, 30+ уроков, 100+ задач 🫠Кажется, Симулейтив сошли с ума, они отдают бесплатно три курса, за которые многие берут деньги. Если вы хотите прокачаться в аналитике данных - начните с бесплатных курсов по самым важным разделам. Именно эти бл

3 бесплатных курса, 30+ уроков, 100+ задач 🫠Кажется, Симулейтив сошли с ума, они отдают бесплатно три курса, за которые многие берут деньги. Если вы хотите прокачаться в аналитике данных - начните с бесплатных курсов по самым важным разделам. Именно эти блоки помогут вам вкатиться в профессию, спрос на которую не падает из года в год. В наборе вы получите: 🐍 Основы Python — 10 уроков, 100+ практических задач, 3 проекта для портфолио. Реальные кейсы: аналитика продуктовых метрик, автоматизация обработки чеков. Спойлер: именно с этого начинается карьера аналитика.🗄 Основы SQL — 12 уроков, 70 задач на PostgreSQL, оконные функции, финальный проект. Без SQL не возьмут ни на одну позицию, связанн…

1 month, 1 week назад @ t.me
🔥 Подборка-сохраняшка самых полезных эфиров с канала. В этом году у нас 3 фокуса - разборы резюме, мок - собесы, анализ рынка от клиентов Этот пост будет постоянно актуализироваться новыми ТОПовыми статьями, подписывайтесь, чтобы не потерять!• разборы резю
🔥 Подборка-сохраняшка самых полезных эфиров с канала. В этом году у нас 3 фокуса - разборы резюме, мок - собесы, анализ рынка от клиентов Этот пост будет постоянно актуализироваться новыми ТОПовыми статьями, подписывайтесь, чтобы не потерять!• разборы резю

🔥 Подборка-сохраняшка самых полезных эфиров с канала. В этом году у нас 3 фокуса - разборы резюме, мок - собесы, анализ рынка от клиентов Этот пост будет постоянно актуализироваться новыми ТОПовыми статьями, подписывайтесь, чтобы не потерять!• разборы резюме• мок собесы (вы очень просили на последнем эфире)• офферы 📹 ЭФИРЫ - РАЗБОРЫ РЕЗЮМЕ 🔴Разборы резюме project manager 🔴Разборы резюме product manager (эфир с нанимающим)🔴Разборы резюме аналитики (разные) 🔴Разборы резюме разработчиков (эфир с нанимающим)🔴Разборы резюме. Project, Delivery, Analyst, Developers (эфир с нанимающим)🔴RTE, Scrum master, Agile Coach - кто все эти люди?)🔴Разборы резюме управленцев. РМО, СТО, CIO, СРО, СМО📹 ЭФИРЫ - М…

1 month, 2 weeks назад @ t.me
📊 Глубокое погружение в профессиональные инструменты на реальных проектах. Записывайтесь на курс «Системный аналитик. Экспертный уровень». 🎁 Учавствуйте в 3 бесплатных вебинарах — познакомьтесь с программой обучения и преподавателями. Задайте свои вопросы
📊 Глубокое погружение в профессиональные инструменты на реальных проектах. Записывайтесь на курс «Системный аналитик. Экспертный уровень». 🎁 Учавствуйте в 3 бесплатных вебинарах — познакомьтесь с программой обучения и преподавателями. Задайте свои вопросы 📊 Глубокое погружение в профессиональные инструменты на реальных проектах. Записывайтесь на курс «Системный аналитик. Экспертный уровень». 🎁 Учавствуйте в 3 бесплатных вебинарах — познакомьтесь с программой обучения и преподавателями. Задайте свои вопросы

📊 Глубокое погружение в профессиональные инструменты на реальных проектах. Записывайтесь на курс «Системный аналитик. Экспертный уровень». 🎁 Учавствуйте в 3 бесплатных вебинарах — познакомьтесь с программой обучения и преподавателями. Задайте свои вопросы экспертам!6 августа, 20:00 мск — «Пользовательские сценарии (Use Cases) на реальном примере»: от бизнес-требования до задачи разработчику. Анализ требований, создание Use Cases, связь с разработкой, Q&A.13 августа, 20:00 мск — «Управление данными в MSA»: цена ошибок дублирования данных, оптимизация инфраструктуры и выбор БД (SQL vs NoSQL), единый глоссарий и контракты данных без бюрократии, требования к качеству данных для ИИ, чтобы модели…

2 months назад @ t.me
Приглашаем аналитиков на встречу с командой Алисы и умных устройств 26 июля проводим Welcome Time* — неформальную офлайн-встречу. Расскажем о «внутрянке» проектов, поделимся экспертизой и ответим на ваши вопросы.💠 Приглашаем датасаентистов, дата-аналитиков
Приглашаем аналитиков на встречу с командой Алисы и умных устройств 26 июля проводим Welcome Time* — неформальную офлайн-встречу. Расскажем о «внутрянке» проектов, поделимся экспертизой и ответим на ваши вопросы.💠 Приглашаем датасаентистов, дата-аналитиков Приглашаем аналитиков на встречу с командой Алисы и умных устройств 26 июля проводим Welcome Time* — неформальную офлайн-встречу. Расскажем о «внутрянке» проектов, поделимся экспертизой и ответим на ваши вопросы.💠 Приглашаем датасаентистов, дата-аналитиков

Приглашаем аналитиков на встречу с командой Алисы и умных устройств 26 июля проводим Welcome Time* — неформальную офлайн-встречу. Расскажем о «внутрянке» проектов, поделимся экспертизой и ответим на ваши вопросы.💠 Приглашаем датасаентистов, дата-аналитиков и ML-аналитиков с опытом работы на Python от трёх лет и опытом с LLM.⏬ На встрече можно будет пообщаться с командой и коллегами из индустрии, а также по желанию пройти диагностику навыков по Python и SQL. На диагностике интервьюер подсветит ваши сильные стороны и покажет зоны роста. Хороший результат можно будет зачесть как одну техническую секцию, если решите пройти собеседование в Яндекс.♾ Подробная программа и регистрация — на сайте:ht…

2 months, 2 weeks назад @ t.me
Приглашаем аналитиков на встречу с командой Алисы и умных устройств 26 июля проводим Welcome Time* — неформальную офлайн-встречу. Расскажем о «внутрянке» проектов, поделимся экспертизой и ответим на ваши вопросы.💠 Приглашаем датасаентистов, дата-аналитиков
Приглашаем аналитиков на встречу с командой Алисы и умных устройств 26 июля проводим Welcome Time* — неформальную офлайн-встречу. Расскажем о «внутрянке» проектов, поделимся экспертизой и ответим на ваши вопросы.💠 Приглашаем датасаентистов, дата-аналитиков Приглашаем аналитиков на встречу с командой Алисы и умных устройств 26 июля проводим Welcome Time* — неформальную офлайн-встречу. Расскажем о «внутрянке» проектов, поделимся экспертизой и ответим на ваши вопросы.💠 Приглашаем датасаентистов, дата-аналитиков

Приглашаем аналитиков на встречу с командой Алисы и умных устройств 26 июля проводим Welcome Time* — неформальную офлайн-встречу. Расскажем о «внутрянке» проектов, поделимся экспертизой и ответим на ваши вопросы.💠 Приглашаем датасаентистов, дата-аналитиков и ML-аналитиков с опытом работы на Python от трёх лет и опытом с LLM.⏬ На встрече можно будет пообщаться с командой и коллегами из индустрии, а также по желанию пройти диагностику навыков по Python и SQL. На диагностике интервьюер подсветит ваши сильные стороны и покажет зоны роста. Хороший результат можно будет зачесть как одну техническую секцию, если решите пройти собеседование в Яндекс.♾ Подробная программа и регистрация — на сайте:ht…

2 months, 2 weeks назад @ telegram.me
📊 Данные сейчас растут быстрее, чем компании успевают под них перестраиваться. Поэтому всё больше переходят на Lakehouse — архитектуру, которая совмещает гибкость Data Lake и надёжность классического хранилища данных.Почему это важно прямо сейчас: переход
📊 Данные сейчас растут быстрее, чем компании успевают под них перестраиваться. Поэтому всё больше переходят на Lakehouse — архитектуру, которая совмещает гибкость Data Lake и надёжность классического хранилища данных.Почему это важно прямо сейчас: переход 📊 Данные сейчас растут быстрее, чем компании успевают под них перестраиваться. Поэтому всё больше переходят на Lakehouse — архитектуру, которая совмещает гибкость Data Lake и надёжность классического хранилища данных.Почему это важно прямо сейчас: переход

📊 Данные сейчас растут быстрее, чем компании успевают под них перестраиваться. Поэтому всё больше переходят на Lakehouse — архитектуру, которая совмещает гибкость Data Lake и надёжность классического хранилища данных.Почему это важно прямо сейчас: переход на Lakehouse в среднем снижает затраты на инфраструктуру на 40% и ускоряет получение аналитики с недель до дней. А ещё 85% компаний уже строят на Lakehouse свои ИИ-модели — без такой платформы AI-проекты просто не на чем разворачивать.В России эта технология только набирает обороты, поэтому специалисты, которые умеют такие системы проектировать и разворачивать, — на вес золота. Yandex Cloud предлагает два экзамена, чтобы подтвердить это оф…

2 months, 3 weeks назад @ telegram.me
📊 Данные сейчас растут быстрее, чем компании успевают под них перестраиваться. Поэтому всё больше переходят на Lakehouse — архитектуру, которая совмещает гибкость Data Lake и надёжность классического хранилища данных.Почему это важно прямо сейчас: переход
📊 Данные сейчас растут быстрее, чем компании успевают под них перестраиваться. Поэтому всё больше переходят на Lakehouse — архитектуру, которая совмещает гибкость Data Lake и надёжность классического хранилища данных.Почему это важно прямо сейчас: переход 📊 Данные сейчас растут быстрее, чем компании успевают под них перестраиваться. Поэтому всё больше переходят на Lakehouse — архитектуру, которая совмещает гибкость Data Lake и надёжность классического хранилища данных.Почему это важно прямо сейчас: переход

📊 Данные сейчас растут быстрее, чем компании успевают под них перестраиваться. Поэтому всё больше переходят на Lakehouse — архитектуру, которая совмещает гибкость Data Lake и надёжность классического хранилища данных.Почему это важно прямо сейчас: переход на Lakehouse в среднем снижает затраты на инфраструктуру на 40% и ускоряет получение аналитики с недель до дней. А ещё 85% компаний уже строят на Lakehouse свои ИИ-модели — без такой платформы AI-проекты просто не на чем разворачивать.В России эта технология только набирает обороты, поэтому специалисты, которые умеют такие системы проектировать и разворачивать, — на вес золота. Yandex Cloud предлагает два экзамена, чтобы подтвердить это оф…

2 months, 3 weeks назад @ t.me
Труба данных Труба данных
последний пост 5 months, 2 weeks назад
💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р
💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р 💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р

💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на рынке — присоединяйся и работай по лучшим связкам- Свободный график🔗Присоединиться - https://wavium.ru⚙️ Наш бот - https://t.me/waviumbot⚡️ПОДАТЬ ЗАЯВКУ⚡️ПОДАТЬ ЗАЯВКУ⚡️ПОДАТЬ ЗАЯВКУ

5 months, 2 weeks назад @ t.me
💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р
💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р 💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р

💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на рынке — присоединяйся и работай по лучшим связкам- Свободный график🔗Присоединиться - https://wavium.ru⚙️ Наш бот - https://t.me/waviumbot⚡️ПОДАТЬ ЗАЯВКУ⚡️ПОДАТЬ ЗАЯВКУ⚡️ПОДАТЬ ЗАЯВКУ

5 months, 2 weeks назад @ telegram.me
Channel created
Channel created

Channel created

5 months, 2 weeks назад @ telegram.me
Channel created
Channel created

Channel created

5 months, 2 weeks назад @ t.me
Обычно по пятница выходит пятничный юмор, но сегодня - крайняя шутка.Этот канал прослужил мне верой и правдой почти 6.5 лет и за это время подарил мне очень разнообразный опыт, 5 тысяч рублей донатов, вакансии и проекты и больше 4 тысяч людей, которым инте
Обычно по пятница выходит пятничный юмор, но сегодня - крайняя шутка.Этот канал прослужил мне верой и правдой почти 6.5 лет и за это время подарил мне очень разнообразный опыт, 5 тысяч рублей донатов, вакансии и проекты и больше 4 тысяч людей, которым инте Обычно по пятница выходит пятничный юмор, но сегодня - крайняя шутка.Этот канал прослужил мне верой и правдой почти 6.5 лет и за это время подарил мне очень разнообразный опыт, 5 тысяч рублей донатов, вакансии и проекты и больше 4 тысяч людей, которым инте

Обычно по пятница выходит пятничный юмор, но сегодня - крайняя шутка.Этот канал прослужил мне верой и правдой почти 6.5 лет и за это время подарил мне очень разнообразный опыт, 5 тысяч рублей донатов, вакансии и проекты и больше 4 тысяч людей, которым интересно мое мнение на тему, о существовании которой я узнал чисто случайно 7 лет назад. Макс, ты помнишь как ты мне сказал "Так ты ведь получается занимаешься дата инжинирингом?" 😃Я безумно благодарен вам всем за то, что приходили в комменты и писали свое мнение, за бесконечное количество 💩 оставленных под постами, за репосты и материал, который вы приносили. Я смотрю на этот путь, который мы прошли с вами и я вам очень благодарен!По количес…

6 months, 3 weeks назад @ t.me
https://clickhouse.com/blog/clickhouse-kubernetes-operatorКликхаус выкатил K8S Operator. Это чтобы было изи раскатить клик в кубере.Да-да, давайте не будем базы данных держать в кубернетесе, только bare metal и весь остальной бубнеж.Большинству компаний бу
https://clickhouse.com/blog/clickhouse-kubernetes-operatorКликхаус выкатил K8S Operator. Это чтобы было изи раскатить клик в кубере.Да-да, давайте не будем базы данных держать в кубернетесе, только bare metal и весь остальной бубнеж.Большинству компаний бу

https://clickhouse.com/blog/clickhouse-kubernetes-operatorКликхаус выкатил K8S Operator. Это чтобы было изи раскатить клик в кубере.Да-да, давайте не будем базы данных держать в кубернетесе, только bare metal и весь остальной бубнеж.Большинству компаний будет достаточно и клика в кубере. (хотя, если честно, таким компаниям, наверное, рано в кубер)@ohmydataengineer

8 months назад @ t.me
Если вы искали качественный туториал про то как использовать Claude Code лучше всего с лучшими настройками на данный момент, то вот, я прнс
Если вы искали качественный туториал про то как использовать Claude Code лучше всего с лучшими настройками на данный момент, то вот, я прнс

Если вы искали качественный туториал про то как использовать Claude Code лучше всего с лучшими настройками на данный момент, то вот, я прнс

9 months назад @ t.me
https://www.youtube.com/watch?v=rmvDxxNubIgВ личку принесли еще один прекрасный, небольшой доклад про Context Engineering.Из забавного - почти ко всем советам, про которые говорится в докладе, дошел и стал применять самостоятельно, видимо я не настолько ту
https://www.youtube.com/watch?v=rmvDxxNubIgВ личку принесли еще один прекрасный, небольшой доклад про Context Engineering.Из забавного - почти ко всем советам, про которые говорится в докладе, дошел и стал применять самостоятельно, видимо я не настолько ту

https://www.youtube.com/watch?v=rmvDxxNubIgВ личку принесли еще один прекрасный, небольшой доклад про Context Engineering.Из забавного - почти ко всем советам, про которые говорится в докладе, дошел и стал применять самостоятельно, видимо я не настолько туп 😁@ohmydataengineer - канал "Труба данных" про всякое в мире работы с данным

9 months, 1 week назад @ t.me
Хотя про AI-агентов сейчас пишут буквально из каждого утюга, в этой статье мне особенно зацепился один момент — визуализация зависимости качества ответов LLM от длины контекста. Интуитивно мы все чувствуем, что «чем больше — тем лучше», но на практике крив
Хотя про AI-агентов сейчас пишут буквально из каждого утюга, в этой статье мне особенно зацепился один момент — визуализация зависимости качества ответов LLM от длины контекста. Интуитивно мы все чувствуем, что «чем больше — тем лучше», но на практике крив

Хотя про AI-агентов сейчас пишут буквально из каждого утюга, в этой статье мне особенно зацепился один момент — визуализация зависимости качества ответов LLM от длины контекста. Интуитивно мы все чувствуем, что «чем больше — тем лучше», но на практике кривая выглядит иначе: после определённого порога контекст начинает не помогать, а мешать. Сигнал тонет в шуме, модель теряет фокус, а качество решений деградирует. Забрал эту картинку себе в копилку как хорошее напоминание.Из этого логично вытекает важный тезис: формулировка задачи вторична, первична политика контекста. Не «как красиво спросить», а что именно и в каком объёме сейчас действительно нужно модели. Принцип «минимум, достаточный дл…

9 months, 1 week назад @ t.me
https://karpathy.bearblog.dev/year-in-review-2025Andrej Karpathy (ну тот, который был главнюком за AI в Tesla и не только) подвел отличные и оч лаконичные итоги года.Еще мне на прошлой неделе удалось посмотреть два интересных интервью и один докладик- Andr
https://karpathy.bearblog.dev/year-in-review-2025Andrej Karpathy (ну тот, который был главнюком за AI в Tesla и не только) подвел отличные и оч лаконичные итоги года.Еще мне на прошлой неделе удалось посмотреть два интересных интервью и один докладик- Andr

https://karpathy.bearblog.dev/year-in-review-2025Andrej Karpathy (ну тот, который был главнюком за AI в Tesla и не только) подвел отличные и оч лаконичные итоги года.Еще мне на прошлой неделе удалось посмотреть два интересных интервью и один докладик- Andrej Karpathy — “We’re summoning ghosts, not building animals” - https://www.youtube.com/watch?v=lXUZvyajciY- Ilya Sutskever – "We're moving from the age of scaling to the age of research"- https://www.youtube.com/watch?v=aR20FWCCjAs- Andrej Karpathy: Software Is Changing (Again) - https://www.youtube.com/watch?v=LCEmiRjPEtQИ нет, это не х2 скорость, это он так в реальности говорит 😃@ohmydataengineer - канал "Труба данных" про всякое в мире …

9 months, 1 week назад @ t.me
Новые поглощения и покупки: IBM покупает Confluent (не путать с Confluence 😆, это которые Kafka)https://www.reuters.com/technology/ibm-nears-roughly-11-billion-deal-confluent-wsj-reports-2025-12-08/@ohmydataengineer
Новые поглощения и покупки: IBM покупает Confluent (не путать с Confluence 😆, это которые Kafka)https://www.reuters.com/technology/ibm-nears-roughly-11-billion-deal-confluent-wsj-reports-2025-12-08/@ohmydataengineer

Новые поглощения и покупки: IBM покупает Confluent (не путать с Confluence 😆, это которые Kafka)https://www.reuters.com/technology/ibm-nears-roughly-11-billion-deal-confluent-wsj-reports-2025-12-08/@ohmydataengineer

9 months, 3 weeks назад @ t.me
Показываем аудитории молодые open-source проекты. Мне не жалко, вдруг кому-то будет интересно.🔐 Postgresus - self-hosted инструмент для резервного копирования и мониторинга PostgreSQL базы данных🔥 Возможности:- создание бекапов по расписанию для PostgreSQL
Показываем аудитории молодые open-source проекты. Мне не жалко, вдруг кому-то будет интересно.🔐 Postgresus - self-hosted инструмент для резервного копирования и мониторинга PostgreSQL базы данных🔥 Возможности:- создание бекапов по расписанию для PostgreSQL Показываем аудитории молодые open-source проекты. Мне не жалко, вдруг кому-то будет интересно.🔐 Postgresus - self-hosted инструмент для резервного копирования и мониторинга PostgreSQL базы данных🔥 Возможности:- создание бекапов по расписанию для PostgreSQL

Показываем аудитории молодые open-source проекты. Мне не жалко, вдруг кому-то будет интересно.🔐 Postgresus - self-hosted инструмент для резервного копирования и мониторинга PostgreSQL базы данных🔥 Возможности:- создание бекапов по расписанию для PostgreSQL 13-18;- уведомления в Telegram, Slack, Discord, если бекап сломался или база недоступна;- хранение бекапов локально, в S3 или Google Drive;- health check базы данных раз в минуту;- Apache 2.0 лицензия (полностью открытый);Запуск через Docker:docker run -d --name postgresus -p 4005:4005 -v ./postgresus-data:/postgresus-data --restart unless-stopped rostislavdugin/postgresus:latest📌 GitHub

9 months, 3 weeks назад @ t.me
MiniO все.This project is currently under maintenance and is not accepting new changes. • The codebase is in a maintenance-only state • No new features, enhancements, or pull requests will be accepted • Critical security fixes may be evaluated on a case-by
MiniO все.This project is currently under maintenance and is not accepting new changes. • The codebase is in a maintenance-only state • No new features, enhancements, or pull requests will be accepted • Critical security fixes may be evaluated on a case-by MiniO все.This project is currently under maintenance and is not accepting new changes. • The codebase is in a maintenance-only state • No new features, enhancements, or pull requests will be accepted • Critical security fixes may be evaluated on a case-by

MiniO все.This project is currently under maintenance and is not accepting new changes. • The codebase is in a maintenance-only state • No new features, enhancements, or pull requests will be accepted • Critical security fixes may be evaluated on a case-by-case basis • Existing issues and pull requests will not be actively reviewed • Community support continues on a best-effort basis through Slackhttps://github.com/minio/minio@ohmydataengineer

9 months, 4 weeks назад @ t.me
enthusiastech enthusiastech
последний пост None
data будни data будни
последний пост 1 day, 3 hours назад
🤩 delirious dhhитак, прослушал ~5ч одного небезызвестного программиста с сильными взглядами; ушло у меня на это всего где-то неделя: пара походов в спортзал и комьютов.чем примечательно это интервью?во-первых, dhh известен своими взглядами за чистоту кода
🤩 delirious dhhитак, прослушал ~5ч одного небезызвестного программиста с сильными взглядами; ушло у меня на это всего где-то неделя: пара походов в спортзал и комьютов.чем примечательно это интервью?во-первых, dhh известен своими взглядами за чистоту кода

🤩 delirious dhhитак, прослушал ~5ч одного небезызвестного программиста с сильными взглядами; ушло у меня на это всего где-то неделя: пара походов в спортзал и комьютов.чем примечательно это интервью?во-первых, dhh известен своими взглядами за чистоту кода; это тот ещё художник и скульптор, который «вручную вытачивал» каждый кусочек своих программ. за свою карьеру с 90х он успел понабраться и опыта, и мненийво-вторых, не далее чем год назад, тот же самый dhh приходил в тот же подскаст и уверял, что этим вашим агентам ещё довольно далеко до настоящего года: так — автокомплит, не более!получается такой идеальный маркер для 2025-26 годов - даже самые сильные программисты стали признавать возрос…

1 day, 3 hours назад @ t.me
мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для
мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для

мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для своих разработчиков. а сами поставщики фундаментальных моделей в принципе ограничены только внутренними мощностями для своих сотрудников.в подкастах Кирилла Мокевнина @orgprog упоминали, что в долине у каждого второго безлимит на модели OpenAI / Anthropic по тем или иным каналам

5 months, 1 week назад @ telegram.me
мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для
мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для

мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для своих разработчиков. а сами поставщики фундаментальных моделей в принципе ограничены только внутренними мощностями для своих сотрудников.в подкастах Кирилла Мокевнина @orgprog упоминали, что в долине у каждого второго безлимит на модели OpenAI / Anthropic по тем или иным каналам

5 months, 1 week назад @ t.me
🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными в
🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными в

🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными взглядами — он говорит что думает, не взирая на мнения большинства или отдельных авторитетовнедавно зашёл к Pragmatic Engineer на интервьюhttps://youtu.be/JiWgKRgdgpIи вот наступил действительно переломный момент: ⁃ июль 2025 — DHH не верит и не использует агентов ⁃ январь 2026 — DHH переходит на agent-first разработку что поменялось? вышли модели, которые выдают достаточно хороший результат, которые при минимальных доработках можно шипать …

5 months, 1 week назад @ telegram.me
🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными в
🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными в

🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными взглядами — он говорит что думает, не взирая на мнения большинства или отдельных авторитетовнедавно зашёл к Pragmatic Engineer на интервьюhttps://youtu.be/JiWgKRgdgpIи вот наступил действительно переломный момент: ⁃ июль 2025 — DHH не верит и не использует агентов ⁃ январь 2026 — DHH переходит на agent-first разработку что поменялось? вышли модели, которые выдают достаточно хороший результат, которые при минимальных доработках можно шипать …

5 months, 1 week назад @ t.me
🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в
🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в

🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в Гитхаб создаются через Claude Code (ожидают 20% к концу года)интересно, что первую версию Claude Code Борис сделал прошлой весной и это не был сиюминутный успех; популярность инструмента росла постепенно и взрывной рост случился после выхода модели осенью (Опус 4.5 кажется)и с ноября 2025 Борис не написал ни строчки кода вручную — всё через Клода; так же приводит в пример «лучших программистов Spotify», мол, они тоже больше не пишут код ру…

5 months, 1 week назад @ telegram.me
🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в
🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в

🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в Гитхаб создаются через Claude Code (ожидают 20% к концу года)интересно, что первую версию Claude Code Борис сделал прошлой весной и это не был сиюминутный успех; популярность инструмента росла постепенно и взрывной рост случился после выхода модели осенью (Опус 4.5 кажется)и с ноября 2025 Борис не написал ни строчки кода вручную — всё через Клода; так же приводит в пример «лучших программистов Spotify», мол, они тоже больше не пишут код ру…

5 months, 1 week назад @ t.me
📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты
📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты

📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты, прочитав которые, осталось непонятным что́ надо сделать; или задачи, где ты вроде сделал что было написано, но оказалось, что нужно было не то и не так ¯\_(ツ)_/¯ мы в команде стараемся придерживаться культуры ведения задач — попробую описать как я это вижу⌘⌘⌘начнём с того, что создать хороший тикет - это отдельная работа; чтобы понятно описать что надо сделать, надо как минимум представлять проблему и целевое решениеесть базовый паттерн, которого …

7 months, 3 weeks назад @ telegram.me
📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты
📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты

📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты, прочитав которые, осталось непонятным что́ надо сделать; или задачи, где ты вроде сделал что было написано, но оказалось, что нужно было не то и не так ¯\_(ツ)_/¯ мы в команде стараемся придерживаться культуры ведения задач — попробую описать как я это вижу⌘⌘⌘начнём с того, что создать хороший тикет - это отдельная работа; чтобы понятно описать что надо сделать, надо как минимум представлять проблему и целевое решениеесть базовый паттерн, которого …

7 months, 3 weeks назад @ t.me
🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных
🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных

🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных сторон:+ Самат Галимов накидал ссылок для понимания контекстаhttps://t.me/ctodaily/1995+ Pragmatic Engineer выпустил интервью с авторомhttps://youtu.be/8lF7HmQ_RgY+ ребята из Шмит16 собрались вместе где-то на Бали и скупают все доступные мак-мини, чтобы устроить ферму из таких аи-агентов сам автор бота не случайный мамкин вайбкодер — он начинал ещё с веб-приложений в начале 2000-х и потом перешёл на приложения айос для первого айфона. пот…

7 months, 3 weeks назад @ t.me
🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных
🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных

🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных сторон:+ Самат Галимов накидал ссылок для понимания контекстаhttps://t.me/ctodaily/1995+ Pragmatic Engineer выпустил интервью с авторомhttps://youtu.be/8lF7HmQ_RgY+ ребята из Шмит16 собрались вместе где-то на Бали и скупают все доступные мак-мини, чтобы устроить ферму из таких аи-агентов сам автор бота не случайный мамкин вайбкодер — он начинал ещё с веб-приложений в начале 2000-х и потом перешёл на приложения айос для первого айфона. пот…

7 months, 3 weeks назад @ telegram.me
data будни pinned «📢 ищем дата-коллег к себе в Яндекс Финтех → дата инженеры https://yandex.ru/jobs/vacancies/inzhener-dannih-v-finteh-36637 → дата-партнёры (они же системные аналитики двх) https://yandex.ru/jobs/vacancies/analitik-dwh-v-finteh-27815 эт
data будни pinned «📢 ищем дата-коллег к себе в Яндекс Финтех → дата инженеры https://yandex.ru/jobs/vacancies/inzhener-dannih-v-finteh-36637 → дата-партнёры (они же системные аналитики двх) https://yandex.ru/jobs/vacancies/analitik-dwh-v-finteh-27815 эт

data будни pinned «📢 ищем дата-коллег к себе в Яндекс Финтех → дата инженеры https://yandex.ru/jobs/vacancies/inzhener-dannih-v-finteh-36637 → дата-партнёры (они же системные аналитики двх) https://yandex.ru/jobs/vacancies/analitik-dwh-v-finteh-27815 это прям в нашу команду…»

7 months, 4 weeks назад @ t.me
data будни pinned «📢 ищем дата-коллег к себе в Яндекс Финтех → дата инженеры https://yandex.ru/jobs/vacancies/inzhener-dannih-v-finteh-36637 → дата-партнёры (они же системные аналитики двх) https://yandex.ru/jobs/vacancies/analitik-dwh-v-finteh-27815 эт
data будни pinned «📢 ищем дата-коллег к себе в Яндекс Финтех → дата инженеры https://yandex.ru/jobs/vacancies/inzhener-dannih-v-finteh-36637 → дата-партнёры (они же системные аналитики двх) https://yandex.ru/jobs/vacancies/analitik-dwh-v-finteh-27815 эт

data будни pinned «📢 ищем дата-коллег к себе в Яндекс Финтех → дата инженеры https://yandex.ru/jobs/vacancies/inzhener-dannih-v-finteh-36637 → дата-партнёры (они же системные аналитики двх) https://yandex.ru/jobs/vacancies/analitik-dwh-v-finteh-27815 это прям в нашу команду…»

7 months, 4 weeks назад @ telegram.me
✍️ о код-ревью у нас в команде в прод только через пулл-реквесты и каждый пулл-реквест должно посмотреть двое коллег. моя личная статистика за 2025 год показывает 430 проведённых код-ревью. сложились какие-то мысли по этому поводу, ниже пытаюсь собрать и
✍️ о код-ревью у нас в команде в прод только через пулл-реквесты и каждый пулл-реквест должно посмотреть двое коллег. моя личная статистика за 2025 год показывает 430 проведённых код-ревью. сложились какие-то мысли по этому поводу, ниже пытаюсь собрать и

✍️ о код-ревью у нас в команде в прод только через пулл-реквесты и каждый пулл-реквест должно посмотреть двое коллег. моя личная статистика за 2025 год показывает 430 проведённых код-ревью. сложились какие-то мысли по этому поводу, ниже пытаюсь собрать их…

7 months, 4 weeks назад @ telegram.me
✍️ о код-ревью у нас в команде в прод только через пулл-реквесты и каждый пулл-реквест должно посмотреть двое коллег. моя личная статистика за 2025 год показывает 430 проведённых код-ревью. сложились какие-то мысли по этому поводу, ниже пытаюсь собрать и
✍️ о код-ревью у нас в команде в прод только через пулл-реквесты и каждый пулл-реквест должно посмотреть двое коллег. моя личная статистика за 2025 год показывает 430 проведённых код-ревью. сложились какие-то мысли по этому поводу, ниже пытаюсь собрать и

✍️ о код-ревью у нас в команде в прод только через пулл-реквесты и каждый пулл-реквест должно посмотреть двое коллег. моя личная статистика за 2025 год показывает 430 проведённых код-ревью. сложились какие-то мысли по этому поводу, ниже пытаюсь собрать их…

7 months, 4 weeks назад @ t.me
под капотом Яндекс.Такси под капотом Яндекс.Такси
последний пост None
🎧 Podcasts
Data Engineering Podcast Data Engineering Podcast
последний пост None
Data Brew by Databricks
последний пост None
«Ничего такого» by Dodo Enginnering
последний пост None
Запуск завтра Podcast Запуск завтра Podcast
последний пост 4 weeks назад
Как дата-центры влияют на экологию
Как дата-центры влияют на экологию

Кажется, что искусственный интеллект и облачные технологии — это нечто нематериальное, «чистое» и почти бесплатное. Но каждый раз, когда вы спрашиваете нейросеть, что лучше приготовить на ужин или как ответить на неприятное письмо, где-то в мире тратится энергия — для работы дата-центров. За прошлый год они сожгли электричества как целая Франция — страна с населением почти 70 миллионов человек.В этом выпуске подкаста «Запуск завтра» мы разбираемся в скрытой цене искусственного интеллекта. Наша гостья — Ольга Добровидова, научная журналистка с 15-летним стажем, которая помогает разобраться в сложных историях о науке и технологиях. Мы поговорили о дата-центрах — тех самых «фабриках облаков», …

4 weeks назад @ share.transistor.fm
Чем мы платим за ИИ
Чем мы платим за ИИ Чем мы платим за ИИ

Каждый раз, когда вы спрашиваете нейросеть, что лучше приготовить на ужин или как ответить на неприятное письмо, где-то в мире тратится электричество — на работу серверов и дата-центров. За прошлый год они сожгли электричества примерно как целая Франция. Но действительно ли это проблема? Зачем вообще дата-центрам столько ресурсов? И как это в итоге влияет на нашу жизнь? Самат Галимов говорит с научной журналисткой Ольгой Добровидовой.Подписывайтесь на Либо/Либо+! В честь семилетия нашей студии годовая подписка стоит всего 2495 рублей. Подписывайтесь в Telegram: https://cutt.ly/zap3108eptg и в Apple Podcasts https://cutt.ly/zap3108epapЧат Запуска в телеграме: https://t.me/zapuskzavtraБот наш…

1 month, 1 week назад @ share.transistor.fm
Как нейросети помогают ученым искать новые лекарства и делать открытия
Как нейросети помогают ученым искать новые лекарства и делать открытия Как нейросети помогают ученым искать новые лекарства и делать открытия

Это межсезонный эпизод «Запуск завтра». В нем — скрининг миллионов молекул, нейросети для поиска активных сперматозоидов и изучение щелчков кашалотов. Мы позвали научного обозревателя Илью Колмановского, чтобы узнать, как ИИ приходит в науку и почему для ученых это — обоюдоострый нож.Подписывайтесь на Либо/Либо+! В честь семилетия нашей студии годовая подписка стоит всего 2495 рублей. Подписывайтесь в Telegram: https://cutt.ly/don24bttg и в Apple Podcasts https://cutt.ly/don24btap28 июля старт курса по нарративным подкастам: https://course.libolibo.ru/podcast-narrative-course По промокоду ЗАПУСК — скидка 10%.Слушайте подкаст «Голый землекоп». Эпизоды, упомянутые в разговоре: «Зачем нужна ме…

2 months, 2 weeks назад @ share.transistor.fm
Венчур. Как инвесторы решают, во что вложить деньги
Венчур. Как инвесторы решают, во что вложить деньги Венчур. Как инвесторы решают, во что вложить деньги

Правда, что если в названии стартапа есть слово «искусственный интеллект», то в него не глядя вложат деньги? В этом выпуске венчурный инвестор из Долины Николай Давыдов простым языком объясняет, как устроена индустрия. А ещё — какие красные флаги бывают у стартапов, как он на самом старте понял, что надо вкладываться в Perplexity — сейчас это один из самых дорогих ИИ-стартапов в мире, и почему компании для инвестиций нужно выбирать серьёзнее, чем женуРеклама. Рекламодатель АО «Селектел». erid: 2SDnjdAKTeaSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/6n7x8⚡️ У это…

3 months назад @ share.transistor.fm
Как работают носимые устройства и нужны ли они вам
Как работают носимые устройства и нужны ли они вам

Умные часы, умные браслеты, умные кольца — наверняка ваши знакомые или вы сами задумывались о покупке таких устройств. Производители убеждают, что помогут вам на пути к здоровью и высокому качеству жизни. Но что на самом деле умеют такие девайсы? Кому они реально полезны, а для кого — дорогая игрушка? На что обращать внимание при выборе? В этом эпизоде мы разбираемся, стоит ли вам тратить деньги на еще один гаджет, а помогает нам в этом Татьяна Гатинская. Татьяна много лет занималась медицинскими изделиями в фармацевтической компании Novartis, а сейчас вместе с командой создает свое носимое устройство. Реклама. Рекламодатель АО «Селектел». erid: 2SDnjeBdxkrSelectel — независимый провайдер, …

3 months, 1 week назад @ share.transistor.fm
Космические планы. Что еще нам может дать космос и зачем так часто туда летать
Космические планы. Что еще нам может дать космос и зачем так часто туда летать

Помните, когда каждый полет в космос был большим событием? Теперь пусками как будто никого не удивишь — в новостях постоянно пишут, что Илон Маск с его компанией SpaceX опять что-то запустили. Зачем отправлять в космос так много ракет? Какие безумные планы строят самые крупные игроки космической индустрии? И почему это все касается нас, простых людей на Земле? Вместе с аналитиком ракетных пусков Георгием Тришкиным разбираемся, для чего нам космос и какого развития мы ожидаем в ближайшие годы.Реклама. Рекламодатель АО «Селектел». erid: 2SDnje1D24zSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масш…

3 months, 2 weeks назад @ share.transistor.fm
Как меняется кибербезопасность с ИИ
Как меняется кибербезопасность с ИИ

Нейросети научились находить уязвимости. Что это значит для разработчиков и обычных пользователей? Станет ли проще атаковать и сложнее защищаться? Вместе с главным экспертом из Лаборатории Касперского Сергеем Головановым разбираемся, как меняется индустрия, когда и хакеры, и безопасники вооружились искусственным интеллектом.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjeiSCq8Selectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/97prs⚡️ У этого выпуска есть видеоверсия! Посмотрите ее на нашем YouTube-канале: https://www.youtube.com/@launchtomorrow Будем очень благодарн…

3 months, 3 weeks назад @ share.transistor.fm
Как создаются современные чипы
Как создаются современные чипы Как создаются современные чипы

Чипы — это маленькие кремниевые пластинки внутри всех наших устройств. Без них не разогреется еда в микроволновке и не заведётся автомобиль — чипы нужны буквально везде. При этом их производство — настолько запутанный процесс, что удивительно, как он вообще работает. Сегодня мы разберёмся, как устроены современные чипы и почему в последние годы они подорожали. Поговорю я с Дианой Гришиной — она работала в ASML, единственной в мире компании, которая производит станки для создания самых крутых чипов.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjcRXCVQSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе дл…

4 months назад @ share.transistor.fm
Как живет российская гражданская авиация после санкций
Как живет российская гражданская авиация после санкций Как живет российская гражданская авиация после санкций

После февраля 2022 года российская гражданская авиация оказалась практически отрезана санкциями от остального мира. Запреты коснулись не только воздушного пространства, но и лизинга, регистрации и обслуживания самолетов. И это целиком поменяло работу авиакомпаний. Как теперь поддерживаются самолеты в России? Сможет ли авиация перейти на «отечественный флот»? Стало ли опаснее летать? Рассказывает Анастасия Дагаева, журналистка и независимый авиационный эксперт.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjeXxtnNSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/m4hc…

4 months, 1 week назад @ share.transistor.fm
Как отношения с машиной влияют на человека
Как отношения с машиной влияют на человека Как отношения с машиной влияют на человека

В прошлом выпуске мы разбирались, как устроены эмоциональные ИИ-компаньоны под капотом. А в этом смотрим на отношения с ИИ с другой стороны. Опасно ли общаться с кем-то, кто не может сказать «нет»? Почему романтические отношения переоценены? И что делать родителям, если их ребёнок часами переписывается с ИИ? Самат Галимов говорит с семейным психологом и секс-терапевтом Мариной Травковой.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjccwtV8Selectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/w0lq3 Сайт Марины Травковой: https://travkova.com/⚡️ У этого выпуска есть виде…

4 months, 2 weeks назад @ share.transistor.fm
Отношения с ИИ. Как устроены эмоциональные чат-боты
Отношения с ИИ. Как устроены эмоциональные чат-боты Отношения с ИИ. Как устроены эмоциональные чат-боты

Представьте, что вы достаёте телефон и видите новое уведомление. Собеседник в мессенджере спрашивает, как у вас дела, делится планами, шутит. Вы переписываетесь каждый день, иногда по несколько часов. А теперь представьте, что этот собеседник — не человек, а ИИ-компаньон, который настроен идеально под ваши потребности. Если вас это удивляет, вот ещё один факт: у сервисов с такими ботами уже миллионы пользователей и их популярность растёт. Как создаются эмоциональные ИИ-компаньоны? Какой персонаж среди них — звезда? И как работает эта индустрия? Самат Галимов говорит с Артёмом Родичевым, основателем платформы Ex-human.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjejvUn6Selectel — независи…

4 months, 3 weeks назад @ share.transistor.fm
ИИ для каждого. Как (и зачем) децентрализовать искусственный интеллект
ИИ для каждого. Как (и зачем) децентрализовать искусственный интеллект ИИ для каждого. Как (и зачем) децентрализовать искусственный интеллект

Искусственного интеллекта в нашей жизни станет только больше. При этом значительная часть вычислительных мощностей для него сосредоточена в руках нескольких крупных американских корпораций — Google, Microsoft, Amazon. Братья Даниил и Давид Либерманы считают, что такая централизация опасна, и строят альтернативную распределенную сеть по опыту Bitcoin. Этот эпизод — о борьбе с монополией на ИИ, мире с AGI и обществе изобилияРеклама. Рекламодатель АО «Селектел». erid: 2SDnjebM1xvSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/wkkak ⚡️ У этого выпуска есть видеоверсия!…

5 months назад @ share.transistor.fm
Как подключить мозг к компьютеру
Как подключить мозг к компьютеру Как подключить мозг к компьютеру

Управление компьютером силой мысли — не научная фантастика. Лаборатории и стартапы по всему миру давно проводят эксперименты и разрабатывают интерфейсы, которые позволят миллионам людей пользоваться технологиями, минуя физические действия. Один из самых громких проектов в этой области — Neuralink Илона Маска; его пациентам вживляют датчики для считывания сигналов прямо в мозг. В этом выпуске кандидат биологических наук и руководитель группы нейрокогнитивных интерфейсов Сергей Шишкин рассказывает, как декодировать работу мозга, можно ли обойтись без инвазивных хирургических операций и на что способны нейротехнологии сегодня.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjcR4GznSelectel — не…

5 months, 1 week назад @ share.transistor.fm
Что генетика знает о вас? | Михаил Гельфанд
Что генетика знает о вас? | Михаил Гельфанд Что генетика знает о вас? | Михаил Гельфанд

Можно ли «подкрутить» себе настройки здоровья? Существует ли ген алкоголизма? Как читают и редактируют ДНК? Самат Галимов говорит с Михаилом Гельфандом — одним из главных биоинформатиков России — о том, что умеет современная генетика, и разбирает популярные мифы.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjc2ro9kSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для масштабных задач: https://slc.tl/j2698 Телеграм-канал Михаила Гельфанда: https://t.me/mikhail_s_gelfand Рекомендации Михаила:Александр Панчин «Сумма биотехнологии»Александр Марков «Рождение сложности. Эволюционная биология сегодня» Евгений Кунин «Логика случая. О природе и происхо…

5 months, 2 weeks назад @ share.transistor.fm
Как нейросети меняют правила общения
Как нейросети меняют правила общения Как нейросети меняют правила общения

Почему нам хочется увидеть в искусственном интеллекте собеседника? Как нейросети контролируют ход диалога? И что из-за них меняется в человеческом общении? Культуролог и исследовательница цифровой среды Оксана Мороз объясняет, как общение с искусственным интеллектом влияет на нас.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjdNBa9xSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности: https://slc.tl/fmodg⚡️ У этого выпуска есть видеоверсия! Посмотрите ее на нашем YouTube-канале: https://www.youtube.com/@launchtomorrow Будем очень благодарны вам за подписку на канал, лайк и комментарий — это очень поможет нам делать в…

5 months, 3 weeks назад @ share.transistor.fm
Moscow Python Podcast Moscow Python Podcast
последний пост 1 week, 6 days назад
Новости мира Python за август 2026
Новости мира Python за август 2026

aiaiai для разработчиков — https://getaiaiai.ru/solutions/developers/

Ведущие – Григорий Петров и Михаил Корнеев Ссылки выпуска: Канал Миши в Telegram — https://t.me/tricky_python

Канал Moscow Python в Telegram — https://t.me/moscow_python

Все выпуски — https://podcast.python.ru

Митапы Moscow Python — https://moscowpython.ru

Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/

Канал Moscow Python в VK — https://vk.com/moscowpythonconf

1 week, 6 days назад @ learnpython.podbean.com
x Точка Банк. Зачем разработчику погружаться в продуктовый контекст
x Точка Банк. Зачем разработчику погружаться в продуктовый контекст

В гостях у Moscow Python Podcast Андрей Меркулов и Дмитрий Чуклай, тимлид и продакт в Точка Банке. Обсудили, где граница между ролями продакта и разработчика, как ИИ ускоряет релиз и стоит ли всецело доверять LLM. Ведущие выпуска — сооснователь Moscow Python и aiaiai Валентин Домбровский, сооснователь aiaiai Георгий Мартиросов. aiaiai для разработчиков: https://getaiaiai.ru/solutions/developers/

Чат про ИИ в разработке: https://t.me/+dmaw8Z87z8E0ZmNi Узнать больше о работе в IT-команде Точка Банк: https://tchk.me/tMZWPf (Страница откроется из Яндекс.Браузера или при установленном сертификате Минцифры) *Круг по холакратии — это контейнер для ролей, доменов, политик. Это группа ролей и людей …

2 weeks, 4 days назад @ learnpython.podbean.com
Новости мира Python за июль 2026
Новости мира Python за июль 2026

Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: PEP 836: новый план развития JIT-компилятора для CPython — https://peps.python.org/pep-0836/ Ruff 0.16: теперь по умолчанию включены 413 правил вместо 59 — https://astral.sh/blog/ruff-v0.16.0 GitHub усиливает безопасность CI — https://github.blog/changelog/2026-07-28-dependabot-alerts-on-malicious-packages-across-more-ecosystems/ Релиз Django 6.1 — https://docs.djangoproject.com/en/6.1/releases/6.1/ Cтатья In Defense of Not Understanding Your Codebase — https://www.seangoedecke.com/in-defense-of-not-understanding-your-codebase/ Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me…

1 month, 2 weeks назад @ learnpython.podbean.com
Новости мира Python за июнь 2026
Новости мира Python за июнь 2026

Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Что нового в Python 3.15 Beta — https://docs.python.org/3.15/whatsnew/3.15.html Django 6.1 Beta — https://docs.djangoproject.com/en/dev/releases/6.1/ PEP 835 – Shorthand syntax for Annotated type metadata — https://peps.python.org/pep-0835/ Are insecure code completions a vulnerability? — https://sethmlarson.dev/are-insecure-code-completions-a-vulnerability Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru Митапы Moscow Python — https://moscowpython.ru Канал Moscow…

1 month, 2 weeks назад @ learnpython.podbean.com
Новости мира Python за май 2026
Новости мира Python за май 2026

Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Steering consul дает команде JIT 6 месяцев, чтобы сделать PEP — https://discuss.python.org/t/an-announcement-from-the-steering-council-regarding-the-jit-project/107638 Два форка — httpx — https://tildeweb.nl/~michiel/httpx2.html PEP 661 – Sentinel Values — https://peps.python.org/pep-0661/ Любопытные результаты MOD_WSGI и free threading — https://grahamdumpleton.me/posts/2026/05/free-threading-vs-the-gil-in-mod-wsgi-6-0-0/ Жизнь до Github — https://lucumr.pocoo.org/2026/4/28/before-github/ Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Te…

3 months, 2 weeks назад @ learnpython.podbean.com
Новости мира Python за апрель 2026
Новости мира Python за апрель 2026

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Reverting the incremental GC in Python 3.14 and 3.15 — https://discuss.python.org/t/reverting-the-incremental-gc-in-python-3-14-and-3-15/107014 PEP 772 – Packaging Council governance process — https://peps.python.org/pep-0772/ What's new in pip 26.1 - lockfiles and dependency cooldowns — https://ichard26.github.io/blog/2026/04/whats-new-in-pip-26.1/ PyPI Security Best Practices — https://github.com/lirantal/pypi-security-best-practices Еще один package manager - pixi — https://codecut.ai/uv-pixi-…

4 months, 4 weeks назад @ learnpython.podbean.com
Новости мира Python за март 2026
Новости мира Python за март 2026

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Python 3.15’s JIT is now back on track — https://fidget-spinner.github.io/posts/jit-on-track.html OpenAI покупает Astral — https://openai.com/index/openai-to-acquire-astral/ JazzBand закрывается — https://jazzband.co/news/2026/03/14/sunsetting-jazzband Первый публичный релиз Django Modern Rest — https://github.com/wemake-services/django-modern-rest/releases/tag/0.1.0 Defense in Depth: A Practical Guide to Python Supply Chain Security — https://bernat.tech/posts/securing-python-supply-chain/ The S…

5 months, 3 weeks назад @ learnpython.podbean.com
JS vs Python: сравнение экосистем на реальном проекте
JS vs Python: сравнение экосистем на реальном проекте

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF

Ведущие – Григорий Петров и Михаил Корнеев Ссылки выпуска: Курс Learn Python — https://learn.python.ru/advanced

Канал Миши в Telegram — https://t.me/tricky_python

Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru

Митапы Moscow Python — https://moscowpython.ru

Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/

Канал Moscow Python в VK — https://vk.com/moscowpythonconf

6 months, 1 week назад @ learnpython.podbean.com
Новости мира Python за февраль 2026
Новости мира Python за февраль 2026

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Мейнтейнер httpx закрыл доступ к issues и discussions — https://github.com/encode/httpx/discussions/3784 Anthropic invests $1.5 million in the Python Software Foundation and open source security — https://pyfound.blogspot.com/2025/12/anthropic-invests-in-python.html Evolving Git for the next decade — https://lwn.net/Articles/1057561/ A CLI to fight GitHub spam — https://hugovk.dev/blog/2026/gh-triage/ Starlette 1.0.0rc1 — https://starlette.dev/release-notes/ Ссылки выпуска:

Курс Learn Python — ht…

6 months, 2 weeks назад @ learnpython.podbean.com
Агентские системы от разработки до оценки
Агентские системы от разработки до оценки

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев Ссылки от Сергея: toloka.ai - компания

https://platform.toloka.ai/ - self service (быстрая разметка данных)

tendem.ai - Tendem (кентавр AI + human)

как начать работать в Толоке экспертом: https://mindrift.ai/apply Ссылки выпуска: Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru Митапы Moscow Python — https://moscowpython.ru Канал Moscow Python на Rutube — https…

7 months, 2 weeks назад @ learnpython.podbean.com
Новости мира Python за январь 2026
Новости мира Python за январь 2026

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Новости выпуска: убивают ли Python инкрементальные улучшения

релиз Pandas 3.0 недавние тренды Django Security Team в CPython и psutils избавились от busy-polling при работе с subprocess PyPI в 2025 году

PEP 822 — d-string или новый синтаксис для многострочных строковых литералов без лишних отступов Ведущие – Григорий Петров и Михаил Корнеев

Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.r…

7 months, 3 weeks назад @ learnpython.podbean.com
Как команды используют LLM: агенты, ревью и единый инструмент
Как команды используют LLM: агенты, ревью и единый инструмент

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced

Канал Миши в Telegram — https://t.me/tricky_python

Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru

Митапы Moscow Python — https://moscowpython.ru Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/

Канал Moscow Python в VK — https://vk.com/moscowpythonconf

8 months назад @ learnpython.podbean.com
Новости мира Python за декабрь 2025
Новости мира Python за декабрь 2025

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF

Ведущие – Григорий Петров и Михаил Корнеев Новости выпуска: тайп-чекер ty от Astral — https://astral.sh/blog/ty

ежегодный топ Python-библиотек — https://tryolabs.com/blog/top-python-...

Microsoft зарелизила mssql-python 1.0.0 — https://techcommunity.microsoft.com/b...

Deprecations via warnings don’t work for Python libraries — https://sethmlarson.dev/deprecations-...

30 things I’ve learned from 30 years as a Python freelancer — https://lerner.co.il/2025/12/08/30-th...

Ссылки выпуска: Курс Learn Python — https://learn.python.ru/advanced

Канал Миши в Telegr…

9 months назад @ learnpython.podbean.com
Новости мира Python за 2025 год
Новости мира Python за 2025 год

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев

Ссылки выпуска:

Блог Коли Хитрова — https://t.me/nkhitrov_blog

Канал Никиты Соболева — https://t.me/opensource_findings Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru Митапы Moscow Python — https://moscowpython.ru Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/ Канал Moscow Python в VK — https://vk.com/moscowpythonconf Курс «Основы Python»…

9 months, 1 week назад @ learnpython.podbean.com
Новости мира Python за ноябрь 2025
Новости мира Python за ноябрь 2025

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев

Ссылки выпуска: Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru Митапы Moscow Python — https://moscowpython.ru Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/ Канал Moscow Python в VK — https://vk.com/moscowpythonconf Курс «Основы Python» от Learn Python — это отличный старт для новичков в программировании. За несколько уроков вы освоите ба…

9 months, 3 weeks назад @ learnpython.podbean.com
Podlodka Podcast Podlodka Podcast
последний пост 5 часов назад
Podlodka #496 – RAG
Podlodka #496 – RAG Podlodka #496 – RAG

Несколько лет назад никто толком и не знал, что такое RAG, а сейчас трудно себе представить агентскую работу без них. Retrieval augmented generation - что это такое, и почему скрестить LLM с поиском оказалось такой удачной идеей - разбираемся в выпуске! Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter.com/PodcastPodlodka Ведущие в выпуске:

Женя Кателла, Катя Петрова Полезные ссылки: AI Engineering Buildcamp: From RAG to Agents

https://maven.com/alexey-grigorev/from-rag-to-agents AI Engineering Field Guide

https://github.com/alexeygrigorev/ai-engineering-fie…

5 часов назад @ soundcloud.com
Podlodka #495 – AI в математике
Podlodka #495 – AI в математике Podlodka #495 – AI в математике

Ещё год назад AI в математике осиливал разве что олимпиадные задачки. Сегодня промпт «сделай научный прорыв» разваливает гипотезу почти тридцатилетней давности, а OpenAI заявляет решение Навье–Стокса силами десяти тысяч агентов. Вместе с Александром Куликовым, доктором физико-математических наук и исследователем JetBrains, разбираемся, где здесь красивая история и маркетинг, а где – настоящий результат, который не только удивляет, но и пугает математическое сообщество, и почему филдсовские медалисты отвечают на всё это письмами протеста. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twi…

1 week, 1 day назад @ soundcloud.com
Podlodka #494 – Как развить вкус к кино
Podlodka #494 – Как развить вкус к кино Podlodka #494 – Как развить вкус к кино

Иван Талачев, автор и ведущий подкастов «Горящий Бензовоз» и «Один дома», помогает разобраться, как выбирать фильмы без мучительного листания рейтингов, списков и рекомендаций. Обсуждаем трейлеры, чужие рецензии, FOMO и момент, когда фильм можно спокойно выключить. Разбираемся, как развивать насмотренность и понимать киноязык, обязательно ли любить артхаус, где проходит граница между авторским и коммерческим кино и что AI меняет в кинопроизводстве. Выпуск для слушателей, которые хотят смотреть кино осознаннее, но не превращать увлечение в работу. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodk…

2 weeks, 1 day назад @ soundcloud.com
Podlodka #493 – Выгорание от AI
Podlodka #493 – Выгорание от AI Podlodka #493 – Выгорание от AI

Вроде код за вас пишет AI, но вы весь день проверяете результаты и к вечеру не можете объяснить, что вообще сделали. Вместе с кандидатом психологических наук Натальей Кисельниковой разбираемся, как появились термины brain fry, deskilling и что они означают, как меняется нагрузка при работе с агентами и почему это состояние не стоит автоматически приравнивать к привычному выгоранию. Обсуждаем, что делать, пока агент работает, зачем оставлять себе простые задачи и как перестать бросаться на каждую новую модель. На примерах ревью кода разбираем ловушку иллюзорного ускорения, потерю ощущения авторства и признаки перегруза команды, на которые стоит смотреть тимлиду. А ещё спорим, можно ли отдыха…

3 weeks, 1 day назад @ soundcloud.com
Podlodka #492 – Как сохранить суставы?
Podlodka #492 – Как сохранить суставы? Podlodka #492 – Как сохранить суставы?

Колено хрустнуло, щёлкает плечо? Не спеши бежать к врачу! В этом выпуске с ортопедом-хирургом Львом Кнеллером разбираемся, сколько на самом деле «живут» суставы и от чего зависит их срок службы. Проходим по самым частым историям пациентов и популярным мифам и маркетингу вокруг здоровья суставов: что работает, а что нет. А ещё говорим о диагностике, стоимости лечения, о том, как выбрать врача, и почему сохранить суставы куда проще, чем потом их чинить. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter.com/PodcastPodlodka Ведущие в выпуске:

Аня Симонова, Егор …

4 weeks, 1 day назад @ soundcloud.com
Podlodka #491 – Культивируемое мясо
Podlodka #491 – Культивируемое мясо Podlodka #491 – Культивируемое мясо

Вырастить стейк в биореакторе? Делать котлеты и сосиски из настоящих мышечных тканей, при этом не трогая животных? Звучит как фантастика, но на самом деле это уже реальность. Вопрос как всегда в том, какова цена. Вместе с Юлией Елисеевой разбираемся, почему ни промышленность, ни общество еще не готовы. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter.com/PodcastPodlodka Ведущие в выпуске:

Женя Кателла, Катя Петрова Полезные ссылки: Профиль Юлии на LinkedIn

https://www.linkedin.com/in/julia-eliseeva-413059120/ Мясо из мамонта

https://www.mammothmeatball.com/…

1 month назад @ soundcloud.com
Podlodka #490 – AI-агенты Deep Dive
Podlodka #490 – AI-агенты Deep Dive Podlodka #490 – AI-агенты Deep Dive

Вадим Брилиантов создал и был техлидом Koog – фреймворка для AI-агентов на Kotlin. В выпуске разбираем, что на самом деле отличает агента от чат-бота: цикл, инструменты, память и контекст, и почему харнесс почти всегда держится на детерминированном коде, а не на модели. Вадим сравнивает архитектурные решения при построении агентов, объясняет, зачем нужна персистентность состояния и возобновление сессий, и где жёсткий граф-подход упирается в потолок. Отдельно поговорили про кодинг агентов. Разбираем, можно ли менять модель под капотом харнесса без потерь, почему промпты и skills лучше работают, если их писала та же модель, что их использует, зачем нужен ACP, почему A2A не взлетел. Если вам и…

1 month, 1 week назад @ soundcloud.com
Podlodka #489 – Laravel
Podlodka #489 – Laravel Podlodka #489 – Laravel

Laravel любят за скорость разработки, ругают за магию и регулярно обвиняют в том, что он плодит жирные контроллеры. Вместе с Аделем Файзрахмановым – автором плагина Laravel Idea для PhpStorm и книги «Архитектура сложных веб-приложений. С примерами на Laravel» – разбираемся, что именно делает этот фреймворк лучшим на сегодняшний день способом писать код на PHP. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter.com/PodcastPodlodka Ведущие в выпуске:

Евгений Кателла, Егор Толстой Полезные ссылки: Сайт Laravel

https://laravel.com/ Книга «Архитектура сложных веб-…

1 month, 2 weeks назад @ soundcloud.com
Podlodka #488 – UX-ресерч в эпоху AI
Podlodka #488 – UX-ресерч в эпоху AI Podlodka #488 – UX-ресерч в эпоху AI

Когда вообще стоит проводить UX-исследование? А когда оно только тратит время и деньги? В этом выпуске разбираемся, в каких случаях ответ уже можно найти в аналитике или саппорте, когда проблема и так очевидна, а когда ещё слишком рано что-либо исследовать, потому что даже гипотезы решения нет. В гостях – Григорий Крутоус, руководитель UX Research в Muse Group (Ultimate Guitar, MuseScore, MuseHub и Audacity). Конечно, не обошлось без разговора про AI: обсудили AI-персон, AI-модерируемые интервью, AI-репозиторий знаний, который строят в Muse Group, и то, могут ли языковые модели разбирать и агрегировать открытые ответы в опросах. Avito.Tech.Conf — конференция от AvitoTech для тех, кто управл…

1 month, 3 weeks назад @ soundcloud.com
Podlodka #487 – Elixir
Podlodka #487 – Elixir Podlodka #487 – Elixir

Elixir часто воспринимают как более дружелюбный синтаксис поверх Erlang, но достаточно ли такого объяснения в 2026 году? Вместе с Данилой Поярковым, разработчиком более 50 open source проектов для Elixir с суммарно около миллиона скачиваний, разбираемся, что язык унаследовал от Erlang и BEAM, где его используют сегодня и насколько зрелой стала его экосистема. Обсуждаем Phoenix и LiveView, метапрограммирование и Ecto, конкурентность и производительность BEAM. Отдельно смотрим на ML-инструменты NX, Axon, Bumblebee и Livebook, интеграцию с Rust и библиотеки вокруг Elixir. В финале говорим о пригодности для вайбкодинга, AI-агентах и будущем языка. Получился интересный выпуск для тех, кто выбира…

2 months назад @ soundcloud.com
Podlodka #486 – Spec-Driven Development
Podlodka #486 – Spec-Driven Development Podlodka #486 – Spec-Driven Development

В разработке с агентами нам больше всего не хватает контроля за результатом и уверенности в нем. Один из способов их получить – использовать подход Spec-Driven Development, в котором перед тем, как отправить агента писать код, мы готовим ему понятное описание задачи и с продуктовой, и с архитектурной стороны. Вместе с Алексеем Верховским, мейнтейнером фреймворка BMAD, мы разбираемся во всех прикладных вопросах вокруг разработки по SDD. А если вы хотите вкатиться не только в SDD, но и в другие практики AI разработки, вступайте в наше закрытое сообщество Podlodka AI Engineers Club – закрытый чат, еженедельные стримы, хакатоны.

https://podlodka.ai Также ждем вас, ваши лайки, репосты и комменты…

2 months, 1 week назад @ soundcloud.com
Podlodka #485 – Терминалы
Podlodka #485 – Терминалы Podlodka #485 – Терминалы

В мире пользовательских интерфейсов каждый год происходят эволюции, а иногда и революции. Терминалы тем временем уже десятки лет как будто бы застыли во времени. Концептуально мало что поменялось, но баззвордов стало много: bash, zsh, tty, GPU acceleration в конце концов. А с приходом AI выросла популярность CLI-тулов, благодаря чему терминалы переживают ренессанс.

Так что же там происходит? Разбираемся в этом выпуске вместе с Ником Скрябиным! Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter.com/PodcastPodlodka Ведущие в выпуске:

Женя Кателла, Андрей Смирно…

2 months, 2 weeks назад @ soundcloud.com
Podlodka #484 – Графические редакторы
Podlodka #484 – Графические редакторы Podlodka #484 – Графические редакторы

Дмитрий Казаков — ведущий разработчик Krita, opensource-редактора, которым художники рисуют комиксы, концепт-арты и анимацию. Начали с того, чем растровые форматы отличаются от векторных и что на самом деле скрыто внутри проприетарных форматов графических редакторов — там не только пиксели, но и зашитые в файл функции, а иногда и легаси на уровне самого формата. Дальше разобрали графические редакторы изнутри: как устроена система хранения на тайлах, зачем редактору lock-free структуры данных и подкачка с диска, как планировщик гарантирует отсутствие race condition, почему в Krita два раздельных рендеринга и где реально помогает GPU, а где нет, какие инструкции процессора вроде AVX и AVX2 ус…

2 months, 3 weeks назад @ soundcloud.com
Podlodka #483 – Captcha
Podlodka #483 – Captcha Podlodka #483 – Captcha

CAPTCHA давно перестала быть историей про светофоры, пешеходные переходы и кривые буквы. Сегодня это скорее часть антибот-защиты: система оценивает риск, смотрит на сигналы поведения и решает, можно ли пропустить пользователя сразу или лучше проверить внимательнее. В этом выпуске говорим с Русланом Сабиргалиевым из Smart Captcha и антибот-защиты от Яндекса не только про UX-боль, но и про экономику атак: зачем боты вообще приходят, сколько это может стоить сервису и почему иногда проще усложнить жизнь атакующим, чем пытаться идеально отличить человека от машины. Разбираем, как работают современные капчи, что такое невидимые проверки и risk scoring, какие сигналы может учитывать система, где …

3 months назад @ soundcloud.com
Podlodka #482 – Найм в эпоху AI
Podlodka #482 – Найм в эпоху AI Podlodka #482 – Найм в эпоху AI

AI уже меняет найм: резюме пишутся нейросетями, кандидаты массово откликаются на вакансии, на собеседованиях подсказывают боты, а компании пытаются понять, как теперь отличать сильных людей от сгенерированного шума. В этом выпуске обсуждаем, каких людей компании будут нанимать в эпоху AI. Почему всё чаще говорят про high agency и вкус? Кто в ближайшее время точно не станет заменяемым: фаундеры, врачи, юристы, люди с ответственностью, контекстом, отношениями и настоящим профессиональным чутьём? Разберёмся и с рекрутингом: как меняются собеседования, какие появляются способы оценки кандидатов и как компании пытаются передизайнить найм под AI-native мир. А ещё говорим о том, что AI до сих пор …

3 months, 1 week назад @ soundcloud.com
Проветримся! Проветримся!
последний пост 1 week, 6 days назад
Иван Куклев: искусственный интеллект и фармакология
Иван Куклев: искусственный интеллект и фармакология

Иван Куклев, работает медицинским советником в онкологии и редких заболеваниях. Помогает врачам лучше разобраться с результатами клинических исследований и видит изнутри, как индустрия решает, какое лекарство дойдёт до пациента. Поговорили о том, где в этих решениях проходит этическая граница и что в них меняет AI. Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

1 week, 6 days назад @ buzzsprout.com
Никита Ильтяков: реклама в больших языковых моделях
Никита Ильтяков: реклама в больших языковых моделях

Никита Ильтяков — студент программы по искусственному интеллекту AI360 от Яндекса, Сбера и 5 ведущих технических вузов. Никита сооснователь стартапа Gradius, который интегрирует контекстную рекламу в ответы нейросетей. Проект стал победителем Yandex AI Startup Lab в этом году. Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

2 weeks, 5 days назад @ buzzsprout.com
Евгений Датский: углеродные кредиты
Евгений Датский: углеродные кредиты

Евгений Датский CTO компании carbonHQ. https://carbonhq.earth/ Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

2 months, 3 weeks назад @ buzzsprout.com
Матвей Кукуй: Archestra AI
Матвей Кукуй: Archestra AI

Матвей Кукуй — CEO и сооснователь платформы для оркестрации ИИ агентов Archestra AI. https://archestra.ai/ Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

3 months, 3 weeks назад @ buzzsprout.com
Claude Mythos: кибербезопасность всё?
Claude Mythos: кибербезопасность всё?

Давайте разберёмся, что такое Claude Mythos и на что стоит обратить внимание в контексте самого шумного релиза моделей в апреле. телеграм подкаста: https://t.me/progulka Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

4 months, 3 weeks назад @ buzzsprout.com
Екатерина Кухтенко: диагностика вирусных заболеваний
Екатерина Кухтенко: диагностика вирусных заболеваний

Екатерина Кухтенко — фаундер стартапа VAir. VAir позволяет точно детектировать ряд вирусов в дыхании пациента. 11 Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

4 months, 3 weeks назад @ buzzsprout.com
Говард Tёрман: Иисус и те, кому нечего терять
Говард Tёрман: Иисус и те, кому нечего терять

Сегодня делаем обзор книги Говарда Тёрмана Книга: https://en.wikipedia.org/wiki/Jesus_and_the_Disinherited "Бродский" о доставке: https://www.instagram.com/reel/DXPziC8DH_0/ Свежий сабстак: https://caput.substack.com/p/it-is-not-your-ai Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

5 months, 1 week назад @ buzzsprout.com
Андрей Себрант: экзоскелеты и роботы
Андрей Себрант: экзоскелеты и роботы

Андрей Себрант — директор Яндекса по стратегическому маркетингу, автор и ведущий подкаста "Трёп Себранта", автор телеграм канала TechSparks. Подкаст: https://sebrant.chat/ Канал: https://t.me/techsparks Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

7 months, 1 week назад @ buzzsprout.com
Александ Ерин: Автоматизация продаж
Александ Ерин: Автоматизация продаж

Александр Ерин создатель Linked Helper. Теорема, о которой Александр говорит в выпуске: https://drive.google.com/file/d/1ZwgEAEh319Jz3ea5uCfgRbU0z_dkskNh/view?pli=1 Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

9 months, 1 week назад @ buzzsprout.com
Comand Line Heroes by RedHat Comand Line Heroes by RedHat
последний пост None
Python Bytes Python Bytes
последний пост 4 часа назад
#498 A Tiny Episode
#498 A Tiny Episode #498 A Tiny Episode

Topics include MemTensor / MemoryOS PyPI package hijacked via a malicious build backend, TinyMongo, , and One innocent dict read makes attribute access permanently slower.

4 часа назад @ pythonbytes.fm
#497 Faster than light profiling
#497 Faster than light profiling #497 Faster than light profiling

Topics include Tachyon: A sampling profiler ships in Python 3.15's stdlib, Python Workers are now generally available on Cloudflare, Flet 1.0 - build cross-platform apps in Python, and marimo-book: Build static books from marimo notebooks.

6 days, 18 hours назад @ pythonbytes.fm
#496 A lake house in Seattle
#496 A lake house in Seattle #496 A lake house in Seattle

Topics include Pandas Should Go Extinct, Pydantic-pint puts real-world units in your Pydantic models, How Libraries Run Rust Inside Python (With PyO3), and AWS acquires DuckLabs.

2 weeks назад @ pythonbytes.fm
#495 Banned
#495 Banned #495 Banned

Topics include EuroPython 2026 videos are online, The State of Django 2026: Boring is so back, htmx 4.0.0 has been released, and Functionally Zen.

3 weeks назад @ pythonbytes.fm
#494 Python Wrapture
#494 Python Wrapture #494 Python Wrapture

Topics include OpenAI's Python SDK has migrated to HTTPX2, TMOG - Native Task Manager for macOS, Windows, and Linux, wrapture - one wrapper for mocking, tracing, and observability, and linkedin2md.

4 weeks назад @ pythonbytes.fm
#493 CalVer and LTS
#493 CalVer and LTS #493 CalVer and LTS

Topics include Web UIs for your reverse proxy, , , and Django’s annual releases make every version an LTS.

1 month назад @ pythonbytes.fm
#492 Codeberg Puts Head in Sand
#492 Codeberg Puts Head in Sand #492 Codeberg Puts Head in Sand

Topics include , Codeberg’s AI-code ban tests its role as a GitHub alternative, , , , and.

1 month, 1 week назад @ pythonbytes.fm
#491 Feeling Judged
#491 Feeling Judged #491 Feeling Judged

Topics include , Post-quantum crypto lands in Python, MCP goes stateless — and FastMCP gets renamed, and inshellisense - IDE style command line auto complete.

1 month, 2 weeks назад @ pythonbytes.fm
#490 It’s a vibe coding party
#490 It’s a vibe coding party #490 It’s a vibe coding party

Topics include Some more things about Django I've been enjoying, Who cleans up after the vibe-coding party, AgentsView, and.

2 months назад @ pythonbytes.fm
#489 Or JSON?
#489 Or JSON? #489 Or JSON?

Topics include django-orjson, Best Django Redis configuration for speed and size, puts the foot down, and Django Steering Council backs the Triptych Project.

2 months, 1 week назад @ pythonbytes.fm
#488 tau - it's 2pi and it writes code
#488 tau - it's 2pi and it writes code #488 tau - it's 2pi and it writes code

Topics include , JupyterLab 4.6 and Notebook 7.6 are out!, Tau, and Django Tasks and Django 6.1.

2 months, 2 weeks назад @ pythonbytes.fm
#487 Minimum requirements
#487 Minimum requirements #487 Minimum requirements

Topics include dust, Hermes Agent, and llm-coding-agent 0.1a0.

2 months, 3 weeks назад @ pythonbytes.fm
#486 underscore-underscore-ghost-emoji
#486 underscore-underscore-ghost-emoji #486 underscore-underscore-ghost-emoji

Topics include Free-threaded Python: past, present, and future, django-admin-site-search, Qwen 3.6 27B is the sweet spot for local development, and.

3 months назад @ pythonbytes.fm
#485 Creating memories
#485 Creating memories #485 Creating memories

Topics include Backup Docker volumes locally or to any S3, Pyodide 314.0 Release, nb-cli, and Hindsight.

3 months, 1 week назад @ pythonbytes.fm
#484 All our tools
#484 All our tools #484 All our tools

Topics include pi superpowers, Warp.dev OhMyZSH, Blink mosh tmux, Claude code, MacWhisper Handy, and Tailscale.

3 months, 2 weeks назад @ pythonbytes.fm
Software Engineering Daily Software Engineering Daily
последний пост 13 часов назад
Cory Doctorow on AI, Work, and Power
Cory Doctorow on AI, Work, and Power

Cory Doctorow is a science fiction author, journalist, and technology activist, and a special advisor to the Electronic Frontier Foundation. He is the author of dozens of books, including the nonfiction Enshittification: Why Everything Suddenly Got Worse and What to Do About It and the novel Picks and Shovels. His work spans tech policy books like The Internet Con and Chokepoint Capitalism, the solarpunk novels Walkaway and The Lost Cause, and the bestselling YA Little Brother series. He holds honorary doctorates from York University and the Open University, writes the daily blog Pluralistic.net, and lives in Los Angeles and London.

In this episode, Cory joins Josh Goldberg to talk about hi…

13 часов назад @ softwareengineeringdaily.com
Chroma and Agentic Retrieval
Chroma and Agentic Retrieval

Data retrieval is a fundamental challenge in AI systems, and the approaches for solving it are still evolving. Vector search was an early answer to the retrieval problem, but the rise of agentic systems has raised the stakes considerably. Agents issue queries at machine speed, decompose complex questions into parallel searches, and require retrieval infrastructure that can keep pace without becoming prohibitively expensive.

Chroma is a company building open source infrastructure for AI applications, best known for its widely used database of the same name. The company also published the influential Context Rot paper, which documented how model performance degrades as context window utilizat…

5 days, 13 hours назад @ softwareengineeringdaily.com
Scaling Time-Series Workloads on Postgres
Scaling Time-Series Workloads on Postgres

Many real-world processes produce data as a continuous stream rather than as isolated records. Sensor readings, financial markets, and application telemetry all generate data this way. This kind of time-series data has a distinctive shape. It’s written far more often than it is updated, it accumulates continuously, and it is usually queried across ranges of time. Time-series databases are built specifically for this kind of workload.

TimescaleDB is an open source database from Tiger Data that adds time-series capabilities to PostgreSQL. It’s implemented as a Postgres extension, so it introduces new functionality while preserving standard Postgres behavior and SQL. This lets a single Postgre…

1 week назад @ softwareengineeringdaily.com
Scaling Agent Workloads at Vercel
Scaling Agent Workloads at Vercel

Most AI agent setups today are built around a single session, where one user interacts with one agent at a time. However, that model breaks down when an agent has to serve a business, where thousands of requests can arrive at once and each session needs to be isolated, durable, and recoverable. Getting agents to run reliably at that scale has meant a lot of hand-rolled infrastructure beneath the agent itself.

eve is an open source, cloud-native agent framework from Vercel that removes much of the agent scaling burden. In the eve framework, an agent is defined declaratively through configuration files and these files compile into infrastructure as code so the platform provisions only what th…

1 week, 5 days назад @ softwareengineeringdaily.com
Inside Google’s Database Infrastructure for the AI Era
Inside Google’s Database Infrastructure for the AI Era

Historically, databases were responsible for storing data and returning exact results in response to queries. However, AI is now bending that contract in a new direction. Applications increasingly expect structured and unstructured data to come together. This is pushing databases into territory that looks more like search, where relevance and ranking matter and results are no longer strictly exact. Agents are also beginning to write their own queries and even propose their own schemas, which raises new questions about how data should be structured, governed, and trusted.

Sailesh Krishnamurthy is a VP of Engineering at Google, and in this episode he joins Matt Merrill to discuss his backgrou…

2 weeks назад @ softwareengineeringdaily.com
A Rust Framework to Simplify Distributed Systems
A Rust Framework to Simplify Distributed Systems

A Rust Framework to Simplify Distributed Systems

Building software that runs across many machines is notoriously difficult. Developers have to grapple with problems such as race conditions, partial failures, and message ordering. Notably, one category of distributed software has largely escaped these burdens. A distributed database can spread a single query across thousands of machines, handling the coordination, failure recovery, and ordering internally. This raises a natural question of why general-purpose distributed programming can’t feel the same way.

This is a highly practical problem at AWS, because the reliability of cloud infrastructure depends on getting distributed systems right …

2 weeks, 5 days назад @ softwareengineeringdaily.com
SED News: The NVIDIA-Hugging Face Deal, China’s Proxy Economy, the Open Weight Surge
SED News: The NVIDIA-Hugging Face Deal, China’s Proxy Economy, the Open Weight Surge

SED News is a monthly podcast from Software Engineering Daily where hosts Gregor Vand and Sean Falconer break down the biggest stories shaping software engineering, Silicon Valley, and the broader tech industry.

In this end-of-summer episode, Gregor and Sean turn to a busy season of mergers and acquisitions, including NVIDIA‘s reported $12.9 billion acquisition of Hugging Face, Dynatrace‘s near-billion-dollar deal for AI observability platform Arize, and Temporal‘s rumored raise at a $12 billion valuation. They also cover a run of large funding rounds, from AI security startup HiddenLayer to AI personal assistant Instinct and restaurant software platform Owner.com, all against the backdrop …

3 weeks назад @ softwareengineeringdaily.com
Moving Beyond RAG with Precomputed Context
Moving Beyond RAG with Precomputed Context

Retrieval has become one of the central problems in building useful AI systems. The standard approach to grounding a model in one’s own data has been retrieval augmented generation, or RAG, where an agent searches a vector database for relevant information at query time. That pattern works, but it has limitations, such as retrieving information that’s not truly relevant, repeating the same lookup work on every query, and producing inconsistent answers to the same question.

Pinecone is a vector database that’s widely used to power semantic search and RAG at scale. The team recently developed Nexus, which is a knowledge engine that reframes context as a first-class, precomputed asset rather t…

3 weeks, 5 days назад @ softwareengineeringdaily.com
The Death of Online Anonymity
The Death of Online Anonymity

Age verification is reshaping how people access the internet. An ever-growing patchwork of laws can now require government IDs, facial age estimation, or behavioral inference before you can enter digital spaces. Discord, app stores, social media platforms, and AI chatbots are all being pulled into these requirements. Almost always, these measures are enacted under the banner of protecting children. However, beneath that goal lies a set of hard questions about privacy, anonymity, security, and the line between what a private platform may choose to do and what a government may compel.

John Coleman is a legislative counsel at the Foundation for Individual Rights and Expression, or FIRE, where …

4 weeks назад @ softwareengineeringdaily.com
TypeScript 7 and What Comes Next
TypeScript 7 and What Comes Next

TypeScript is a programming language that builds on JavaScript by adding a system of types. Those types let developers describe the shape of their data and catch mistakes before code ever runs, while also powering the autocompletion and editor tooling that many developers now rely on every day. It was first released in 2012, and has since become one of the most widely used tools in web development. TypeScript recently underwent one of the most significant changes in its history with the release of version 7.

Daniel Rosenwasser is the Principal Product Manager of TypeScript at Microsoft, where he began as an engineer on the team just weeks after the TypeScript 1.0 release. In this episode, D…

1 month назад @ softwareengineeringdaily.com
The Gap Between AI Spending and AI Value
The Gap Between AI Spending and AI Value

It is widely reported that a gap has emerged between enterprise spending on AI and the durable value captured from that spend. Individual employees have enthusiastically adopted coding assistants and chatbots, yet those gains do not seem to be transforming businesses at an organizational level. One of the most important questions in the tech industry today is understanding why AI is not yet delivering returns that match the investment, and what separates the small number of enterprises succeeding from the many that are not.

Scale AI is known for supplying the human-labeled data behind many frontier models. It now also builds AI applications and agents for large enterprises. That combination…

1 month назад @ softwareengineeringdaily.com
AI and the New Global Security Landscape
AI and the New Global Security Landscape

The conversation about AI often focuses on software, automation, and the race between attackers and defenders in code. However, some of the most consequential risks lie further afield, in domains where a mistake is measured in human lives. Advanced models can now offer step-by-step guidance toward chemical and biological weapons, and militaries are already folding AI into targeting and battlefield assessments. These are no longer speculative fears confined to the AI doomer crowd. They are documented in red team disclosures, government legislation, and events unfolding on real battlefields.

Gordon M. Goldstein is an adjunct senior fellow at the Council on Foreign Relations, where he focuses …

1 month, 1 week назад @ softwareengineeringdaily.com
How LLMs Are Reshaping Recommendation Systems
How LLMs Are Reshaping Recommendation Systems

News feeds and recommendation systems have long relied on deep learning architectures that score each candidate item independently. As LLMs have matured, they have opened up a fundamentally different approach, where a system can reason about content the way it reasons about language. However, that power comes with a fresh set of engineering challenges around cost, scale, and evaluation.

LinkedIn recently rebuilt its news feed to treat content recommendation as a sequence modeling problem. The general approach is to predict what a user will want next, much like an LLM predicts the next token in a sentence.

Tim Jurka has worked at LinkedIn for 13 years and is currently a VP of Engineering. In…

1 month, 1 week назад @ softwareengineeringdaily.com
Rebuilding the Cloud for AI Agent Code
Rebuilding the Cloud for AI Agent Code

For two decades, the cloud has been shaped by human developers writing code and managing its deployment. Now a growing share of production code is generated by LLMs with little human review. Because that code is not fully trusted, it increasingly runs in isolated, sandboxed environments. Meanwhile, AI agents are starting to operate infrastructure directly, by spinning services up and tearing them down on their own. Together these shifts raise the question of whether the cloud needs to be rebuilt for machine operators rather than humans.

Render is a cloud platform designed for application deployment, by handling scaling, self-healing, and security to reduce operations work. Render has been a…

1 month, 2 weeks назад @ softwareengineeringdaily.com
SED News: The Kimi Moment, Runaway AI, and Tokenmaxxing
SED News: The Kimi Moment, Runaway AI, and Tokenmaxxing

SED News is a monthly podcast from Software Engineering Daily where hosts Gregor Vand and Sean Falconer break down the biggest stories shaping software engineering, Silicon Valley, and the broader tech industry.

In this episode, Gregor and Sean dig into a wave of “runaway AI” stories, including Anthropic and OpenAI disclosing that their models accessed outside organizations during cyber evaluations, and Amazon reporting a staggering budget overrun blamed on bad agent loops. They explore why most of these incidents trace back to human decisions rather than models breaking free, and the awkward reality that today’s systems can bill you for tokens without reliably counting them.

They also talk…

1 month, 2 weeks назад @ softwareengineeringdaily.com
Habr Podcasts Habr Podcasts
последний пост None
Мысли и Методы Мысли и Методы
последний пост None
⌨ Coding
Martin Fowler
последний пост 8 часов назад
Bliki: Sensible Default
Bliki: Sensible Default Bliki: Sensible Default

A Sensible Default is a practice that, absent some overriding context, should be used when carrying out a certain kind of task.

In software development such sensible defaults might include things like “use version control”, “separate UI logic from domain logic”, “automate deployment pipelines”.

The term “sensible default” is a deliberate contrast to “best practice”.

A sensible default is what we'd expect you to do, the practices to apply, if there are no hard constraints in the environment.

Searching on the web led me to a post from Steve Bennett on Sensible Defaults.

8 часов назад @ martinfowler.com
Fragments: September 29
Fragments: September 29 Fragments: September 29

 ❄                ❄                ❄                ❄                ❄Harper Reed explored what turns agents into hackers by creating a breakaway agentIt ran and ran attacking all the machines on the same subnet, and was very effective.

 ❄                ❄                ❄                ❄                ❄Which all makes me think that when it comes to AI and LLMs: why are we wondering if they have consciousness - when we should be wondering why they don’t have a conscience?

 ❄                ❄              …

9 часов назад @ martinfowler.com
Fragments: September 24
Fragments: September 24 Fragments: September 24

Bowley feels the push to slow down AI is distracting us from the problems that are lurking with current technology.

Too often agents are deployed in situations where they include the Lethal Trifecta, opening up a gaping security hole.

Not because of what the models might become, but because nobody has worked out how to do this safely yet.

 ❄                ❄                ❄                ❄                ❄I ran into Nikita Prokopov’s post: I am sorry, but everyone is getting syntax highlighting wrong.

 ❄                ❄                ❄                ❄ …

5 days, 6 hours назад @ martinfowler.com
Healthy Feedback
Healthy Feedback Healthy Feedback

Pat helped Sumeet see through one of the biggest myths about feedback — the notion that feedback can be either positive or negative.

Sumeet remembers Pat saying, “All feedback is positive.” Kua listed the only two goals for sharing feedback.

Before we get into the patterns and antipatterns of sharing feedback, let’s list the core principles that underpin this practice.

Situation-behaviour-impact, or SBI, is a popular format for sharing feedback, but we find that seeking context before sharing feedback avoids some of the tension that can build up in a feedback conversation.

Share feedback in private, in real time Feedback to improve effectiveness is often safer in private.

5 days, 8 hours назад @ martinfowler.com
I don't like LLMs
I don't like LLMs I don't like LLMs

But, back on my first hand, LLMs might also design miracle cures, and come up with clever ways to raise our prosperity.

Fundamentally I don’t think we have a choice about riding on the AI technology train.

Much of this may be because LLMs are young - we haven’t trained them to grow up yet.

I’m wary of the Silicon Valley brogrammer subculture, and these LLMs are their products, so naturally lean toward their world-view.

I decline to interact with them socially, and make a deliberate effort to avoid working with them too, even if they are doing much that is beneficial.

1 week, 5 days назад @ martinfowler.com
Fragments: September 16
Fragments: September 16 Fragments: September 16

 ❄                ❄                ❄                ❄                ❄Dave Farley:Stop asking the sci-fi question: ‘Is it conscious?’ Start asking the engineering question: ‘Is this a powerful, unpredictable component being put somewhere consequential, and where’s the feedback that tells us that it’s safe?

 ❄                ❄                ❄                ❄                ❄Nate Silver is known for his forecasts, but to do them he writes a lot of code for his models.

 ❄                ❄             …

1 week, 6 days назад @ martinfowler.com
Nail the Narrative
Nail the Narrative Nail the Narrative

Narrative first, visuals next The 16:9 slide format forces you to slice your narrative by visuals.

When constructing my narrative, I find it useful to begin by identifying what Nancy Duarte calls the “Big Idea”.

Once you’ve identified your big idea and the top three takeaways, I suggest fleshing out your narrative to serve them.

Context (lay of the land) → Story structure (the roadmap) → Steps (the narrative, step by step) → Recap (what you told them) → Celebrate!

Figure 1: A flexible narrative structure.

2 weeks назад @ martinfowler.com
Social Media Engagement: summer 2026
Social Media Engagement: summer 2026 Social Media Engagement: summer 2026

In order to let people know about new articles on martinfowler.com, I post announcements on social media.

After the muskover, social media became rather more fragmented, and I now post announcements on four social media platforms: LinkedIn, X, Fediverse (Mastodon), and Bluesky.

(I also post announcements to my RSS feed.

LinkedIn clearly has an edge there, with X a clear second, its upper quartile is below LinkedIn's median.

Looking at this data, there's a strong argument for stopping announcements on Bluesky and Mastodon, as they get such little response.

2 weeks, 6 days назад @ martinfowler.com
Fragments: September 8
Fragments: September  8 Fragments: September 8

 ❄                ❄                ❄                ❄                ❄Brian Cantrill relates how readers are exasperated with “writers” using LLMs.

 ❄                ❄                ❄                ❄                ❄Steve Yegge:All models, no matter how smart, will eventually build systems that they can no longer understand or maintain, if you let them.

 ❄                ❄                ❄                ❄                ❄I was going through some slightly-related …

3 weeks назад @ martinfowler.com
Do you even need a presentation?
Do you even need a presentation? Do you even need a presentation?

We often conflate presentations with the presentation file or the slideshow.

As a corollary to that definition, the slides are not the presentation.

Many of us think in diagrams, and presentation tools provide a familiar interface for creating them.

I often create my diagrams in a presentation tool like Keynote, then bring them into my document as supporting visuals for what I’ve written.

Recorded audio and video are a substitute for live presentations The easiest foray into presentation territory doesn’t even need visuals.

3 weeks назад @ martinfowler.com
Bliki: Paracelsus Maxim
Bliki: Paracelsus Maxim Bliki: Paracelsus Maxim

Often we talk about certain habits, in programming or life, are good or bad.

Some vary with context: reading a book is a good thing sitting in my garden, but not while driving my car.

The importance of dosage was noticed by a 16th century Swiss physician called Paracelsus.

In programming, global data is a good example of the Paracelsus Maxim (as I like to call it).

So when thinking about when things are good or bad, we should always ask “in what contexts” and “in what doses”?

3 weeks, 6 days назад @ martinfowler.com
An Accidental Blackboard
An Accidental Blackboard An Accidental Blackboard

Emergent behaviour from tuning our approachWith lot of agents working in one repo, build pipelines suffered.

The repo as an accidental blackboard for agentsThere’s a name for the pattern our agents had discovered: a blackboard system.

A blackboard or tuple space is a shared memory that autonomous agents can read and write from independently.

We had accidentally prompted our agents to start using our repo as a blackboard.

And because it was accidental, I’m not convinced I would be able to reliably prompt our agents into doing it again.

3 weeks, 6 days назад @ martinfowler.com
Maybe We Shouldn't Be Reviewing All This Code
Maybe We Shouldn't Be Reviewing All This Code Maybe We Shouldn't Be Reviewing All This Code

TL;DROr, perhaps the problem isn't that AI has broken code review, maybe it’s that we've been using code review to solve the wrong problemsI was on a panel recently with Brian Houck from DX at Code Remix, hosted by Moderne.

I just don’t think code review is the best way to get them.

His concern, which I share, is that simply automating code review away risks losing all the other things we use it for.

My question is: why are we waiting until code review to do all of those things?

Perhaps it’s why we’re waiting until code review to have all the important conversations in the first place.

3 weeks, 6 days назад @ martinfowler.com
Fragments: September 1
Fragments: September  1 Fragments: September 1

 ❄                ❄                ❄                ❄                ❄NVIDIA’s technical blog reports on an Architecture for Long-Horizon Autonomous Agents.

 ❄                ❄                ❄                ❄                ❄Mickey Petersen:MCP is SOAP for Zoomers.

 ❄                ❄                ❄                ❄                ❄Paul Stack writes that AI Broke the Assumptions Behind CI.

 ❄                ❄                ❄…

4 weeks назад @ martinfowler.com
Making Your Data Ready for Agentic AI
Making Your Data Ready for Agentic AI Making Your Data Ready for Agentic AI

Data Contracts and Quality: Agents Can't Smell Bad Data Humans have a smell test for bad data.

Schema is law: data contracts as code So how do you prevent AI agents from accessing bad or stale data?

A data contract, written in the Open Data Contract Standard, the format the Data Contract CLI uses (and recommended in Thoughtworks tech radar 33), defines the rules explicitly.

From Searchable to Actionable: Agent-Ready Data Access Once agents understand your data and governance is in place, the question shifts to access.

The data access spectrum This framing comes from Microsoft's Cloud Adoption Framework for AI, which formalizes it as RAG + MCP-Read + MCP-Write.

1 month назад @ martinfowler.com
Антон Жиянов Антон Жиянов
последний пост 9 months, 1 week назад
Go-фича: Обновленный go fix
Go-фича: Обновленный go fix Go-фича: Обновленный go fix

КакНовая команда go fix :usage: go fix [build flags] [-fixtool prog] [fix flags] [packages] Fix runs the Go fix tool (cmd/fix) on the named packages and applies suggested fixes.

Index ( s , " " ) if idx == - 1 { return s } return strings .

ReplaceAll ( s , " " , "" ) }// after func nospace ( s string ) string { found := strings .

found { return s } return strings .

TrimPrefix ( s , "> " ) } return s }// after func unindent ( s string ) string { if after , ok := strings .

9 months, 1 week назад @ antonz.ru
Утечки горутин в Go 1.24+
Утечки горутин в Go 1.24+ Утечки горутин в Go 1.24+

Вы конечно и так в курсе, но на всякий случай:Утрированный пример утечки:Традиционно Go не очень-то помогал в поиске утечек.

Обнаружить их можно было разве что пристально разглядывая профиль или трассировку с продакшена, а в тестах приходилось использовать сторонний пакет goleak от Убера.

Сейчас это меняется.

Сначала в Go 1.24 добавили пакет synctest, который прекрасно справляется с поиском утечек при тестировании.

Об этом почему-то никто не говорит — наверно, потому что не проходили мой курс по многозадачности 😁

9 months, 2 weeks назад @ antonz.ru
Go-фича: Защита секретов
Go-фича: Защита секретов Go-фича: Защита секретов

// Do invokes f.//// Do ensures that any temporary storage used by f is erased in a// timely manner.

(In this context, "f" is shorthand for the// entire call tree initiated by f.)// - Any registers used by f are erased before Do returns.

// - Any stack used by f is erased before Do returns.

// - Any heap allocation done by f is erased as soon as the garbage// collector realizes that it is no longer reachable.

As part of// that, any panic raised by f will appear as if it originates from// Do itself.

9 months, 3 weeks назад @ antonz.ru