Data Engineering
про инжиниринг данных и аналитику
🏢 %company% Engineering
AirBnb Engineering
последний пост 7 часов назад
De-identifying text at scale: How Airbnb protects personal data in AI training
De-identifying text at scale: How Airbnb protects personal data in AI training De-identifying text at scale: How Airbnb protects personal data in AI training

Here’s how Airbnb detects and replaces personal data in messages, reviews, and support chats before it reaches a model.By: Emelin Flores, Alex Klimov, Lee Formyduval, Bahador NooraeiIntroductionAirbnb is built on trust. Every night that a guest books a stay, or a host welcomes someone into their home, that trust is backed by information they’ve shared with us, which includes personally identifiable information (PII) such as names, home location, current location, and payment details.We now use transaction information to train machine learning models. Before we do so, we remove PII to minimize the number of copies of this information and prevent leakage into and through our models.As we’ve w…

7 часов назад @ medium.com
Skipper, Airbnb’s embedded workflow engine, is now open source
Skipper, Airbnb’s embedded workflow engine, is now open source Skipper, Airbnb’s embedded workflow engine, is now open source

Durable workflows, running inside your service with no separate orchestration cluster.By: Ricardo Gamba, Andriy SergiyenkoSkipper, an embedded workflow engine used in production by teams all across Airbnb, is now available to the open source community. Skipper lets you express multi-step business processes as Java or Kotlin classes, persist their progress, and recover from crashes and transient failures. It runs inside your service and reuses its existing dependencies.Skipper is available under the Apache 2.0 license. The code is on GitHub, alongside documentation and runnable examples. Our earlier engineering deep dive explains how we built it. Here, we’ll focus on the architecture of Skip…

1 week назад @ medium.com
CASTLE: training natural language search before the first real query
CASTLE: training natural language search before the first real query CASTLE: training natural language search before the first real query

How we addressed the cold-start problem for Airbnb’s natural language search by jointly generating synthetic training data — queries and relevance labels — from de-identified booking and search signals.By: Wendy Ran Wei, Hao Li, Weiwei Guo, Xiaowei Liu, Xueyin Chen, Chun How Tan, Malay Haldar, Soumyadip Banerjee, Kedar Bellare, Huiji Gao, Sanjeev Katariya, and Stephanie MoyermanIntroductionNatural language search lets guests express intent in their own words, such as “romantic cabin near skiing” or “pet-friendly beach house that sleeps eight,” rather than navigating filters and categories. We needed to introduce this kind of search for Airbnb, and to have it work well from the start. Howeve…

1 month назад @ medium.com
Beyond synthetic testing: Capturing and replaying real database workloads at Airbnb
Beyond synthetic testing: Capturing and replaying real database workloads at Airbnb Beyond synthetic testing: Capturing and replaying real database workloads at Airbnb

How we capture real production database traffic at Airbnb and replay it offline to load-test, plan capacity, and de-risk upgrades.By: Zuofei Wang, Erluo LiIntroductionAt Airbnb, MySQL-compatible databases are a critical backbone of our online database infrastructure: a fleet of hundreds of clusters supporting thousands of use cases at millions of queries per second (QPS). Operating databases at scale brings hard problems, including sizing clusters for future growth, keeping behavior consistent across version upgrades and migrations, and reproducing production incidents well enough to debug them. This post describes the database traffic capture and replay system we built to help us tackle th…

1 month, 1 week назад @ medium.com
Personalization without user identity
Personalization without user identity Personalization without user identity

How Airbnb uses proximity signals to personalize without relying on individual user history.By: Wei Jiang, Bin Xu, Bharathi Thangamani, Weiwei Guo, Sundar Srinivasavaradhan, Tracy Yu, Huiji Gao, Swapnil Ghike, Michael KinotiGreat personalization starts with knowing your user. But what happens when the user is a stranger?A significant share of Airbnb users arrive without a login, without a recent search history, or without any prior booking — especially those landing from paid advertising or organic search. For these users, the ML models that power search ranking, destination recommendations, and marketing landing pages face the cold-start problem: there is little to no user signal available…

1 month, 2 weeks назад @ medium.com
The guest journey, updated in real time: extending Airbnb’s sequence recommender with Chronon
The guest journey, updated in real time: extending Airbnb’s sequence recommender with Chronon The guest journey, updated in real time: extending Airbnb’s sequence recommender with Chronon

How two new Chronon capabilities, Push Mode and NRT Model Transform, allows us to provide more relevant search results instantly as a guest explores, rather than waiting for the next batch run.By: Pengyu Hou, Yuli Han, Daochen Zha, Haozhen Ding, Xin Liu, Sophie Wang, Pallavi Adusumilli, Sherry Li, Henry Saputra, Chun How Tan, Huiji Gao, Yan Zhang, Stephanie Moyerman, Yi Li, and Sanjeev KatariyaA guest’s interaction with Airbnb doesn’t pause to wait for a nightly batch job. Someone might browse a dozen listings on a Tuesday afternoon, run a new search that evening, and expect the next search to reflect the recent activity; it’s also to Airbnb’s benefit for that to be the case. In our previou…

2 months назад @ medium.com
Beyond the Model: Engineering AI Infra with Scientific Judgement
Beyond the Model: Engineering AI Infra with Scientific Judgement Beyond the Model: Engineering AI Infra with Scientific Judgement

How Airbnb’s agent harness transforms unstructured data exploration by encoding scientific methodology into scalable, reproducible, and audit-ready infrastructure.Wren DoughertyAsk a coding agent to analyze 100,000 customer support conversations and within minutes you’ll have a polished taxonomy, precise prevalence numbers, and an executive-ready summary. What you can’t see is the investigation that produced them: the methods it chose, the evidence it weighed, how much to trust it, or whether a second request would agree. All that reaches you is the polish. The model is undeniably intelligent, but intelligence without methodology is not science.LLMs certainly make for confident scientists, …

2 months назад @ medium.com
Project Lighthouse — Part 3: Introducing project-lighthouse-anonymize
Project Lighthouse — Part 3: Introducing project-lighthouse-anonymize Project Lighthouse — Part 3: Introducing project-lighthouse-anonymize

Project Lighthouse — Part 3: Introducing project-lighthouse-anonymizeThe data in Project Lighthouse is powered by privacy-preserving anonymization code. We’ve put this code into open source, and published two new technical papers detailing the scalable algorithms and data quality frameworks behind it.By: Adam BloomstonIntroductionIn 2020, we launched Project Lighthouse, which we developed in partnership with leading civil rights and privacy organizations. As our 2020 announcement details, Project Lighthouse enables us to measure potential disparities in user experiences. This work uses perceived race data that is never linked to individual accounts; we only use this data for measuring poten…

2 months, 3 weeks назад @ medium.com
How we knew COVID was over (and what our models had to unlearn)
How we knew COVID was over (and what our models had to unlearn) How we knew COVID was over (and what our models had to unlearn)

When we retrain, when we rebuild, and when we leave a model alone.By: Harrison KatzA forecast that carries weightThe Forecasting Data Science team at Airbnb produces many of the forecasts the rest of the company plans around: demand, bookings, cancellations, and a range of finer cuts by market and segment, refreshed continuously across thousands of markets. The targets differ, and the models differ, but they have one thing in common: Other teams build on top of them.This means a forecast that is casually wrong is not a clean miss, as it might be in an academic setting. That’s because a small bias does not stay small once a lot of decisions are riding on it. So when one of those forecasts st…

3 months назад @ medium.com
Flexible Authentication: Reimagining authentication for millions of users at Airbnb
Flexible Authentication: Reimagining authentication for millions of users at Airbnb Flexible Authentication: Reimagining authentication for millions of users at Airbnb

Rebuilding login and signup surfaced product insights, not just technical challenges. Here’s how we designed Flexible Authentication at the intersection of product intuition and technical architecture.By: Jose Santos, Mike BarryFor Airbnb, logins at irregular intervals are normal. A guest books a trip in January and may not open the app again until summer. A host checks back only when a reservation comes in, and may be busy with other activities when it does. For a two-sided marketplace where a failed login means a lost booking, and lost revenue for both the guest and the host, long gaps between sessions are a structural challenge, not an edge case.Our authentication system had grown organi…

3 months, 1 week назад @ medium.com
Eval-driven development: Lessons from evaluating GenAI at scale
Eval-driven development: Lessons from evaluating GenAI at scale Eval-driven development: Lessons from evaluating GenAI at scale

How Airbnb teams build trustworthy Generative AI products by treating evaluation as a first-class engineering discipline; not an afterthought.Nestled into the lush hillside, this stunning modern retreat features striking natural wood architecture, terraced balconies, and a serene landscape.By: Rohit Girme, Dan Miller, Mia Zhao, Lifan Yang, Clint KellyIntroductionGenerative AI breaks a lot of the assumptions that used to hold true for software testing. Unlike traditional software, LLM outputs are non-deterministic, and “correct” is subjective. Because so much judgment is involved, you often need an AI to evaluate an AI, which introduces its own potential failure modes. Making matters more co…

3 months, 3 weeks назад @ medium.com
Personalizing Airbnb search by learning from the guest journey
Personalizing Airbnb search by learning from the guest journey Personalizing Airbnb search by learning from the guest journey

How we built a Transformer-based sequence model that encodes years of guest behavior to surface the right listings at the right time.By: Daochen Zha, Chun How Tan, Xin Liu, Bin Xu, Han Zhao, Xiaowei Liu, Jun Shi, Tracy Yu, Hui Gao, Huiji Gao, Liwei He, Michael Kinoti, Stephanie Moyerman, and Sanjeev KatariyaIntroductionPlanning a trip on Airbnb rarely happens in a single session. A guest searching for a place to stay in San Francisco might browse dozens of listings over several days, leaving behind a trail of views. Typically, over a period of years, that same guest will have accumulated many previous bookings, reviews, and the occasional cancellation. Taken together, these events reveal a …

3 months, 4 weeks назад @ medium.com
From weeks to a day: how we made LLM evaluation fast enough to iterate on
From weeks to a day: how we made LLM evaluation fast enough to iterate on From weeks to a day: how we made LLM evaluation fast enough to iterate on

Training an LLM is the easy part. The hard part is designing experiments and evaluations that you can trust enough to know whether the new model is actually an improvement.By: Baharak SaberidokhtIntroductionShipping a production LLM system means iterating fast on improvements to something that is, by construction, non-deterministic. Models drift, judges disagree with themselves, references regenerate as different strings, and bugs may persist until the next release, because retraining takes weeks. Most of this friction comes from infrastructure challenges, not model quality, and the fixes come from classical software engineering techniques.At Airbnb, we built reliable LLM infrastructure by …

4 months назад @ medium.com
Scaling beyond one: How Airbnb evolved its data architecture for a multi-product world
Scaling beyond one: How Airbnb evolved its data architecture for a multi-product world Scaling beyond one: How Airbnb evolved its data architecture for a multi-product world

How Airbnb’s data engineers and analytics engineers built a consistent and flexible data modeling framework to support the expansion into Homes, Experiences, and Services.By: Patrick Lam, Namrata Lamba, Jamie StoberWith the May 2025 Summer Release, Airbnb redesigned its app, relaunched Experiences, and debuted Services, pushing us beyond our traditional Homes focus. For the data teams, this meant rapidly evolving a decade-old infrastructure to integrate two brand-new product pillars. Our data engineers and analytics engineers rose to the challenge by building a consistent and flexible framework to serve as a robust and scalable data foundation for the next decade of growth.But getting there…

5 months, 1 week назад @ medium.com
Sitar-agent: Building a reliable dynamic configuration sidecar at scale
Sitar-agent: Building a reliable dynamic configuration sidecar at scale Sitar-agent: Building a reliable dynamic configuration sidecar at scale

How Airbnb built a Kubernetes sidecar to deliver dynamic configuration reliably at scale.By: Bo Teng, Cosmo Qiu, Siyuan Zhou, Ankur Soni, Xin Huang, Willis HarveyIntroductionIn our previous post, we explored Airbnb’s dynamic configuration system, Sitar, with a focus on service architecture and configuration change safety. Now for the harder question: once a config change is committed, which happens several times each minute, how does it actually reach the thousands of Airbnb’s service instances reliably, quickly, and without redeploying the services?This post describes sitar agent: a lightweight Kubernetes sidecar that runs alongside every subscribed service pod, continuously synchronizing …

5 months, 2 weeks назад @ medium.com
Netflix Engineering Netflix Engineering
последний пост 8 часов назад
Engineering AI Discover
Engineering AI Discover Engineering AI Discover

The challenges and decisions behind AI Discover’s intelligence layerBy Varun Khaitan, Peng Ren, Gary Tang, Itay Teller, Atif Faheem, Nipun Kumar, Donnie DeBoer, Eduardo Lundgren, Matteo Rinaldi, Raghav BakshiWe recently introduced AI Discover, a new tab in our TV app where a small group of members can try new ways to find something to watch. For years, our recommendations have worked in the background, inferring what a member might enjoy from their viewing history. AI Discover moves from that silent ranking toward steerable discovery. A member picks a theme, say “Quick Watches,” and gets a row of matching titles, a short note on why they fit and a few narrower themes to try next. From there…

8 часов назад @ netflixtechblog.com
Fact-Checking at Scale: Building a More Accurate and Efficient Synopsis Factuality System
Fact-Checking at Scale: Building a More Accurate and Efficient Synopsis Factuality System Fact-Checking at Scale: Building a More Accurate and Efficient Synopsis Factuality System

By Shreya S Ramanujam, Yongce Li, Afshine Amidi, Sina Ghiassian, Benjamin Klein.IntroductionPicture this — you’re home after a long day at work and can’t wait to catch up on Bridgerton. You log on to Netflix, search for “Bridgerton” and land on this screen:If this sounds familiar, you already know what a synopsis is — it’s a short glimpse into what a viewer can expect to see in a show. We see two types of synopses here: a series-level synopsis describing the overarching plot, and multiple episode-level synopses describing each episode.A synopsis plays a very important role for us — it helps viewers decide whether a title is worth watching or not. Every synopsis needs to strike a balance: sh…

1 week, 1 day назад @ netflixtechblog.com
Making Failure Diagnosis Reliable with Pensive AI
Making Failure Diagnosis Reliable with Pensive AI Making Failure Diagnosis Reliable with Pensive AI

By Praneeth Yenugutala, Victor Dusa, Anastasia Samoilova, Megan Ren, Justin Wei, Marcelo MaywormAt Netflix, data and machine learning practitioners run millions of workloads each day across orchestration systems and compute engines such as Titus, Spark, Trino, and Druid. On peak days, roughly 100,000 workloads fail. When workloads fail, the failure itself is only the beginning. Someone still needs to find the useful signal in several logs, decide whether the cause sits in their code or the platform, and determine whether to retry, reconfigure, or escalate. Even a small share of difficult failures can consume engineering time, waste compute, and interrupt critical data pipelines.Our first an…

3 weeks, 1 day назад @ netflixtechblog.com
Multi‑Ratio Video Resizing for Mobile Feed and Marketing
Multi‑Ratio Video Resizing for Mobile Feed and Marketing Multi‑Ratio Video Resizing for Mobile Feed and Marketing

Serdar Cellat, Yuchen Xie, Bernadette Marcu, Blaid Burgess, Cody Jarrett, Carlos Pereira, Qing Shi, Samuel Carvajal, Manuel Pamplona, Dorothy Jung, Feiko Ritsema, Benjamin Klein, Alex Woo, Eugene Lok, Anna Pulido, Rebecka Swe, Sanford HolsappleIntroductionClips in the Netflix mobile app.At Netflix, a crucial part of our mission is ensuring our content looks stunning on any device. Vertical formats are increasingly important for Netflix, as we have 1.2B followers across our social media accounts, and have recently rolled out Clips, our vertical video feed in the Netflix mobile app. Traditionally, creating vertical assets meant editors and producers manually reframed horizontal videos in edit…

3 weeks, 1 day назад @ netflixtechblog.com
Beyond API Compatibility: Building a Tool to Measure the Blast Radius of Library Changes
Beyond API Compatibility: Building a Tool to Measure the Blast Radius of Library Changes Beyond API Compatibility: Building a Tool to Measure the Blast Radius of Library Changes

By Roberto Perez Alcolea, Java Platform TeamQuasar connects a proposed API change with observed references in consumer repositories, giving the producer evidence for a release decisionAt Netflix, shared Java libraries support applications developed across a large, independently evolving repository ecosystem. A library change begins in one repository, but its impact can reach many others. Producers can see the API diff in front of them. What they often cannot see is who still depends on the symbols that changed.The need for that visibility grows as coding agents take on more of the software development lifecycle. An agent can accelerate a local edit, but without cross-repository context it c…

3 weeks, 4 days назад @ netflixtechblog.com
Single-tenant Titus: VM-level isolation on a multi-tenant container platform
Single-tenant Titus: VM-level isolation on a multi-tenant container platform Single-tenant Titus: VM-level isolation on a multi-tenant container platform

Samartha Chandrashekar & Nick ParkerYou click play on a Friday night, and in the second that follows, dozens of services answer in milliseconds. Most of them run on Titus, our internal container platform. Titus is, in essence, a Kubernetes-based container hosting platform: we keep both the control plane and the data plane (the container hosts that actually run containers) patched and up to date, so application teams get a consistent and reliable container experience. They hand us a container, and we run it, with no host, cluster, or kernel to own. Titus launches millions of containers every week across tens of thousands of EC2 instances in multiple AWS regions. It is multi-tenant by default…

3 weeks, 5 days назад @ netflixtechblog.com
Single-tenant Titus: VM-level isolation on a multi-tenant container platform
Single-tenant Titus: VM-level isolation on a multi-tenant container platform Single-tenant Titus: VM-level isolation on a multi-tenant container platform

Samartha Chandrashekar & Nick ParkerYou click play on a Friday night, and in the second that follows, dozens of services answer in milliseconds. Most of them run on Titus, our internal container platform. Titus is, in essence, a Kubernetes-based container hosting platform: we keep both the control plane and the data plane (the container hosts that actually run containers) patched and up to date, so application teams get a consistent and reliable container experience. They hand us a container, and we run it, with no host, cluster, or kernel to own. Titus launches millions of containers every week across tens of thousands of EC2 instances in multiple AWS regions. It is multi-tenant by default…

3 weeks, 5 days назад @ netflixtechblog.com
Ontology-Driven Observability: Building an End-to-End Knowledge Graph at Netflix Scale
Ontology-Driven Observability: Building an End-to-End Knowledge Graph at Netflix Scale Ontology-Driven Observability: Building an End-to-End Knowledge Graph at Netflix Scale

Prasanna Vijayanathan, Renzo Sanchez-SilvaWhen Jake Paul and Mike Tyson stepped into the ring in November 2024, we delivered the fight to roughly 65 million concurrent streams. On an ordinary day our infrastructure takes in more than 2 billion requests and handles upwards of 38 million real-time logging events every second. At that scale, the whole picture doesn’t fit into a single engineering team’s head or onto a single dashboard. With more Live content, Podcasts and real-time streams, our need to understand and update our systems as quickly as possible becomes imperative to provide a good user experience. Understanding the system at this scale and within the time constraints we have, oft…

1 month назад @ netflixtechblog.com
Integrating Netflix’s Foundation Model into Personalization applications
Integrating Netflix’s Foundation Model into Personalization applications Integrating Netflix’s Foundation Model into Personalization applications

Authors: Divya Gadde, Ko-Jen Hsiao, Dhaval Patel and Moumita BhattacharyaThe motivation for building the Netflix Foundation Model for personalization was laid out in this previous blog post. The Netflix homepage is powered by several specialized models and it requires significant time and resources to maintain and continue innovating on these individual models. Therefore, we decided to centralize member preference learning and have one powerful model learned from comprehensive user interaction histories and content data at a large scale and have this model distribute its learnings to other models.The previous two blog posts(1, 2) focus on the development of the Foundation Model and here we …

1 month назад @ netflixtechblog.com
DataJunction as Netflix’s answer to the missing piece of the modern data stack
DataJunction as Netflix’s answer to the missing piece of the modern data stack DataJunction as Netflix’s answer to the missing piece of the modern data stack

by Olek Gorajek, Samuel Redai, Yian ShangIntroOur Netflix journey from data to dashboards, particularly within the space of the experimentation platform, always presented a unique set of challenges. This blog post aims to illuminate these hurdles and explain how an innovative open-source metric platform became instrumental in overcoming some of them. We’ll showcase the critical role that DataJunction played in streamlining our data workflows and enhancing our ability to derive meaningful insights from our vast datasets.Metrics are the foundation of data-driven decision-making, but at many organizations, they are scattered, inconsistently defined, and difficult to discover or trust. At Netfl…

1 month назад @ netflixtechblog.com
Measuring the Impact of Personalized Recommendations
Measuring the Impact of Personalized Recommendations Measuring the Impact of Personalized Recommendations

By Kevin Zielnicki, Guy Aridor, Aurélien Bibaut, Allen Tran, Winston Chou, and Nathan KallusIntroductionPersonalization is everywhere on the internet. It shapes the products we discover, the stories we read, the music we hear, and the movies and TV shows we watch. At Netflix, personalization has been central to the member experience for decades — from the Netflix Prize to our modern recommender system that helps members navigate a large and constantly changing catalog.But personalization is not only an algorithmic problem, it is also a measurement problem. How do we know how much value personalization creates? More precisely, how do we separate the appeal of a title from the value created b…

1 month назад @ netflixtechblog.com
TimeSeries Tiered Storage Journey: Kafka/Flink Streams to Native Cassandra Cold Reads
TimeSeries Tiered Storage Journey: Kafka/Flink Streams to Native Cassandra Cold Reads TimeSeries Tiered Storage Journey: Kafka/Flink Streams to Native Cassandra Cold Reads

By Oleksii Tkachuk, Rajiv Shringi, Chris Lohfink, Abe Ratnofsky, Kartik SathyanarayananIntroductionIn an earlier post, we introduced the TimeSeries Abstraction, our high-throughput, low-latency platform designed to store and query temporal event data at scale. It has since become the operational backbone for Netflix’s largest datasets, which now span multiple petabytes.However, managing such large datasets in hot storage, tuned for low-millisecond latency access, is not cheap. At Netflix, cost-efficiency is a continuous discipline rather than a temporary initiative. This post shares two solutions that significantly reduce storage costs by continuously moving older, less frequently accessed …

1 month назад @ netflixtechblog.com
Behind the Scenes: Evolving Netflix’s Ads Event Pipeline for Live — Part II
Behind the Scenes: Evolving Netflix’s Ads Event Pipeline for Live — Part II Behind the Scenes: Evolving Netflix’s Ads Event Pipeline for Live — Part II

By Yogesh NagarurIntroductionIn Part 1 of this series, we shared how Netflix built the Ads Event pipeline and approached it as a system design problem: replacing fragmented pipelines with a centralized collection, enrichment, and a standard data contract. The result was Ads Event Publisher, the system that collects ad telemetry from client devices, enriches it with the context of the ad that was actually served, and publishes a single, unified stream of ad events to every downstream consumer: frequency capping, metrics, billing, measurement partners, and reporting. Any member viewing or account details that move through this pipeline end-to-end are encrypted and handled in accordance with N…

1 month назад @ netflixtechblog.com
Netflix Conductor: The Next Chapter
Netflix Conductor: The Next Chapter Netflix Conductor: The Next Chapter

Netflix Conductor : The Next Chapterby Aravindan Ramkumar on behalf of the Conductor teamConductor is the workflow orchestration engine Netflix uses to stitch micro-services into reliable, observable business processes.If you’ve followed Conductor from the outside, the last thing you heard was probably the note on its GitHub repository: Netflix discontinued maintenance of Conductor OSS to refocus its resources on the internal fork.That announcement marked the end of the open-source chapter, and from the outside it may have looked like the end of the story. It wasn’t. Internally, Conductor never slowed down. If anything, it grew faster, and the demands of that growth pushed us to rebuild it …

1 month назад @ netflixtechblog.com
Running Apache Spark experiments in my sleep (and on a plane)
Running Apache Spark experiments in my sleep (and on a plane) Running Apache Spark experiments in my sleep (and on a plane)

By Prashanth Gedde NarayanaswamyAs one of Netflix’s largest and critical data pipelines, member-sessionizer consolidates tens of billions of hourly client events, encompassing user taps, playbacks, and engagement signals, into individual viewing sessions per profile.A quick two-week tuning effort spiraled into two months when standard approaches hit a wall. Because the failures only happened at full production scale, each test took hours, limiting me to just three or four attempts daily. The turning point was changing the goal: instead of trying to speed up a single run, I built a way to run and monitor multiple tests at once and track every result.That mindset led to an unconventional setu…

1 month назад @ netflixtechblog.com
Pinterest Engineering
последний пост 1 day, 9 hours назад
Rebuilding Guardian: How Pinterest Upgraded Its Real-Time Abuse Platform to Modern Infrastructure…
Rebuilding Guardian: How Pinterest Upgraded Its Real-Time Abuse Platform to Modern Infrastructure… Rebuilding Guardian: How Pinterest Upgraded Its Real-Time Abuse Platform to Modern Infrastructure…

Rebuilding Guardian: How Pinterest Upgraded Its Real-Time Abuse Platform to Modern Infrastructure at ScaleAuthors: Sharon Xie, Sr. Staff Software Engineer | Zhenxiao Luo, Sr Staff Software Engineer |Yi Pan, Principal Software Engineer | Vikram Deshpande, Sr. Engineering ManagerGuardian helps Pinterest teams turn real-time event data into meaningful insights and operational outcomes. It enables subject matter experts to analyze real-time event streams, identify evolving patterns, and operationalize those learnings through signals, policies, and downstream workflows. Over the years, Guardian has supported a wide range of use cases, including spam and fraud response, account takeover detection…

1 day, 9 hours назад @ medium.com
How Pinterest Improved Analytics Agent Compliance with Loop Engineering
How Pinterest Improved Analytics Agent Compliance with Loop Engineering How Pinterest Improved Analytics Agent Compliance with Loop Engineering

Skyler Zheng | Software Engineer II; Chris Moradi | Staff Data Scientist; Lu Liu | Staff Software Engineer; Aman Gairola | Manager II; Michael Chau | Manager IIThe Compliance ProblemCompliance means following the right steps at the right timePinterest’s Analytics Agent helps teams answer questions such as “How did query latency for the ads reporting pipeline change last week?” It searches the company’s data ecosystem, analyzes the relevant information, and recommends an answer or course of action.Not every question requires the same steps. We call the agent compliant when it identifies and follows the steps that apply. Improving compliance is intended to make answers more consistent and red…

5 days, 9 hours назад @ medium.com
Safe and Efficient Multi-Epoch Embedding Training
Safe and Efficient Multi-Epoch Embedding Training Safe and Efficient Multi-Epoch Embedding Training

Authors: Shruthi Hariharan | Machine Learning Engineer II; Konish Dutta | Machine Learning Engineer II; Abhinav Naikawadi | Sr. Machine Learning Engineer; Zhihua Zhang | Machine Learning Engineer II; Rakshita Nagalla | Sr. Machine Learning Engineer; Kousik Rajesh* | Machine Learning Engineer II; Matt Lawhon | Staff Machine Learning EngineerTags: Machine Learning, Infrastructure, Recommendation SystemsContent Track: Technical Discussion / Architecture of big components* == work done while at PinterestIntroductionLarge ID embedding tables underpin some of the largest modeling advances at Pinterest, including teacher-model scaling and cross-domain pretraining for ranking and retrieval. These t…

1 week, 4 days назад @ medium.com
Scaling Model Evaluation at Pinterest with Ray (Part 4)
Scaling Model Evaluation at Pinterest with Ray (Part 4) Scaling Model Evaluation at Pinterest with Ray (Part 4)

Vishnu Arun | Tech Lead, Feature Importance Platform; Anderson Lam | Sr Software Engineer; Andrew Qiu | Machine Learning Engineer I; Helena Xu | Data Scientist I; Tianyou Wang | Data Scientist IIIntroductionIn our multi-part blog series, we have discussed why we chose Ray as a last mile data processing framework, how we integrated Ray into our existing ML Training Infrastructure, and how we enabled efficient Batch Inference at scale. In this blog post, we will discuss how we were able to apply Ray to another critical part of our ML Infrastructure stack: Model Evaluation.In the Ray Batch Inference Blog Post, we ended on a section on accumulators (counters that would allow us to calculate met…

1 week, 6 days назад @ medium.com
Introducing ModuleLens: Zooming into PyTorch Modules for Human and Agentic Engineering
Introducing ModuleLens: Zooming into PyTorch Modules for Human and Agentic Engineering Introducing ModuleLens: Zooming into PyTorch Modules for Human and Agentic Engineering

Lida Li, Sr. Staff Software Engineer, Product ML InfraIntroductionModern recommendation systems, including those used for ads ranking and content discovery, have grown substantially in scale and complexity. This growth stems from both increasingly large model architectures. The resulting memory footprint often exceeds the capacity of a single GPU, making it necessary to shard production models across multiple GPUs using distributed training techniques such as Distributed Model Parallelism (DMP).This evolution brings challenges to the everyday engineer work on testing and debugging the model code. The bottleneck includes:Local Machine Hardware Limits: Because production models require multi-…

4 weeks, 1 day назад @ medium.com
From Activity to Intent: Generating User Journeys with LLMs
From Activity to Intent: Generating User Journeys with LLMs From Activity to Intent: Generating User Journeys with LLMs

Lin Zhu | Sr. Staff Machine Learning Engineer; Manan Kalra | Machine Learning Engineer II; Logan Jeon | Sr. Machine Learning Engineer; Ye Liu | Staff Machine Learning Engineer; Xiangyi Chen | Sr. Machine Learning Engineer; Jaewon Yang | Principal Machine Learning Engineer; Jinwen Xu | Manager II, Machine Learning Engineering; Tingting Zhu | Sr. Manager, Engineering; Sudarshan Lamkhede | Director, Machine Learning EngineeringPinterest is built to get inspired and then turn the inspiration into realization — a dinner, a renovation, a wedding, a new skill. That only works if we understand more than the Pin a user just clicked. The useful unit of personalization isn’t the thing someone just cli…

1 month, 1 week назад @ medium.com
Metrics Board: Building an Agent-ready Metrics Layer
Metrics Board: Building an Agent-ready Metrics Layer Metrics Board: Building an Agent-ready Metrics Layer

Michele Ceccacci; Software Engineer I | Jason Coffman; Sr. Software Engineer | Colm O’Shaughnessy; Software Engineer II | Laura Palmer; Staff Product Manager | Adam Podraza; Manager, Engineering | Surya Karri; Manager, EngineeringAt Pinterest, reliable and trustworthy metrics are behind every decision: from measuring company-wide business performance to evaluating each feature experiment results. Hundreds of data producers — analysts, data scientists, and engineers across Pinterest — create thousands of metrics from our petabyte scale data lake. A metrics ecosystem this size can’t be ad hoc; it has to be organized, scalable, and resilient. So we built Metrics Board: an end-to-end platform t…

1 month, 1 week назад @ medium.com
Partition Finalization in Pinterest’s Next-Generation DB Ingestion Framework
Partition Finalization in Pinterest’s Next-Generation DB Ingestion Framework Partition Finalization in Pinterest’s Next-Generation DB Ingestion Framework

Qianrui Zhang | Sr Software Engineer, Logging PlatformKanchi Masalia | Software Engineer II, Stream Processing PlatformLiang Mou | Sr Staff Software Engineer, Logging PlatformYi Pan | Principal Engineer, Agent PlatformIntroductionThis is the third post in our series on Pinterest’s next-generation database ingestion framework. Part 1 introduced the DB ingestion framework built on Kafka, Flink, Spark, and Iceberg, and Part 2 covered automated schema evolution. This post tackles another challenge in migrating downstream customers to the new ingestion framework: knowing when data is complete enough to read.We’ll walk through that data completeness challenge and how we solve it: what “partition …

1 month, 3 weeks назад @ medium.com
Beyond Two Towers: Launching the 3-Tower Engagement Co-Train Model (Part 2)
Beyond Two Towers: Launching the 3-Tower Engagement Co-Train Model (Part 2) Beyond Two Towers: Launching the 3-Tower Engagement Co-Train Model (Part 2)

Authors: Longyu Zhao (Staff Machine Learning Engineer), Gwendolyn Zhao (Staff Machine Learning Engineer), Peng Yan (Senior Machine Learning Engineer), Yuanlu Bai (Senior Machine Learning Engineer), Yuan Wang (Senior Machine Learning Engineer), Yao Cheng (Staff Machine Learning Engineer), Ang Xu (Principal Machine Learning Engineer), Zhaohong Han (Manager II, Ads Lightweight Ranking)IntroductionPreviously¹, we launched the next-generation serving stack for standard ads, which we call Nexus. Nexus decoupled candidate generation from scoring and moved us beyond the classic two-tower-only world, enabling richer model architectures while still meeting stringent latency and cost constraints.Build…

2 months назад @ medium.com
Evolving Pinterest’s Embedding Retrieval Platform
Evolving Pinterest’s Embedding Retrieval Platform Evolving Pinterest’s Embedding Retrieval Platform

Authors: Bowen Zhou | Staff Software Engineer; Shan Gao | Senior Software Engineer; Jingwen Hu | Software Engineer II; Wenjiang Chu | Staff Software EngineerThe Billion-Embedding ChallengeAt Pinterest, the “signal” is our lifeblood. Whether it’s a home decor enthusiast finding the perfect rug or a fashion seeker discovering a new aesthetic, our discovery engine relies on understanding deep semantic relationships to help our users find inspirations. Over the last few years, the explosive growth of embedding-based retrieval has fundamentally transformed how we surface these signals — and at the heart of that transformation is Manas, Pinterest’s in-house distributed search platform.Embedding R…

2 months, 1 week назад @ medium.com
Building Pinterest’s VLM Serving Stack on NVIDIA Dynamo
Building Pinterest’s VLM Serving Stack on NVIDIA Dynamo Building Pinterest’s VLM Serving Stack on NVIDIA Dynamo

Lei Pan | Senior Software Engineer; Salina Wu | Senior Software Engineer; Cristian Lopez | Software Engineer I; Guangtong Bai | Staff Software Engineer; Soam Acharya | Principal Engineer; Saurabh Vishwas Joshi | Principal Engineer; Chia-Wei Chen | Staff Software Engineer; Ambud Sharma | Principal EngineerWhy VLM Serving Matters at PinterestPinterest is a visual search and discovery platform, so its AI systems must reason over both language and visual content. Vision-language models (VLMs), which can interpret images, compare visual candidates, and respond naturally to user intent, are becoming the foundation for the next generation of Pinterest experiences: Pinterest Assistant, hybrid searc…

2 months, 1 week назад @ medium.com
Becoming an AI Team
Becoming an AI Team Becoming an AI Team

John Grass | Sr. Manager, EngineeringA Fundamental TransformationAn AI team is fundamentally more than just a group whose members incorporate AI tools into their existing workflows. The journey to becoming an AI team necessitates a fundamental and comprehensive paradigm shift in how the team defines ownership, engages in strategic planning, and, most critically, executes on its core goals and objectives. This transformation is not merely an addition of new technology; it is a restructuring of the team’s operating model, philosophy, and individual roles.Becoming an AI team requires a holistic shift: team members transition from routine, manual execution to empowered, AI-augmented strategists…

2 months, 2 weeks назад @ medium.com
Scaling Conditional Learned Retrieval for Pinterest Home Feed
Scaling Conditional Learned Retrieval for Pinterest Home Feed Scaling Conditional Learned Retrieval for Pinterest Home Feed

Devin Kreuzer | Sr. Machine Learning Engineer; Yichi Wang | Machine Learning Engineer I; Sujan Reddy Ale | Machine Learning Engineer I; Zelun Wang | Sr. Machine Learning Engineer; Hongtao Lin | Sr. Machine Learning Engineer; Piyush Maheshwari | Staff Machine Learning EngineerPinterest home feed candidate generation is a large-scale User-to-Pin retrieval problem. A common approach is a two-tower model: a user tower encodes the user, an item tower encodes candidate Pins, and approximate nearest neighbor search retrieves Pins close to the user embedding. But Pinterest users often have multiple intentions at once — planning a renovation, saving recipes, exploring fashion, or organizing travel i…

2 months, 3 weeks назад @ medium.com
Pinner Progression: Better Use-Case Representation Driving Weekly Active User Growth at Pinterest
Pinner Progression: Better Use-Case Representation Driving Weekly Active User Growth at Pinterest Pinner Progression: Better Use-Case Representation Driving Weekly Active User Growth at Pinterest

Part 1 of 2AuthorsPersonalization (Homefeed): Yuke Yan, Chuxi Wang, Andreanne Lemay, Olafur Gudmundsson, Anna Kiyantseva, Krystal Benitez, Jongho Kim, Jiacong He, Rahul Goutam, James Li, Dylan WangUser Understanding: Simin Li, Sufyan Suliman, Yingjian Ding, Hongbo DengData Science: Armando Ordorica, Yan Chen, Ellie Zhang, Karim WahbaIntroductionPinterest’s mission is to help people discover the inspiration to create a life they love. Our recommendation system serves hundreds of millions of users, surfacing billions of Pins across interests ranging from home renovation to meal planning to wedding decor. The home feed , where much of that discovery happens, is powered by a multi-stage pipelin…

3 months, 3 weeks назад @ medium.com
Securing Infrastructure at Scale: Introducing Pinterest’s Resource Provisioner Pipeline (RPP)
Securing Infrastructure at Scale: Introducing Pinterest’s Resource Provisioner Pipeline (RPP) Securing Infrastructure at Scale: Introducing Pinterest’s Resource Provisioner Pipeline (RPP)

Ammar Ekbote | Senior Software EngineerChan Kim | Senior Software EngineerManaging Infrastructure as Code (IaC) across a massive organization comes with a unique set of security and logistical challenges, particularly when operating within a distributed, multi-repository architecture. At Pinterest, we designed the Resource Provisioner Pipeline (RPP), our specialized, proprietary Terraform execution engine to safely manage both critical and non-critical infrastructure changes.In this post, we will look under the hood of the first iteration of the RPP system. We will explore how it established compliance and provides robust security guardrails for our global AWS operations by utilizing dual c…

3 months, 4 weeks назад @ medium.com
Facebook
последний пост 6 days, 8 hours назад
Intelligent Delivery: Making Every Unit of Compute Serve Better Ads
Intelligent Delivery: Making Every Unit of Compute Serve Better Ads

Ads ranking models are growing toward LLM scale faster than the hardware to run them can keep up. An extra unit of compute has more impact on some ad requests, models, and chips than on others. The challenge is deciding where to allocate it to get the best outcome for the entire system. We built [...]

Read More...

The post Intelligent Delivery: Making Every Unit of Compute Serve Better Ads appeared first on Engineering at Meta.

6 days, 8 hours назад @ engineering.fb.com
Your Algorithm: Giving People More Ways to Personalize Facebook Recommendations
Your Algorithm: Giving People More Ways to Personalize Facebook Recommendations

Your algorithm is a suite of AI-powered tools that makes Facebook recommendations more transparent and steerable, with a single editable view of the interests that shape Feed and Reels. We’re sharing how Your algorithm turns people’s natural language preferences into responsive recommendations, and how LLMs are tailored to specific tasks within the system. Traditionally, the [...]

Read More...

The post Your Algorithm: Giving People More Ways to Personalize Facebook Recommendations appeared first on Engineering at Meta.

1 week назад @ engineering.fb.com
How We Built TLX: A Hardware-Native GPU Compiler for Production ML at Scale
How We Built TLX: A Hardware-Native GPU Compiler for Production ML at Scale

Triton Low-Level Extensions (TLX), is an extension to Triton that helps engineers optimize GPU performance while preserving Triton’s productive programming model. TLX introduces explicit warp-group and cluster-level orchestration, letting developers adopt new hardware capabilities without sacrificing velocity. TLX has demonstrated performance improvements in RecSys training, RecSys inference, and large-scale LLM pretraining. Modern GPU architectures increasingly [...]

Read More...

The post How We Built TLX: A Hardware-Native GPU Compiler for Production ML at Scale appeared first on Engineering at Meta.

1 week назад @ engineering.fb.com
F3 Lightning: How Meta Accelerates Ads ML Features to Production at Scale
F3 Lightning: How Meta Accelerates Ads ML Features to Production at Scale

Facebook Feature Framework (F3) is Meta’s framework for authoring, compiling, and serving the machine learning features underlying ads ranking models, where a single request can require more than 20,000 features. We first presented F3 at AI @ Scale 2020. F3 reduced execution computational costs by compiling all features into a single merged graph, but that [...]

Read More...

The post F3 Lightning: How Meta Accelerates Ads ML Features to Production at Scale appeared first on Engineering at Meta.

2 weeks назад @ engineering.fb.com
Catching Bugs Before They Land: JiTTesting’s Human-on-the-Loop Approach at Full Scale
Catching Bugs Before They Land: JiTTesting’s Human-on-the-Loop Approach at Full Scale

Over the last year we’ve been sharing our work leveraging large language models to catch bugs on the fly — a novel approach we call Catching Just-in-Time Tests (JiTTests). Now, we’re sharing the results and positive impact we’ve seen with Catching JiTTests deployed into production. Our paper, “Just-in-Time Catching Test Generation at Meta,” fully details [...]

Read More...

The post Catching Bugs Before They Land: JiTTesting’s Human-on-the-Loop Approach at Full Scale appeared first on Engineering at Meta.

2 weeks, 5 days назад @ engineering.fb.com
Meta Andromeda: Powering the Next Generation of Ads Retrieval Through Model-System Co-Design
Meta Andromeda: Powering the Next Generation of Ads Retrieval Through Model-System Co-Design

This post describes the next generation of Meta Andromeda, Meta’s personalized ads retrieval engine, and how co-designing the model, system, and GPU hardware unlocks a new efficiency frontier for ads retrieval. In production, the system scores every eligible ad with near ranking-level model performance at retrieval scale and surfaces the top candidates at over one [...]

Read More...

The post Meta Andromeda: Powering the Next Generation of Ads Retrieval Through Model-System Co-Design appeared first on Engineering at Meta.

2 weeks, 6 days назад @ engineering.fb.com
PrivacyLib: Privacy Controls at the Data Access Boundary
PrivacyLib: Privacy Controls at the Data Access Boundary

This latest deep dive into Meta’s Privacy Aware Infrastructure (PAI) takes a look at PrivacyLib. A privacy requirement must hold as data moves through Meta’s diverse data and processing systems. Historically, supporting a new requirement meant implementing the same enforcement logic separately in each system. PrivacyLib replaces this with a common library that runs inside [...]

Read More...

The post PrivacyLib: Privacy Controls at the Data Access Boundary appeared first on Engineering at Meta.

3 weeks назад @ engineering.fb.com
Meta Networking at the 2026 OCP Global Summit: Open Innovation for Scale-Up, Scale-Out, and Scale-Across AI Networks
Meta Networking at the 2026 OCP Global Summit: Open Innovation for Scale-Up, Scale-Out, and Scale-Across AI Networks

At the 2026 Open Compute Project (OCP) Global Summit, Meta shared the networking innovations that are directly supporting our latest AI models, including Muse Wonder and Muse Spark, and our gigawatt-scale Prometheus cluster. Highlights IcePack & IceCube: Meta’s first liquid-cooled network rack with 102.4T switch blades (128×800G, Broadcom Tomahawk 6C and NVIDIA Spectrum-6 variants), running [...]

Read More...

The post Meta Networking at the 2026 OCP Global Summit: Open Innovation for Scale-Up, Scale-Out, and Scale-Across AI Networks appeared first on Engineering at Meta.

3 weeks, 1 day назад @ engineering.fb.com
GenRecs Tokenization: Transforming Ads Recommendation at Meta with Stable Model Vocabulary
GenRecs Tokenization: Transforming Ads Recommendation at Meta with Stable Model Vocabulary

Generative Recommenders (GenRecs) represent a paradigm shift from scoring every ad to reasoning about ad content and user preferences together in order to predict the best outcome for advertisers. Leveraging the world knowledge built into LLMs makes ad matching more intelligent and precise, compounding gains for advertisers. GenRecs Tokenization is the foundational data representation that [...]

Read More...

The post GenRecs Tokenization: Transforming Ads Recommendation at Meta with Stable Model Vocabulary appeared first on Engineering at Meta.

4 weeks, 1 day назад @ engineering.fb.com
The Thin Orchestrator: How We Made Our AI Agents More Reliable by Giving the Router Less to Do
The Thin Orchestrator: How We Made Our AI Agents More Reliable by Giving the Router Less to Do

Sometimes, giving an AI agent all of the knowledge it needs is the wrong approach. At Meta, we’ve seen notable improvements in efficiency and accuracy by keeping the orchestration layer of our data pipeline agents deliberately thin: It routes work and enforces reliability checks, while specialized agents do the domain reasoning. We’re sharing our own [...]

Read More...

The post The Thin Orchestrator: How We Made Our AI Agents More Reliable by Giving the Router Less to Do appeared first on Engineering at Meta.

4 weeks, 1 day назад @ engineering.fb.com
Inside Prometheus: Meta’s Journey to a Gigawatt-Scale Supercluster
Inside Prometheus: Meta’s Journey to a Gigawatt-Scale Supercluster

With the recent release of the Muse family of foundational models, we want to take you inside the infrastructure that has made it all possible. The first phase of Prometheus, our gigawatt-scale supercluster, is already complete and we’re working toward scaling it to comprise ~1 million GPUs. Prometheus also features technologies like closed-loop liquid cooling [...]

Read More...

The post Inside Prometheus: Meta’s Journey to a Gigawatt-Scale Supercluster appeared first on Engineering at Meta.

4 weeks, 1 day назад @ engineering.fb.com
How Meta Built Forum With AI-Native Engineering
How Meta Built Forum With AI-Native Engineering

Meta’s newest app, Forum, is for anyone who wants to go deeper into the conversations in their Facebook groups. To build Forum, Meta engineers adopted a whole new way of working by bringing an AI agent into the development cycle. We’re sharing insights into what it took to build Forum with agentic AI: how we [...]

Read More...

The post How Meta Built Forum With AI-Native Engineering appeared first on Engineering at Meta.

1 month назад @ engineering.fb.com
Meta’s Generative Ads Model (GEM): Scaling the Central Model and Compute Engine for Frontier Ads AI
Meta’s Generative Ads Model (GEM): Scaling the Central Model and Compute Engine for Frontier Ads AI

Last year, we introduced GEM, the industry’s largest recommendation system (RecSys) foundation model. GEM established Meta’s first LLM-inspired paradigm for ads recommendation, driving major performance gains. Building on this foundation, our next goal is to further scale both compute and intelligence transfer with next-generation hardware, and expand this capability across Meta’s entire ads ecosystem. This [...]

Read More...

The post Meta’s Generative Ads Model (GEM): Scaling the Central Model and Compute Engine for Frontier Ads AI appeared first on Engineering at Meta.

1 month назад @ engineering.fb.com
OCP Summit 2026: Powering AI with Open Innovations in Scale-Up, Scale-Out, and Scale-Across Networks
OCP Summit 2026: Powering AI with Open Innovations in Scale-Up, Scale-Out, and Scale-Across Networks

At the 2026 Open Compute Project Global Summit, Meta is sharing the next generation of open networking infrastructure, including: Our first liquid-cooled network rack (IcePack), and 102.4T switch platform (IceCube). Flattened Planar Fabric (FPF), a multiplane backend scale-out fabric that fundamentally changes how GPUs connect to the network MetaRoCE, our open-source AI transport protocol. Launching [...]

Read More...

The post OCP Summit 2026: Powering AI with Open Innovations in Scale-Up, Scale-Out, and Scale-Across Networks appeared first on Engineering at Meta.

1 month назад @ engineering.fb.com
Turning Opportunistic AI Inference Capacity Into Better Ads Recommendations
Turning Opportunistic AI Inference Capacity Into Better Ads Recommendations

At Meta, we’ve built a system that enhances ads recommendations by leveraging idle inference capacity in our fleet. Two elasticity levers in the system allow ads recommendation work to expand across opportunistic capacity, without compromising baseline performance. This post describes how we designed and now operate the system at Meta’s scale and how it drives [...]

Read More...

The post Turning Opportunistic AI Inference Capacity Into Better Ads Recommendations appeared first on Engineering at Meta.

1 month назад @ engineering.fb.com
Uber Engineering
последний пост None
Spotify Engineering Spotify Engineering
последний пост None
Ripple Engineering Ripple Engineering
последний пост None
Dmitry Anoshin recommends
Snowflake
последний пост None
Cloudera Cloudera
последний пост None
Smart Data
последний пост 3 days, 5 hours назад
Alternative Data in BI: Bringing Public Web Data Into Your Dashboards
Alternative Data in BI: Bringing Public Web Data Into Your Dashboards

Pair internal metrics with public web signals to explain why numbers move.

3 days, 5 hours назад @ smartdatacollective.com
Using Product Usage Analytics and Support Data to Build a B2B Product Roadmap
Using Product Usage Analytics and Support Data to Build a B2B Product Roadmap

Align engineering priorities with usage telemetry and support logs.

3 days, 12 hours назад @ smartdatacollective.com
From Hiring To Payroll: Managing HR Data Across Business Systems
From Hiring To Payroll: Managing HR Data Across Business Systems

Connecting HR data across recruiting, timekeeping, and payroll systems eliminates costly manual entry errors and produces clean numbers for executive reporting.

4 days назад @ smartdatacollective.com
From Data to Dashboards: 5 Marketing Reporting Automation Software Picks
From Data to Dashboards: 5 Marketing Reporting Automation Software Picks

Automate cross-channel data collection and keep your marketing dashboards accurate.

4 days, 5 hours назад @ smartdatacollective.com
Creator Analytics Beyond Follower Count: Seven Metrics That Measure Audience Behavior
Creator Analytics Beyond Follower Count: Seven Metrics That Measure Audience Behavior

Seven behavioral signals that show which followers actually trust, click, and buy.

5 days назад @ smartdatacollective.com
10 Financial Apps Empowered by AI: Assistants and Agents
10 Financial Apps Empowered by AI: Assistants and Agents

Ten apps show why a person still needs to check the answer.

5 days, 3 hours назад @ smartdatacollective.com
After the Cyberattack, Can You Trust the Machine?
After the Cyberattack, Can You Trust the Machine?

Restoring a system is only the start of proving it safe.

1 week назад @ smartdatacollective.com
How an Online MBA in Marketing Connects AI and Data Analytics
How an Online MBA in Marketing Connects AI and Data Analytics

Graduate coursework links automated pattern detection to real budget decisions.

1 week, 3 days назад @ smartdatacollective.com
Drone Technology as a Business Investment: Calculating ROI, Costs, and Long-Term Value
Drone Technology as a Business Investment: Calculating ROI, Costs, and Long-Term Value

Calculate the real operational return of commercial UAV programs before building custom tools.

1 week, 4 days назад @ smartdatacollective.com
Workforce Analytics for Auto Repair Shops: Reading Technician Productivity Weekly
Workforce Analytics for Auto Repair Shops: Reading Technician Productivity Weekly

Weekly repair order reviews catch bay bottlenecks and discount leaks before Friday.

1 week, 6 days назад @ smartdatacollective.com
4 Best Self-Hosted Analytics Solutions
4 Best Self-Hosted Analytics Solutions

Run your own tracking stack without handing visitor data to third parties.

1 week, 6 days назад @ smartdatacollective.com
How Data Professionals Optimize Devices for AI and ML Projects
How Data Professionals Optimize Devices for AI and ML Projects

Practical hardware, memory, and workflow habits for local machine learning.

2 weeks назад @ smartdatacollective.com
AI Lease Abstraction and Month-End Close Speed-Up Checklist
AI Lease Abstraction and Month-End Close Speed-Up Checklist

Validate lease terms at signing so close week focuses on real exceptions.

2 weeks назад @ smartdatacollective.com
Your Attribution Model Is Fine. Your CRM Is Lying to It
Your Attribution Model Is Fine. Your CRM Is Lying to It

Audit duplicate contacts and decayed records before rebuilding your dashboards.

2 weeks, 1 day назад @ smartdatacollective.com
Wikipedia Editing Services and AI Training Data: Why LLMs Still Treat Wikipedia as a Source of Truth
Wikipedia Editing Services and AI Training Data: Why LLMs Still Treat Wikipedia as a Source of Truth

What the training papers establish, what current answers reveal, and how to request supported corrections.

2 weeks, 2 days назад @ smartdatacollective.com
Knoldus
последний пост None
We Cloud Data We Cloud Data
последний пост 5 days, 8 hours назад
What Does an AI-Ready Workforce Actually Look Like at a 500-Person Tech Company?
What Does an AI-Ready Workforce Actually Look Like at a 500-Person Tech Company?

Key Takeaways AI Readiness Looks Different for Mid-Market Companies Most mid-market tech executives have sat through at least one internal demo that felt like magic: an engineer uses an AI agent to spin up a boilerplate API in 90 seconds, or a marketer drafts a month’s worth of lifecycle emails in five minutes. Yet when […]

The post What Does an AI-Ready Workforce Actually Look Like at a 500-Person Tech Company? appeared first on WeCloudData.

5 days, 8 hours назад @ weclouddata.com
The Fragmented L&D Stack: Why Three Platforms Is Costing You More Than One Good One
The Fragmented L&D Stack: Why Three Platforms Is Costing You More Than One Good One

Key Takeaways How Organisations End Up With Three Learning Platforms It usually starts with noble intentions. First, your HR department licenses a legacy Learning Management System (LMS) to deliver mandatory compliance training and track annual workplace safety certifications. A year later, your engineering leads complain that the LMS lacks modern technical content, so the company […]

The post The Fragmented L&D Stack: Why Three Platforms Is Costing You More Than One Good One appeared first on WeCloudData.

1 week назад @ weclouddata.com
Why Managers Never Know Their Team’s Training Status (And What That Is Costing You)
Why Managers Never Know Their Team’s Training Status (And What That Is Costing You)

Key Takeaways The End of Quarter Surprise An engineering manager conducts a quarterly performance review or investigates a missed milestone, only to discover the employee never completed the mandatory security protocol or AI tool onboarding module.This scenario plays out daily across mid-market enterprises. Managers typically find out about training gaps after they manifest as project […]

The post Why Managers Never Know Their Team’s Training Status (And What That Is Costing You) appeared first on WeCloudData.

1 week, 5 days назад @ weclouddata.com
LinkedIn Learning vs. an LMS: What Growing Companies Get Wrong About the Difference
LinkedIn Learning vs. an LMS: What Growing Companies Get Wrong About the Difference

Key Takeaways Where upskilling programs might fall short? The scenario is playing out across hundreds of mid-sized companies this week. Your organization crosses the 150-employee threshold. Executive leadership announces a strategic imperative to upskill the workforce. HR or L&D responds by procuring a bulk license of LinkedIn Learning seats, sending out an enterprise-wide onboarding email, […]

The post LinkedIn Learning vs. an LMS: What Growing Companies Get Wrong About the Difference appeared first on WeCloudData.

2 weeks, 1 day назад @ weclouddata.com
Your CEO Just Said “Build an AI-Ready Workforce.” Now what?
Your CEO Just Said “Build an AI-Ready Workforce.” Now what?

Key Takeaways Build an AI Ready Workforce? The email lands in your inbox on a Tuesday morning. Subject line: Strategic Priority: AI Transformation. Your CEO has just announced that artificial intelligence is now the company’s defining operational pillar. Everyone in the executive steering meeting nods along. Then, inevitably, all eyes turn toward the Learning & […]

The post Your CEO Just Said “Build an AI-Ready Workforce.” Now what? appeared first on WeCloudData.

2 weeks, 5 days назад @ weclouddata.com
How to Report AI Capability Development to your Board when your platform cannot give you the data
How to Report AI Capability Development to your Board when your platform cannot give you the data

Key Takeaways Introduction Imagine this scenario: as the Chief Learning Officer (CLO) or Chief Information Officer (CIO) of a Canadian financial institution, you are called into the boardroom. The directors are seated, ready to evaluate the organization’s strategic roadmap. They ask you a simple question: “How ready is our workforce to safely deploy, monitor, and […]

The post How to Report AI Capability Development to your Board when your platform cannot give you the data appeared first on WeCloudData.

3 weeks, 1 day назад @ weclouddata.com
The Real Cost of Managing Compliance Training in a Spreadsheet
The Real Cost of Managing Compliance Training in a Spreadsheet

Key Takeaways Time to rethink your current manual compliance system? Almost every organization has used a spreadsheet to track their compliance training at some point. It starts with an alluring vision of a practical solution. A simple spreadsheet document that can be used to store the employee’s name, certification dates, expiry dates and renewal deadlines. […]

The post The Real Cost of Managing Compliance Training in a Spreadsheet appeared first on WeCloudData.

3 weeks, 4 days назад @ weclouddata.com
Data Engineering for AI: Data Pipelines for Machine Learning and GenAI
Data Engineering for AI: Data Pipelines for Machine Learning and GenAI

Even the most sophisticated artificial intelligence model cannot consistently deliver meaningful results without reliable, relevant, and accessible data. In production environments, model performance is constrained by the quality and availability of the underlying data fed into it. Building enterprise-grade AI requires far more than collecting and storing raw data. Data must be collected from disparate […]

The post Data Engineering for AI: Data Pipelines for Machine Learning and GenAI appeared first on WeCloudData.

3 weeks, 4 days назад @ weclouddata.com
Why Employee Onboarding Breaks at 300 People
Why Employee Onboarding Breaks at 300 People

Key Takeaways What Bad Onboarding Looks like Imagine investing weeks recruiting and training a new employee only to have them leave before completing probation. Silent quitting is becoming more popular than ever and one of the reasons is bad onboarding. Onboarding can lose its effectiveness if a company grows too large e.g. if the headcount […]

The post Why Employee Onboarding Breaks at 300 People appeared first on WeCloudData.

4 weeks назад @ weclouddata.com
What is AI Observability & How to Monitor AI Systems
What is AI Observability & How to Monitor AI Systems

Getting an AI application past the deployment phase is a major milestone, but going live is only the beginning of the system’s operational lifecycle. Traditional software development often operates under the assumption that if an application passes health checks, stays online, and returns standard success status codes, the system is healthy. For AI-driven systems, this […]

The post What is AI Observability & How to Monitor AI Systems appeared first on WeCloudData.

1 month назад @ weclouddata.com
What is AI Observability & How to Monitor AI Systems
What is AI Observability & How to Monitor AI Systems

Getting an AI application past the deployment phase is a major milestone, but going live is only the beginning of the system’s operational lifecycle. Traditional software development often operates under the assumption that if an application passes health checks, stays online, and returns standard success status codes, the system is healthy. For AI-driven systems, this […]

The post What is AI Observability & How to Monitor AI Systems appeared first on WeCloudData.

1 month назад @ weclouddata.com
Cloud for AI: How Cloud Infrastructure Powers Modern AI Applications
Cloud for AI: How Cloud Infrastructure Powers Modern AI Applications

An AI model can be technically impressive in a test environment, but bringing AI into production requires a robust infrastructure capable of supporting data, compute, storage, networking, APIs, deployment, scaling, monitoring, and security. AI capability depends not only on the model itself, but also on the infrastructure that runs it. While MLOps helps operationalize machine […]

The post Cloud for AI: How Cloud Infrastructure Powers Modern AI Applications appeared first on WeCloudData.

1 month, 1 week назад @ weclouddata.com
Cloud for AI: How Cloud Infrastructure Powers Modern AI Applications
Cloud for AI: How Cloud Infrastructure Powers Modern AI Applications

An AI model can be technically impressive in a test environment, but bringing AI into production requires a robust infrastructure capable of supporting data, compute, storage, networking, APIs, deployment, scaling, monitoring, and security. AI capability depends not only on the model itself, but also on the infrastructure that runs it. While MLOps helps operationalize machine […]

The post Cloud for AI: How Cloud Infrastructure Powers Modern AI Applications appeared first on WeCloudData.

1 month, 1 week назад @ weclouddata.com
Cloud for AI
Cloud for AI

An AI model can be technically impressive in a test environment, but bringing AI into production requires a robust infrastructure capable of supporting data, compute, storage, networking, APIs, deployment, scaling, monitoring, and security. AI capability depends not only on the model itself, but also on the infrastructure that runs it. While MLOps helps operationalize machine […]

The post Cloud for AI appeared first on WeCloudData.

1 month, 1 week назад @ weclouddata.com
MLOps Explained
MLOps Explained

Moving an AI system from a prototype to a live product is rarely smooth. A data scientist can build a model inside a Jupyter notebook that boasts 95% accuracy, but getting that code to run reliably in a live production environment is a whole different ballgame. Once real users start interacting with a model, a […]

The post MLOps Explained appeared first on WeCloudData.

1 month, 2 weeks назад @ weclouddata.com
Learn Data Engineering
последний пост None
SCRIBD
последний пост 4 months, 1 week назад
Stop Building Models. Start Building Systems.
Stop Building Models. Start Building Systems. Stop Building Models. Start Building Systems.

LLM models change. Prompt quality changes. Cost changes. We assumed that from day one.

So instead of building a one-off system tied to a specific model or a single “perfect prompt,” we focused on a repeatable process that we successfully applied to two large-scale projects (Slideshare and Scribd). That repeatable process is what we’re sharing. What We Achieved

This process enabled projects that normally require far more people and time: Slideshare: scanned tens of millions of slideshows, classifying each against adult-related content categories (e.g., sexually explicit content, drugs, alcohol, tobacco) and flagging the small fraction that matched.

Scribd: scanned hundreds of millions of doc…

4 months, 1 week назад @ tech.scribd.com
Dual-Embedding Trust Scoring
Dual-Embedding Trust Scoring Dual-Embedding Trust Scoring

Scribd is a digital library serving academics and lifelong learners, offering hundreds of millions of documents. This very nature presents a significant concern: content trust and safety. Protecting our library from undesirable and unsafe content is a top priority, but the multilingual and multimodal (text and images) nature of our platform makes this mission very challenging. Also, while third-party tools exist, they often fall short, lacking the nuance to handle our specific trust and safety categories.

To this end, we capitalized on Generative AI (GenAI) signals and our proprietary multilingual embeddings, in conjunction with classical machine learning methods, to develop our Content Tru…

8 months, 3 weeks назад @ tech.scribd.com
Screaming in the Cloud
Screaming in the Cloud

Scribd has absolutely fascinating data-at-scale type problems, all the way

down to the fundamentals of how we use AWS S3. In my previous

post I wrote about the design of Content

Crush and how Scribd is consolidating objects in S3 to minimize our costs.

Related to that work I was fortunate enough to join the (in)famous Corey

Quinn to talk about Engineering around Extreme S3 scale:

Checking if files are damaged? $100K. Using newer S3 tools? Way too expensive.

Normal solutions don’t work anymore. Tyler shares how with this much data, you

can’t just throw money at the problem, but rather you have to engineer your way

out.

You can also listen

On Everand

or watch via the Last Week in AWS YouTube …

9 months, 1 week назад @ tech.scribd.com
Jesse Anderson Jesse Anderson
последний пост None
Data Quest
последний пост None
Infrastructure
AWS
последний пост 1 час назад
Accelerate your DynamoDB workloads with DynamoDB caching with Amazon ElastiCache Serverless for Valkey
Accelerate your DynamoDB workloads with DynamoDB caching with Amazon ElastiCache Serverless for Valkey

DynamoDB caching with Amazon ElastiCache Serverless for Valkey brings write-through caching to Amazon DynamoDB with sub-millisecond reads and minimal application changes. Serve hot keys from cache, reduce read throttling, and lower read costs while your application keeps calling the DynamoDB API as it does today.

1 час назад @ aws.amazon.com
Managed NVIDIA Dynamo on Amazon SageMaker HyperPod Inference
Managed NVIDIA Dynamo on Amazon SageMaker HyperPod Inference

Amazon SageMaker HyperPod Inference now supports NVIDIA Dynamo for distributed inference, with multi-node and disaggregated serving, KV-aware routing, and automatic fault recovery. Serve large models across many nodes without building the orchestration layer yourself.

1 час назад @ aws.amazon.com
Reduce the complexity and cost of real-time processing with queues in Amazon Kinesis Data Streams
Reduce the complexity and cost of real-time processing with queues in Amazon Kinesis Data Streams

Amazon Kinesis Data Streams now offers queues, a new way to consume the records of an on-demand stream. A queue delivers records one by one, tracks each record's delivery state, redelivers unacknowledged records, sets persistently failing records aside as dead letters, and scales with your backlog instead of your shard count.

2 часа назад @ aws.amazon.com
Reducing token costs and latency in Amazon Bedrock AgentCore JSON workloads
Reducing token costs and latency in Amazon Bedrock AgentCore JSON workloads

As production agents on Amazon Bedrock AgentCore process multi-megabyte JSON payloads, token costs and latency climb. This post shares three composable strategies: offloading heavy artifacts to Amazon S3, on-demand result paging, and dictionary compaction. Together they cut per-turn token use by up to 71% and latency by up to 80%.

2 часа назад @ aws.amazon.com
Reducing database incident MTTR by 73% with a custom AWS DevOps Agent Skill
Reducing database incident MTTR by 73% with a custom AWS DevOps Agent Skill

Database incidents routinely take 45 to 60 minutes to triage. This post shows how to build a custom AWS DevOps Agent Skill that encodes expert Aurora PostgreSQL triage into decision-tree logic across five failure modes, cutting mean time to resolution from 52 minutes to 14 minutes (a 73% reduction) in a controlled test.

2 часа назад @ aws.amazon.com
Amazon MSK Express brokers available on AWS Graviton4-based M8g instances
Amazon MSK Express brokers available on AWS Graviton4-based M8g instances

Amazon MSK Express brokers are now available on AWS Graviton4-based M8g instances. Compared with Express on M7g, M8g delivers 15% lower broker-hour pricing, lower P99 produce latency, faster consumer recovery, a new 24xlarge size, and no broker-side charge for cross-AZ client traffic.

3 часа назад @ aws.amazon.com
Cut generative AI costs: Code for rules, models for judgment
Cut generative AI costs: Code for rules, models for judgment

The biggest cost lever in a generative AI system is whether you call a model at all. Learn how to decide whether each workflow step needs a model, and map each option to AWS: deterministic code, a constrained decision call, or a right-sized model on Amazon Bedrock.

4 часа назад @ aws.amazon.com
Amazon SageMaker AI real-time endpoints now support KV cache aware routing
Amazon SageMaker AI real-time endpoints now support KV cache aware routing

Amazon SageMaker AI real-time endpoints now support KV cache-aware routing, a new strategy that routes each request to the instance holding the longest cached match for its prompt. Learn how it works, when to use it compared with prefix-aware routing, and how to enable, invoke, and verify it on single model and inference component endpoints.

4 часа назад @ aws.amazon.com
Use query statistics to find slow and expensive queries in Aurora DSQL
Use query statistics to find slow and expensive queries in Aurora DSQL

When a code change slows your application, Amazon Aurora DSQL query statistics help you find the slow and expensive queries behind it, down to the exact SQL statement. This post walks through a performance investigation that pinpoints a missing index, fixes it with an asynchronous index build, and measures the improvement in latency and DPU cost.

4 часа назад @ aws.amazon.com
Govern and discover records with common metadata in AWS Agent Registry
Govern and discover records with common metadata in AWS Agent Registry

Custom metadata schemas in AWS Agent Registry let an administrator define typed, validated fields that every agent, MCP server, and skill must carry. This post follows an MCP record from schema definition through registration, enrichment, approval, and discovery, so teams govern and find resources with one shared set of facts.

4 часа назад @ aws.amazon.com
Secure OAuth patterns for Snowflake Cortex AI through Amazon Bedrock AgentCore
Secure OAuth patterns for Snowflake Cortex AI through Amazon Bedrock AgentCore

When an AI agent on Amazon Bedrock AgentCore calls Snowflake Cortex AI over MCP, how does it authenticate? This post walks through three OAuth patterns we tested on AgentCore Identity: Snowflake OAuth, three-legged OAuth with a corporate IdP, and two-legged OAuth, so you can match your organization's identity, audit, and compliance needs.

4 часа назад @ aws.amazon.com
Enforcing zero-trust dependency policies in AWS CodeBuild with JFrog Curation
Enforcing zero-trust dependency policies in AWS CodeBuild with JFrog Curation

Integrate JFrog Curation into an AWS CodeBuild pipeline to block vulnerable and malicious open source packages at download time. A package that violates policy returns an HTTP 403 (Access Denied) error that fails the build, so a risky dependency never becomes a container image or reaches Amazon ECR.

5 часов назад @ aws.amazon.com
Add your organization’s runbooks and policies using Retrieval Augmented Generation (RAG) on Amazon Aurora PostgreSQL
Add your organization’s runbooks and policies using Retrieval Augmented Generation (RAG) on Amazon Aurora PostgreSQL

In Part 2 of this series, you connect your Kiro DBA assistant to your team's runbooks and policies. Store runbooks in Amazon S3, index them with Amazon Bedrock Knowledge Bases on Amazon Aurora PostgreSQL using pgvector, and wire up retrieval so the assistant grounds its recommendations in your own documentation.

5 часов назад @ aws.amazon.com
Build an AI-powered DBA assistant for Amazon Aurora and Amazon RDS with Kiro
Build an AI-powered DBA assistant for Amazon Aurora and Amazon RDS with Kiro

Learn how to build a DBA assistant with Kiro that investigates and resolves Amazon Aurora PostgreSQL performance incidents through natural language. Using two MCP servers, the agent reads Amazon CloudWatch metrics and Database Insights, runs diagnostic queries, and surfaces fixes you apply through your change management process.

5 часов назад @ aws.amazon.com
Announcing AI data preparation capabilities in Amazon SageMaker: Build high-quality datasets for model development workflows
Announcing AI data preparation capabilities in Amazon SageMaker: Build high-quality datasets for model development workflows

Amazon SageMaker AI now offers AI data preparation capabilities for building high-quality training and evaluation data. Generate synthetic examples, assess and improve datasets, auto-label at scale, and bring in expert review through Python SDK APIs and an agent skill, all from your own notebook or IDE.

5 часов назад @ aws.amazon.com
AWS
последний пост 1 час назад
Getting AI out of the demo and into businesses globally
Getting AI out of the demo and into businesses globally

Most enterprises have AI that works in a demo but stalls before production. AWS Forward Deployed Engineering closes that gap. AWS engineers embed with customer teams to take high-value workflows to production in 45-day sprints, leaving a foundation, workflows, and governance the customer owns.

6 часов назад @ aws.amazon.com
Build WhatsApp AI agents with Amazon Bedrock AgentCore
Build WhatsApp AI agents with Amazon Bedrock AgentCore

SMART, an open-source Python SDK and Terraform stack, deploys the full WhatsApp channel layer to your AWS account with one command. Bring any agent that runs on Amazon Bedrock AgentCore, and SMART handles webhook ingestion, media, conversation memory, scheduling, and Meta message templates.

6 часов назад @ aws.amazon.com
How Veeva scaled big data with Amazon EMR on EKS
How Veeva scaled big data with Amazon EMR on EKS

Veeva Systems rebuilt its petabyte-scale analytics platform on Amazon EMR on EKS with Karpenter, cutting ETL runtimes by over 50% and eliminating idle cluster costs with elastic Spark compute that scales from 40 to 520+ nodes in minutes.

6 часов назад @ aws.amazon.com
Secure MCP integrations for AWS DevOps Agent with Amazon Bedrock AgentCore
Secure MCP integrations for AWS DevOps Agent with Amazon Bedrock AgentCore

As you connect more Model Context Protocol (MCP) tools to AWS DevOps Agent, each one adds its own authentication, credential rotation, and audit overhead. This post shows how to extend AWS DevOps Agent with MCP tools securely using Amazon Bedrock AgentCore, so new tools inherit consistent security, access control, private connectivity, and observability.

6 часов назад @ aws.amazon.com
Reason over time-series data with OpenTSLM on Amazon SageMaker JumpStart
Reason over time-series data with OpenTSLM on Amazon SageMaker JumpStart

OpenTSLM, an open source family of time-series language models, is now available in Amazon SageMaker JumpStart. See how Nexthink and Aionic Labs apply it to proactive IT support, then deploy OpenTSLM to a real-time endpoint and fine-tune it on your own data with TimeNet and a SageMaker training job.

7 часов назад @ aws.amazon.com
Building a gated review pipeline for AI coding agents on AWS
Building a gated review pipeline for AI coding agents on AWS

AI coding agents generate code faster than humans can review it. This post lays out a gated review pipeline of six controls that pairs deterministic checks with a verified AI review panel, applies risk-tiered policy gates, and keeps humans in charge of every consequential decision, with a concrete AWS implementation for each control.

7 часов назад @ aws.amazon.com
Your complete guide to AWS Quick at AWS re:Invent 2026
Your complete guide to AWS Quick at AWS re:Invent 2026

AWS Quick gives your whole organization AI that knows your business, respects your security rules, and acts on your behalf. At AWS re:Invent 2026, customers including Allianz, Cox Automotive, and Southwest Airlines share how they govern, extend, and scale Quick. Use this guide to find the sessions that fit your goals.

8 часов назад @ aws.amazon.com
How LoanPro built an agentic AI loan servicing assistant with Amazon Bedrock AgentCore
How LoanPro built an agentic AI loan servicing assistant with Amazon Bedrock AgentCore

LoanPro worked with AWS Partner AllCloud and the AWS Generative AI Innovation Center to build a multi-agent AI assistant on Amazon Bedrock and Amazon Bedrock AgentCore. It gives loan servicing agents instant borrower context and next-best-action recommendations, reducing customer call times by up to 15 percent.

8 часов назад @ aws.amazon.com
Responsible AI for agentic AI: A phased roadmap for platform and application teams
Responsible AI for agentic AI: A phased roadmap for platform and application teams

Enterprises adopting agentic AI at scale need platforms that embed responsible AI from the start. This post gives platform and application teams a three-phase roadmap (governance foundation, pilot deployment, and evaluation and hardening) that maps the AWS Responsible AI Lens pillars to each phase, with guidance on when to revisit each one.

8 часов назад @ aws.amazon.com
How ArisGlobal scaled generative AI inference on Amazon Bedrock
How ArisGlobal scaled generative AI inference on Amazon Bedrock

ArisGlobal runs NavaX, its life-sciences AI engine, on Amazon Bedrock. By caching the shared prompt prefix instead of each per-case document, ArisGlobal cut effective input cost by about 50% and overall monthly inference spend by about 40%, while onboarding more tenants without proportional cost growth.

9 часов назад @ aws.amazon.com
Distribute Amazon RDS traffic between read replicas using Network Load Balancer
Distribute Amazon RDS traffic between read replicas using Network Load Balancer

Learn how to put Amazon RDS read replicas behind a Network Load Balancer with health-aware, Availability Zone affinity routing. An AWS Lambda function keeps the load balancer target group in sync with replica IP addresses, giving clients a single stable endpoint over Direct Connect or Site-to-Site VPN without AWS PrivateLink overhead.

9 часов назад @ aws.amazon.com
PostgreSQL large objects: Best practices for Amazon Aurora and RDS
PostgreSQL large objects: Best practices for Amazon Aurora and RDS

PostgreSQL large objects live outside your tables and are referenced only by an OID, so autovacuum never reclaims the orphans. This post shows how to monitor orphaned large objects on Amazon Aurora and Amazon RDS for PostgreSQL, run vacuumlo safely, set up lo_manage triggers, prevent OID exhaustion, and prepare for major version upgrades.

1 day, 1 hour назад @ aws.amazon.com
Build memory-aware AI agents with Agentic Retrieve on Amazon Bedrock Managed Knowledge Base
Build memory-aware AI agents with Agentic Retrieve on Amazon Bedrock Managed Knowledge Base

Amazon Bedrock Managed Knowledge Base and Amazon Bedrock AgentCore memory now store conversations, extract facts, and bring long-term memory into a single AgenticRetrieveStream call. This post shows how to build a memory-aware, multi-user assistant where each user sees only the documents they may read and each user's memory stays private.

1 day, 2 hours назад @ aws.amazon.com
How Duco transforms financial data automation with Amazon Bedrock AgentCore
How Duco transforms financial data automation with Amazon Bedrock AgentCore

Duco, a data automation platform for tier-one banks, rebuilt its agentic AI stack on Amazon Bedrock and Amazon Bedrock AgentCore. With strict per-tenant isolation, a multi-model strategy, and an MCP skills architecture that cut context overhead by 90%, Duco cut reconciliation deployment time 10x and onboarding costs 70%.

1 day, 3 hours назад @ aws.amazon.com
Taxonomy of multi-agent design patterns, anti-patterns, and lessons from manufacturing
Taxonomy of multi-agent design patterns, anti-patterns, and lessons from manufacturing

Multi-agent coordination is a distributed systems problem, not a model problem. This post gives a field-tested taxonomy of multi-agent design patterns and anti-patterns, a framework for deciding when multiple agents are warranted, and how to build cost-efficient, reliable systems on AWS.

1 day, 3 hours назад @ aws.amazon.com
Astronomer Astronomer
последний пост None
DBT — Data Build Tool DBT — Data Build Tool
последний пост None
FiveTran FiveTran
последний пост None
DataBricks
последний пост None
Mix
/r/DataEngineering
последний пост 2 days, 1 hour назад
How do you guys document your data engineering projects? I'm building something to tackle this problem.
How do you guys document your data engineering projects? I'm building something to tackle this problem.

I've been working on a side project to tackle something I often see in data engineering: complex projects with pipelines, transformations, business rules, dependencies, and data models, but little or outdated documentation. The idea is pretty simple: an AI skill that can analyze a codebase, understand how the pieces fit together, and generate a detailed, interactive HTML documentation site. The output is a single, self-contained HTML file, fully responsive (desktop and mobile), that works offline and doesn't require any external services. It includes things like architecture diagrams, data flow visualizations, table relationships and ERDs, business rules, filters, dependencies, searchable d…

2 days, 1 hour назад @ reddit.com
Ingestion of sensitive data fields
Ingestion of sensitive data fields

Hello, In some industries, we have to deal with sensitive data fields, whether it's PII (personally identifiable information) or other types of confidential data (e.g. investment orders, tax classes, medical records, etc.). So far, in the European companies I've worked for, I've seen different approaches to this problem, despite all being subject to the same regulations. I've also tried reading some online content to get different points of view, but the approaches seem to vary quite a bit. These are the main options I've found or come across: Import everything into the datalake/bronze layer, then only provide access to the datamart/silver/gold layers, which contain only anonymized or aggre…

2 days, 15 hours назад @ reddit.com
Landing to Raw to Bronze or straight from Landing to Bronze?
Landing to Raw to Bronze or straight from Landing to Bronze?

tl;dr: I am currently working on building my personal data lake and medallion + platinum pipeline and need help deciding whether to have an Landing zone to Raw to Bronze steps for ingesting data or go directly to Bronze from the Landing zone. Context: I am working on a quantfied_self project where i am collecting a bunch of data on myself. Things like (everything is timestamped): - Location at all points in the day, - Every single workout set - Major actions i do during a day like brushing teeth, reading a book, meals, work, socialising etc etc etc - Financial transactions - Hourly health metrics like heart rate, Hrv, steps, energy spent, calorie intake etc etc etc - And a lot of other data…

2 days, 19 hours назад @ reddit.com
Other shared data starrocks users?
Other shared data starrocks users?

Posted this in discord but trying here too, any help is greatly appreciated. Is anyone out there using Starrocks shared-data in production? I would really appreciate picking your brain because it's been a STRUGGLE for me and my team. My suspicion is we are trying to use starrocks for too much. Right now we are using both pipes and stream loads to populate raw (bronze) tables then we are using temporal to orchestrate transforms/enrichments into a silver layer. So far this has been nothing but pain with transactions getting piled up until we manually drop partitions. I should mention that most of our silver tables are pk tables which is probably a big drain on performance. I suspect most star…

3 days, 10 hours назад @ reddit.com
I spent the last year working in Palantir Foundry... and now I'm back to Snowflake
I spent the last year working in Palantir Foundry... and now I'm back to Snowflake

Palantir Foundry... two words that just might get you crucified around here. At least... they seem to bring out the worst in people on this sub and I kind of see why and also kind of don't. I spent the last 11 months or so working in Foundry and just recently made the jump back into the Snowflake ecosystem... which, for the record, I'm very happy about. That said, I think people around here often misunderstand what Foundry is and is trying to do. Yes, it's a platform or ecosystem and yes there are a lot of "gotchas" and weird/odd things about the platform but it's not truly a DE tool. It's a full-stack tool... that's abstracted. Yes, there are DE related features (python data pipelines, cod…

4 days, 6 hours назад @ reddit.com
Rows vs Columns: How different are they, really?
Rows vs Columns: How different are they, really? Rows vs Columns: How different are they, really?

I was looking for blog posts about row vs column stores in database systems, trying to find something that I could link to in documentation. I was pretty disappointed with what I saw, so I decided to write my own 🤣 If you work with analytical database systems and have wondered why they are distinct from transactional systems, you might find this post interesting. I give a high-level overview of the many different consequences of "simply" choosing to represent data in columns instead of rows. Spoiler: this is a very significant decision! Given that this is an active area of research, I unfortunately couldn't write about everything, but I think I give a good overview of the general techniques…

4 days, 6 hours назад @ reddit.com
Worth replacing a working Power BI usage dashboard with a custom React dashboard inside our admin app?
Worth replacing a working Power BI usage dashboard with a custom React dashboard inside our admin app?

Hi all, wanted to get some extra opinions; We have a Power BI dashboard that tracks usage of our main app. It’s mostly used by product managers and has a fair number of KPIs. The data sits in a separate DB instance: a scheduled job copies it over from the app DB and recomputes the aggregations, then Power BI refreshes its model from there. It mostly works, but two things annoy me: Power BI feels rigid. We had to make a few compromises on layout, and it’s not easy to get more fluid or interesting visuals out of it. I may be biased though. Drilldown and DAX measures with cross-filtering are nice features, and we don’t have any dashboard changes planned for the next few months anyway. Refreshe…

4 days, 8 hours назад @ reddit.com
stardelt.io - my approach for an opinionated lakehouse on any k8s cluster
stardelt.io - my approach for an opinionated lakehouse on any k8s cluster

Hello there! I don't know where this is going, but I thought I might share the idea here. :) I am working on an on-premise equivalent to the big hyperscaler-only SaaS lakehouse platforms out there. At first, I started this project to teach myself some agentic engineering concepts. But now I am thinking about where this is actually going ... e.g. being an AI first & native on-premise lakehouse platform easily deployable with a single operator in your k8s cluster on your bare metal. https://stardelt.io - if you like, I would appreciate some feedback or leaving a star on the project :) Cheers, Martin submitted by /u/Schwarztrinker [link] [comments]

4 days, 10 hours назад @ reddit.com
Iceberg deletes and real-time ingestion: a 3-part deep dive
Iceberg deletes and real-time ingestion: a 3-part deep dive

Hi there, I've recently worked with the Etleap engineering team on a 3-part technical blog series about how to handle Iceberg deletes in streaming / CDC. This is a known pain point as deletes tend to get expensive, slow, or create tables that are unreadable in query engines like Snowflake. We put a ton of work into these - it's not the usual vendor spam, promise 😅 First 2 parts are purely educational, and we introduce our own solution in the 3rd. We cover position deletes, equality deletes, GET request costs, compaction conflicts, and a lot of other juicy stuff. Part 1: Why Streaming Updates Break Iceberg Compaction Why you're seeing issues like compaction jobs failing with Cannot commit, f…

4 days, 13 hours назад @ reddit.com
Levelling up DBT repo as a self learner
Levelling up DBT repo as a self learner

Hi all, this is a general qns on levelling up our dbt set up as a junior analytics engineer. This includes more test coverage, architectural and modeling improvements, adherence to best practices, and so on. For context, I am working at a small organization of about 50-100 employees and have set up the dbt repo myself in the past year. We do not have the budget for a senior and so I have been trying to learn using web resources and books (like star schema by adamson). The problem is that I feel we are missing an ‘expert’ that can look through what we are doing and advising on what is suboptimal or not. Even though there are lots of resources out there, every dbt implementation is different …

4 days, 15 hours назад @ reddit.com
Tech Lead Mgr... in Fabric
Tech Lead Mgr... in Fabric

I'm on the job-hunt 75% through the process for a DE Manager position. I'm a staff at a scale up (but I feel some title inflation and impostor syndrome). They're working on bringing data in-house from a vendor and it's basically Fabric + DBT -> Power BI so deliverables are a bunch of dashboards with future state being all dashboards, then warehouse + ML as a product down the road. The catch of all this is it's in Fabric. I see all the hate but I've never used the platform, and I've been all over - Oracle, Postgres, Airflow, Pre-Databricks Spark platform, Scala, python, pandas, some DBT. Pretty much exclusively in AWS as far as cloud providers go. The role on the ground is a 75% IC + 25% Mgr…

4 days, 21 hours назад @ reddit.com
How do you develop a strong sense of ownership at work?
How do you develop a strong sense of ownership at work?

I’ve been working for around 5–6 years across different roles and companies, and one thing I’ve consistently struggled with is taking ownership. I tend to be reactive rather than proactive. I hesitate to make decisions, rarely take initiative, and often rely on others for direction. I’ve noticed this pattern across multiple jobs, and I genuinely want to change it. For those who have developed a strong sense of ownership, how did you do it? submitted by /u/Signal-Friend-1203 [link] [comments]

5 days, 3 hours назад @ reddit.com
Advice for our ingestion layer
Advice for our ingestion layer

Hi all, Me and some other people are responsible for all data and analytics throughout the company. Analytics is enabled company wide via a standard “medallion architecture” inside Databricks. This means that we use a standard pipeline job with notebooks to ingest the raw data in the bronze layer, clean/govern/format the data in the silver layer, and in gold we enforce a kimball schema and business logic. Up until recenty, it was fine to append-only in bronze and just dedup those tables in silver so no information is ever lost. However, with the increase of our data streams, appending all into bronze is quickly turning into a massive data lake. Many of these tables may only have 5% of them …

5 days, 3 hours назад @ reddit.com
Braidplane - Open Source (Apache 2.0) and self-hostable platform for declarative and contract-based data integration
Braidplane - Open Source (Apache 2.0) and self-hostable platform for declarative and contract-based data integration Braidplane - Open Source (Apache 2.0) and self-hostable platform for declarative and contract-based data integration

Hello everyone! Around Februrary this year I've started working on my side project, which is now known as Braidplane. It's an open source platform for data integration; it's self-hostable and the core is fully open (Apache 2.0). At this moment it's in Alpha. The goal of this project is to provide safe and reviewable data integrations for engineering teams. From the beginning this project was built upon data contracts (inline and ODCS), e2e Braidplane Proof engine for reviewing data pipeline updates and declarative pipelines (YAML, JSON, cue). As an example, a pipeline can read data from a database and a file, transform and compare the records, and write the results to another system. The pi…

5 days, 6 hours назад @ reddit.com
Ouch. Was only asking about a personal project
Ouch. Was only asking about a personal project Ouch. Was only asking about a personal project

Working on a personal project and asked copilot if my old laptop can handle the dataset and has enough compute to comfortably run spark locally because it is my own workout dataset. I only wanted to know whether my machine is good enough, wasn’t expecting a full on roasting. submitted by /u/f_ab13 [link] [comments]

5 days, 9 hours назад @ reddit.com
Towards Data Science
последний пост 8 часов назад
How to Improve Coding Agent Efficiency by 30% with an Orchestrator
How to Improve Coding Agent Efficiency by 30% with an Orchestrator

Stop hunting through sessions for pending questions: a herder agent surfaces them by priority, kept current by webhooks or cheap Haiku polling.

The post How to Improve Coding Agent Efficiency by 30% with an Orchestrator appeared first on Towards Data Science.

8 часов назад @ towardsdatascience.com
How to Govern Coding Agent Skills Across Repos With Plugins
How to Govern Coding Agent Skills Across Repos With Plugins

Package skills, rules, hooks, and MCP tool configs as versioned plugins, then distribute them through a marketplace, shown with Claude Code and AWS.

The post How to Govern Coding Agent Skills Across Repos With Plugins appeared first on Towards Data Science.

10 часов назад @ towardsdatascience.com
Google ADK Agents That Pause, Resume, and Wait Hours for a Human
Google ADK Agents That Pause, Resume, and Wait Hours for a Human

A synchronous call kept an RSS agent's connection open for 83 seconds; webhooks and 202 receipts free the client while the agent works.

The post Google ADK Agents That Pause, Resume, and Wait Hours for a Human appeared first on Towards Data Science.

11 часов назад @ towardsdatascience.com
How to Design MCP Servers That Leave Orchestration to the Host
How to Design MCP Servers That Leave Orchestration to the Host

A Python SDK v2 catalogue server with two narrow tools, one resource, and one prompt shows how to keep planning, workflow state, and authorisation host-side.

The post How to Design MCP Servers That Leave Orchestration to the Host appeared first on Towards Data Science.

13 часов назад @ towardsdatascience.com
After 10 Heads in a Row, Small LLMs Bet Up to 82% on an 11th
After 10 Heads in a Row, Small LLMs Bet Up to 82% on an 11th

Telling eight base and instruction-tuned open models that the coin is fair and the flips are independent trims their streak bias by only a few points.

The post After 10 Heads in a Row, Small LLMs Bet Up to 82% on an 11th appeared first on Towards Data Science.

1 day, 8 hours назад @ towardsdatascience.com
Why Human in the Loop AI Oversight Fails and How to Fix It
Why Human in the Loop AI Oversight Fails and How to Fix It

Kahneman's System 1 and System 2, plus the ODPS, ODCS, and Ossie standards, show how to wake reviewers up only when a check fails.

The post Why Human in the Loop AI Oversight Fails and How to Fix It appeared first on Towards Data Science.

1 day, 10 hours назад @ towardsdatascience.com
How to Avoid AI Replacement as an Analytics Professional in 2027
How to Avoid AI Replacement as an Analytics Professional in 2027

Lessons from manufacturing and logistics projects: follow data from input to output, then turn vague requests into deterministic tools teams trust.

The post How to Avoid AI Replacement as an Analytics Professional in 2027 appeared first on Towards Data Science.

1 day, 11 hours назад @ towardsdatascience.com
Local LLMs Handle Textbook RAG but Fail on New Research Papers
Local LLMs Handle Textbook RAG but Fail on New Research Papers

Five setups, one blind grading pack: textbook scores ran 12 to 20 of 20, but a paper published this year dropped them to 0 to 9 of 15.

The post Local LLMs Handle Textbook RAG but Fail on New Research Papers appeared first on Towards Data Science.

1 day, 13 hours назад @ towardsdatascience.com
A Practitioner's Guide to 6 Agentic GraphRAG Patterns
A Practitioner's Guide to 6 Agentic GraphRAG Patterns

How autonomous agents turn static knowledge graphs into living Context Graphs that store decisions, user preferences, and incident history, with Cypher.

The post A Practitioner's Guide to 6 Agentic GraphRAG Patterns appeared first on Towards Data Science.

2 days, 10 hours назад @ towardsdatascience.com
Computing Effective Dimension for Quantum ML Models in PyTorch
Computing Effective Dimension for Quantum ML Models in PyTorch

Local and global variants, Fisher estimation, epsilon-ball sampling, and log-space stability, with PennyLane code and a time-series experiment.

The post Computing Effective Dimension for Quantum ML Models in PyTorch appeared first on Towards Data Science.

2 days, 12 hours назад @ towardsdatascience.com
How to Build a Markov Chain in Python With NumPy
How to Build a Markov Chain in Python With NumPy

A step-by-step guide to transition matrices, the Chapman–Kolmogorov equation, and stationary distributions, built around a three-state writing example.

The post How to Build a Markov Chain in Python With NumPy appeared first on Towards Data Science.

3 days, 10 hours назад @ towardsdatascience.com
Data From 100+ AI Agents Shows They Fail by Silent Drift, Not Errors
Data From 100+ AI Agents Shows They Fail by Silent Drift, Not Errors

Quality and token alerts were early signals for 38% of agents and errors for about 1%, so monitoring should start with quality, cost, and latency.

The post Data From 100+ AI Agents Shows They Fail by Silent Drift, Not Errors appeared first on Towards Data Science.

3 days, 12 hours назад @ towardsdatascience.com
Keyword Search Tied an 8B Embedding Model at Picking Agent Tools
Keyword Search Tied an 8B Embedding Model at Picking Agent Tools

On 200 ToolRet questions and up to 3,794 tools, BM25 ran about 40x faster than BGE-large on just a CPU, and full tool docs made it the best setup tested.

The post Keyword Search Tied an 8B Embedding Model at Picking Agent Tools appeared first on Towards Data Science.

4 days, 8 hours назад @ towardsdatascience.com
How JEV Makes Decisions About Images, With 4 Python Examples
How JEV Makes Decisions About Images, With 4 Python Examples

Practical code for classifying fabric against reference photos, scoring product sharpness, cropping shipping labels, and spotting subtle car damage.

The post How JEV Makes Decisions About Images, With 4 Python Examples appeared first on Towards Data Science.

4 days, 10 hours назад @ towardsdatascience.com
What AI Agents Speed Up in PhD Research, and What They Can't
What AI Agents Speed Up in PhD Research, and What They Can't

A PhD student in ML and ecology on why faster code, experiments, and drafts don't fix data with a backstory, and three predictions for how labs will change.

The post What AI Agents Speed Up in PhD Research, and What They Can't appeared first on Towards Data Science.

4 days, 11 hours назад @ towardsdatascience.com
DE Telegram
DataEng DataEng
последний пост 1 week, 4 days назад
Релиз Apache Airflow 3.4Вышла новая версия Apache Airflow 3.4. Список новых фич можно посмотреть по ссылке — https://github.com/apache/airflow/releases/tag/3.4.0
Релиз Apache Airflow 3.4Вышла новая версия Apache Airflow 3.4. Список новых фич можно посмотреть по ссылке — https://github.com/apache/airflow/releases/tag/3.4.0

Релиз Apache Airflow 3.4Вышла новая версия Apache Airflow 3.4. Список новых фич можно посмотреть по ссылке — https://github.com/apache/airflow/releases/tag/3.4.0

1 week, 4 days назад @ t.me
📬 Новое: еженедельный дайджест вакансийРаз в неделю присылаем на почту несколько новых вакансий для дата/аналитик-инженеров, в которых указаны зарплата, локация и стек, и ссылки на остальные вакансии недели.• Без отслеживания открытий писем• Отписаться мож
📬 Новое: еженедельный дайджест вакансийРаз в неделю присылаем на почту несколько новых вакансий для дата/аналитик-инженеров, в которых указаны зарплата, локация и стек, и ссылки на остальные вакансии недели.• Без отслеживания открытий писем• Отписаться мож

📬 Новое: еженедельный дайджест вакансийРаз в неделю присылаем на почту несколько новых вакансий для дата/аналитик-инженеров, в которых указаны зарплата, локация и стек, и ссылки на остальные вакансии недели.• Без отслеживания открытий писем• Отписаться можно в один клик• Не используются сторонние сервисы рассылки👉 Подписаться: https://getdataengineeringjobs.com/digest/Письма приходят на английском

2 weeks, 4 days назад @ t.me
🔴Собес на Дата Инженера с нанимающим из Сбера в субботу в 15:0017 октября (в эту субботу!) в 15:00 по мск приходи онлайн на открытое собеседование, чтобы посмотреть на настоящее интервью на Middle Дата Инженера.Как это будет:📂 Максим Костин, ведущий инжене
🔴Собес на Дата Инженера с нанимающим из Сбера в субботу в 15:0017 октября (в эту субботу!) в 15:00 по мск приходи онлайн на открытое собеседование, чтобы посмотреть на настоящее интервью на Middle Дата Инженера.Как это будет:📂 Максим Костин, ведущий инжене 🔴Собес на Дата Инженера с нанимающим из Сбера в субботу в 15:0017 октября (в эту субботу!) в 15:00 по мск приходи онлайн на открытое собеседование, чтобы посмотреть на настоящее интервью на Middle Дата Инженера.Как это будет:📂 Максим Костин, ведущий инжене

🔴Собес на Дата Инженера с нанимающим из Сбера в субботу в 15:0017 октября (в эту субботу!) в 15:00 по мск приходи онлайн на открытое собеседование, чтобы посмотреть на настоящее интервью на Middle Дата Инженера.Как это будет:📂 Максим Костин, ведущий инженер данных в Сбере, ex-VK проведет собес на дата инженера;📂 Максим будет задавать реальные вопросы с секций, которые проводил сам и комментировать ответы;📂 В конце можно будет задать любой вопрос Максиму.Это бесплатно. Эфир проходит в рамках менторской программы от ШОРТКАТ для разработчиков, которые хотят сменить работу, повысить свой грейд, ЗП и прокачать скиллы.Переходи в нашего бота, чтобы получить ссылку на эфир → @shortcut_de_bot

1 month назад @ t.me
Народ, привет! 👋Я запустил агрегатор вакансий по data/analytics/ops engineering: https://getdataengineeringjobs.com/Веб-сайт мониторит открытые вакансии у десятков компаний по всему миру и отбирает те, что попадают под категорию дата инжиниринга, инфрастру
Народ, привет! 👋Я запустил агрегатор вакансий по data/analytics/ops engineering: https://getdataengineeringjobs.com/Веб-сайт мониторит открытые вакансии у десятков компаний по всему миру и отбирает те, что попадают под категорию дата инжиниринга, инфрастру

Народ, привет! 👋Я запустил агрегатор вакансий по data/analytics/ops engineering: https://getdataengineeringjobs.com/Веб-сайт мониторит открытые вакансии у десятков компаний по всему миру и отбирает те, что попадают под категорию дата инжиниринга, инфраструктуры и аналитики.Также в автоматическом режиме каждая отобранная вакансия появляется в телеграм-канале @dataeng_jobs, так что подписывайтесь, если вас интересуют предложения по работе со всего мира 🌎База компаний потихоньку пополняется, так что если не нашли какую-то компанию, то можете написать мне, я её добавлю для мониторинга!Все приятного вечера! 🍻

1 month назад @ t.me
Самый дорогой способ проверить идею — полгода её разрабатывать.Сначала проверьте спрос. Так сделали эти ребята:— Юра выбрал нишу, которую все считают скучной, но там уже платят. Начал с $100 в месяц, через год вышел примерно на $10K.— Денис один собрал AI-
Самый дорогой способ проверить идею — полгода её разрабатывать.Сначала проверьте спрос. Так сделали эти ребята:— Юра выбрал нишу, которую все считают скучной, но там уже платят. Начал с $100 в месяц, через год вышел примерно на $10K.— Денис один собрал AI-

Самый дорогой способ проверить идею — полгода её разрабатывать.Сначала проверьте спрос. Так сделали эти ребята:— Юра выбрал нишу, которую все считают скучной, но там уже платят. Начал с $100 в месяц, через год вышел примерно на $10K.— Денис один собрал AI-игру в Telegram. За первые полтора месяца ~$1 500.— Аня не пишет код, но запустила AI-бота для английского. Первые ~$200 пришли в первый же месяц.Масштабы разные, схема одна:1. Найти, за что люди уже платят.2. Быстро собрать MVP.3. Проверить спрос на живых пользователях.4. Только потом докручивать продукт.Это не рецепт «как точно сделать $10K». Гарантий вообще нет.Но так вы узнаете ответ за недели, а не за год.В @its_capitan разбирают таки…

1 month, 1 week назад @ t.me
Официальная документация по Python теперь доступна на русском языке: https://blog.python.org/2026/08/the-python-documentation-is-now-available-in-russian/
Официальная документация по Python теперь доступна на русском языке: https://blog.python.org/2026/08/the-python-documentation-is-now-available-in-russian/

Официальная документация по Python теперь доступна на русском языке: https://blog.python.org/2026/08/the-python-documentation-is-now-available-in-russian/

2 months, 3 weeks назад @ t.me
PostgreSQL 18 изнутриPostgres Pro выпустили новую версию книги про устройство PostgreSQL: PostgreSQL 18 изнутриВ настоящем издании учтены замечания читателей и исправлены опечатки, а также отражены такие новинки версии PostgreSQL 18, как поддержка асинхрон
PostgreSQL 18 изнутриPostgres Pro выпустили новую версию книги про устройство PostgreSQL: PostgreSQL 18 изнутриВ настоящем издании учтены замечания читателей и исправлены опечатки, а также отражены такие новинки версии PostgreSQL 18, как поддержка асинхрон

PostgreSQL 18 изнутриPostgres Pro выпустили новую версию книги про устройство PostgreSQL: PostgreSQL 18 изнутриВ настоящем издании учтены замечания читателей и исправлены опечатки, а также отражены такие новинки версии PostgreSQL 18, как поддержка асинхронного ввода-вывода, изменения в настройке автоочистки и появление оптимизации пропуска.Скачать по ссылке.

4 months назад @ t.me
На канале Елизаветы Осетинской вышло интересное интервью с создателем ClickHouse Алексеем Миловидовым: https://www.youtube.com/watch?v=FSGhaMmqWTA
На канале Елизаветы Осетинской вышло интересное интервью с создателем ClickHouse Алексеем Миловидовым: https://www.youtube.com/watch?v=FSGhaMmqWTA

На канале Елизаветы Осетинской вышло интересное интервью с создателем ClickHouse Алексеем Миловидовым: https://www.youtube.com/watch?v=FSGhaMmqWTA

4 months назад @ t.me
🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня
🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня

🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня без кода запустила AI-бота для изучения английского → первые ~$200 уже в 1 месяцРазные результаты. Разный масштаб. Но общие правила:1. не придумывать «гениальную идею», а брать существующий спрос2. делать простой MVP и быстро запускаться3. докручивать монетизацию и продукт по факту использованияРебята сделали всё без команды, без инвестиций, а самое главное — без ожидания «идеального момента». Да, не у всех получается сразу. И не у всех в…

5 months, 1 week назад @ t.me
🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня
🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня

🔥 Три разных человека. Три разных проекта. Один и тот же подход.— Юра взял «скучную» нишу с готовым спросом → сначала печальные $100/мес, через год уже ~$10K/мес— Денис сделал Telegram-игру в одиночку на основе AI → ~ $1500 за 1,5 месяца после запуска— Аня без кода запустила AI-бота для изучения английского → первые ~$200 уже в 1 месяцРазные результаты. Разный масштаб. Но общие правила:1. не придумывать «гениальную идею», а брать существующий спрос2. делать простой MVP и быстро запускаться3. докручивать монетизацию и продукт по факту использованияРебята сделали всё без команды, без инвестиций, а самое главное — без ожидания «идеального момента». Да, не у всех получается сразу. И не у всех в…

5 months, 1 week назад @ telegram.me
Приглашаем вас на совместный вебинар AXENIX и вендора BR Systems, посвященный XLTable — OLAP‑системе с широким функционалом для работы с данными ClickHouse и Trino и поддержкой протокола XMLA в Excel.Эксперты подробно расскажут об XLTable и его основных пр
Приглашаем вас на совместный вебинар AXENIX и вендора BR Systems, посвященный XLTable — OLAP‑системе с широким функционалом для работы с данными ClickHouse и Trino и поддержкой протокола XMLA в Excel.Эксперты подробно расскажут об XLTable и его основных пр Приглашаем вас на совместный вебинар AXENIX и вендора BR Systems, посвященный XLTable — OLAP‑системе с широким функционалом для работы с данными ClickHouse и Trino и поддержкой протокола XMLA в Excel.Эксперты подробно расскажут об XLTable и его основных пр

Приглашаем вас на совместный вебинар AXENIX и вендора BR Systems, посвященный XLTable — OLAP‑системе с широким функционалом для работы с данными ClickHouse и Trino и поддержкой протокола XMLA в Excel.Эксперты подробно расскажут об XLTable и его основных преимуществах: быстроте внедрения, отсутствии дублирования данных, снижении затрат на TCO, бессрочной лицензии и других.В рамках вебинара вас ждет:🔸Обзор рынка OLAP-систем🔸Демо системы XL Table от BR Systems🔸Разбор реальных кейсов крупных компанийТакже у вас будет возможность задать свои вопросы.Для участия необходимо зарегистрироваться на сайте. На указанную вами почту придет ссылка на вебинар. Подключайтесь к нам 21 мая в 16:00.До встречи!…

6 months, 1 week назад @ t.me
PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга неб
PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга неб

PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга небольшая и без лишней воды, сразу приступает к делу без длительных прелюдий и философских размышлений.Рекомендую 🍻

6 months, 3 weeks назад @ telegram.me
PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга неб
PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга неб

PostgreSQL 16: Оптимизация запросов 🖥Вчера случайно заметил, что на Postgres Pro появилась новая книга PostgreSQL 16: Оптимизация запросов.Книга основана на курсе лекций про оптимизацию, который, к слову, также доступен бесплатно.Понравилось, что книга небольшая и без лишней воды, сразу приступает к делу без длительных прелюдий и философских размышлений.Рекомендую 🍻

6 months, 3 weeks назад @ t.me
Отказоустойчивость железа достигается через добавление избыточных компонентов, например, в системе может быть несколько жестких дисков, подключенных в режиме RAID-массива. В случае распределённых систем, запросы могут был равномерно распределены между неск
Отказоустойчивость железа достигается через добавление избыточных компонентов, например, в системе может быть несколько жестких дисков, подключенных в режиме RAID-массива. В случае распределённых систем, запросы могут был равномерно распределены между неск

Отказоустойчивость железа достигается через добавление избыточных компонентов, например, в системе может быть несколько жестких дисков, подключенных в режиме RAID-массива. В случае распределённых систем, запросы могут был равномерно распределены между несколькими независимыми машинами внутри дата-центра. Случается и так, что требуется отказоустойчивость на уровне дата-центра, тогда машины распределяют по нескольким физически независимым точкам (например, разные регионы AWS). Важно придерживаться здравого смысла и понимать какого уровня отказоустойчивости вам будет достаточно.Отказоустойчивость кода чуть сложнее. В первую очередь потому что один и тот же код может исполняться на большом пуле…

6 months, 3 weeks назад @ t.me
Designing Data-Intensive ApplicationsГлава 2. Defining Nonfunctional RequirementsВторая глава книги посвящена нефункциональным требованиям к разрабатываемым нами системам. Под нефункциональными требованиями автор подразумевает:- Производительность (Perform
Designing Data-Intensive ApplicationsГлава 2. Defining Nonfunctional RequirementsВторая глава книги посвящена нефункциональным требованиям к разрабатываемым нами системам. Под нефункциональными требованиями автор подразумевает:- Производительность (Perform

Designing Data-Intensive ApplicationsГлава 2. Defining Nonfunctional RequirementsВторая глава книги посвящена нефункциональным требованиям к разрабатываемым нами системам. Под нефункциональными требованиями автор подразумевает:- Производительность (Performance)- Надёжность (Reliability) и отказоустойчивость (Fault Tolerance)- Масштабирование (Scalability)- Поддержка (Maintainability)Система может быть полностью корректна с точки зрения функциональных (т.н. бизнес) требований, но неудобна в использования из-за проблем с надёжностью (потеря данных), производительностью (частые “зависания” из-за нагрузки). Поэтому нефункциональным требованиям также необходимо уделять внимание.Мартин во второй …

6 months, 3 weeks назад @ t.me
Инжиниринг Данных Инжиниринг Данных
последний пост 59 минут назад
В первый день недели сожрал все токены и работа стоит🧑‍🌾
В первый день недели сожрал все токены и работа стоит🧑‍🌾 В первый день недели сожрал все токены и работа стоит🧑‍🌾

В первый день недели сожрал все токены и работа стоит🧑‍🌾

59 минут назад @ t.me
Open Source фреймворк для создания BI приложений через агентов AIhttps://github.com/holistics/anfra
Open Source фреймворк для создания BI приложений через агентов AIhttps://github.com/holistics/anfra Open Source фреймворк для создания BI приложений через агентов AIhttps://github.com/holistics/anfra

Open Source фреймворк для создания BI приложений через агентов AIhttps://github.com/holistics/anfra

8 часов назад @ t.me
Добавил секцию про “лидерство”The Manager’s Path: A Guide for Tech Leaders Navigating Growth and Change — книга Камиллы Фурнье (Camille Fournier), O’Reilly, 2017. Автор прошла путь от инженера до CTO в стартапе Rent the Runway и описала, что меняется на ка
Добавил секцию про “лидерство”The Manager’s Path: A Guide for Tech Leaders Navigating Growth and Change — книга Камиллы Фурнье (Camille Fournier), O’Reilly, 2017. Автор прошла путь от инженера до CTO в стартапе Rent the Runway и описала, что меняется на ка

Добавил секцию про “лидерство”The Manager’s Path: A Guide for Tech Leaders Navigating Growth and Change — книга Камиллы Фурнье (Camille Fournier), O’Reilly, 2017. Автор прошла путь от инженера до CTO в стартапе Rent the Runway и описала, что меняется на каждой ступени этого пути. В книге введение и девять глав: от роли подчинённого и ментора до старшего руководителя и культуры инженерной команды.Staff Engineer: Leadership beyond the management track — книга Уилла Ларсона (Will Larson), вышла в 2021 году. Ларсон руководил инженерией в Stripe, Uber и Calm и собрал на сайте StaffEng интервью с инженерами уровня Staff+. Книга отвечает на вопрос, что делает инженер после уровня Senior, если он н…

22 часа назад @ t.me
Claude Workflow, который делает детальный summary по книге. С ним я переписал часть книг. Токенов есть очень много, но качество кратно возросло.Добавил:• Теперь целая книга Design Data Intensive Application 2nd release• Analytics Engineering with SQL and d
Claude Workflow, который делает детальный summary по книге. С ним я переписал часть книг. Токенов есть очень много, но качество кратно возросло.Добавил:• Теперь целая книга Design Data Intensive Application 2nd release• Analytics Engineering with SQL and d Claude Workflow, который делает детальный summary по книге. С ним я переписал часть книг. Токенов есть очень много, но качество кратно возросло.Добавил:• Теперь целая книга Design Data Intensive Application 2nd release• Analytics Engineering with SQL and d

Claude Workflow, который делает детальный summary по книге. С ним я переписал часть книг. Токенов есть очень много, но качество кратно возросло.Добавил:• Теперь целая книга Design Data Intensive Application 2nd release• Analytics Engineering with SQL and dbt• Redefining Data Engineering with AI (early release)• Claude Code: Up and Running (early release)• Claude AI BibleВ процессе добавить книги про Staff Engineer, Engineering Leadership, Managers и тп.

1 day, 7 hours назад @ t.me
Одна из самых сложных задач в космических стартапах — это продажи.Любой инвестор вас спросит первым делом про REVENUE и CUSTOMERS. Проблема космоса в том, что вам надо убедить людей инвестировать миллионы долларов в идею. Деньги пойдут на создание прототип
Одна из самых сложных задач в космических стартапах — это продажи.Любой инвестор вас спросит первым делом про REVENUE и CUSTOMERS. Проблема космоса в том, что вам надо убедить людей инвестировать миллионы долларов в идею. Деньги пойдут на создание прототип

Одна из самых сложных задач в космических стартапах — это продажи.Любой инвестор вас спросит первым делом про REVENUE и CUSTOMERS. Проблема космоса в том, что вам надо убедить людей инвестировать миллионы долларов в идею. Деньги пойдут на создание прототипа, который можно протестировать в космосе.Очевидно, если основатели выходцы из SpaceX или других космических компаний, им дадут деньги более охотно.Для космических стартапов очень простая валюта:• Technology Readiness Level (TRL) — насколько зрелая ваша технология, от идеи на бумаге (TRL 1) до системы, которая уже отработала в реальной миссии (TRL 9). Software можно завайбкодить до TRL 4–5, а это уже серьёзный аргумент. С железом будет сло…

2 days, 2 hours назад @ t.me
Добавил книгу Analytics Engineering with dbt https://dataengineer.ru/book-summaries/engineering/analytics-engineering-with-sql-and-dbt/01-analytics-engineering/И теперь для каждой книге будет Epub.
Добавил книгу Analytics Engineering with dbt https://dataengineer.ru/book-summaries/engineering/analytics-engineering-with-sql-and-dbt/01-analytics-engineering/И теперь для каждой книге будет Epub. Добавил книгу Analytics Engineering with dbt https://dataengineer.ru/book-summaries/engineering/analytics-engineering-with-sql-and-dbt/01-analytics-engineering/И теперь для каждой книге будет Epub.

Добавил книгу Analytics Engineering with dbt https://dataengineer.ru/book-summaries/engineering/analytics-engineering-with-sql-and-dbt/01-analytics-engineering/И теперь для каждой книге будет Epub.

2 days, 5 hours назад @ t.me
Вчера Starship от SpaceX вернулся первый раз на посадочную станцию. Для космической индустрии это огромный шаг вперед. Очень классно описали происходящее здесь https://t.me/starbasepost/5103
Вчера Starship от SpaceX вернулся первый раз на посадочную станцию. Для космической индустрии это огромный шаг вперед. Очень классно описали происходящее здесь https://t.me/starbasepost/5103

Вчера Starship от SpaceX вернулся первый раз на посадочную станцию. Для космической индустрии это огромный шаг вперед. Очень классно описали происходящее здесь https://t.me/starbasepost/5103

2 days, 7 hours назад @ t.me
Добавил интересную и важную книгу про data quality (качество данных) https://dataengineer.ru/book-summaries/engineering/data-quality-fundamentals/ Так же добавил вложенные skills по улучшению русского языка. Выставил target по размеру книги на уровне 30% о
Добавил интересную и важную книгу про data quality (качество данных) https://dataengineer.ru/book-summaries/engineering/data-quality-fundamentals/ Так же добавил вложенные skills по улучшению русского языка. Выставил target по размеру книги на уровне 30% о Добавил интересную и важную книгу про data quality (качество данных) https://dataengineer.ru/book-summaries/engineering/data-quality-fundamentals/ Так же добавил вложенные skills по улучшению русского языка. Выставил target по размеру книги на уровне 30% о

Добавил интересную и важную книгу про data quality (качество данных) https://dataengineer.ru/book-summaries/engineering/data-quality-fundamentals/ Так же добавил вложенные skills по улучшению русского языка. Выставил target по размеру книги на уровне 30% от размера и упор на работающие hands-on if applicable.Из минусов за 3 дня съел токены у двух Claude Max подписок.

4 days, 2 hours назад @ t.me
Но зато отлично считает $ в Snowflake.Мы строим Conversational Analytics на Omni BI и я решил добавить модель данных и контекст для data infra - Snowflalke, Fivetran, Azure.
Но зато отлично считает $ в Snowflake.Мы строим Conversational Analytics на Omni BI и я решил добавить модель данных и контекст для data infra - Snowflalke, Fivetran, Azure. Но зато отлично считает $ в Snowflake.Мы строим Conversational Analytics на Omni BI и я решил добавить модель данных и контекст для data infra - Snowflalke, Fivetran, Azure.

Но зато отлично считает $ в Snowflake.Мы строим Conversational Analytics на Omni BI и я решил добавить модель данных и контекст для data infra - Snowflalke, Fivetran, Azure.

4 days, 3 hours назад @ t.me
Тема перевода оказалась намного глубже.PS а я Яндекс все там верифицирует что-то и не работает 😃️
Тема перевода оказалась намного глубже.PS а я Яндекс все там верифицирует что-то и не работает 😃️ Тема перевода оказалась намного глубже.PS а я Яндекс все там верифицирует что-то и не работает 😃️

Тема перевода оказалась намного глубже.PS а я Яндекс все там верифицирует что-то и не работает 😃️

4 days, 4 hours назад @ t.me
Какую штуку сегодня попробовал. Claude много чего умеет, но русский у него так себе. Кстати это я прочитал в summary AI Engineering книги, которую Claude перевел. Будем догоняться отечественными моделями🙂
Какую штуку сегодня попробовал. Claude много чего умеет, но русский у него так себе. Кстати это я прочитал в summary AI Engineering книги, которую Claude перевел. Будем догоняться отечественными моделями🙂 Какую штуку сегодня попробовал. Claude много чего умеет, но русский у него так себе. Кстати это я прочитал в summary AI Engineering книги, которую Claude перевел. Будем догоняться отечественными моделями🙂

Какую штуку сегодня попробовал. Claude много чего умеет, но русский у него так себе. Кстати это я прочитал в summary AI Engineering книги, которую Claude перевел. Будем догоняться отечественными моделями🙂

4 days, 19 hours назад @ t.me
Очень мне понравилось использовать AI для создания нужного и короткого контента, который именно для задач аналитики и инжиниринга данных.И наконец я реализовал свой давний план - добавить упражнения к каждой главе The Data Warehouse Toolkit, Ralph Kimball.
Очень мне понравилось использовать AI для создания нужного и короткого контента, который именно для задач аналитики и инжиниринга данных.И наконец я реализовал свой давний план - добавить упражнения к каждой главе The Data Warehouse Toolkit, Ralph Kimball. Очень мне понравилось использовать AI для создания нужного и короткого контента, который именно для задач аналитики и инжиниринга данных.И наконец я реализовал свой давний план - добавить упражнения к каждой главе The Data Warehouse Toolkit, Ralph Kimball.

Очень мне понравилось использовать AI для создания нужного и короткого контента, который именно для задач аналитики и инжиниринга данных.И наконец я реализовал свой давний план - добавить упражнения к каждой главе The Data Warehouse Toolkit, Ralph Kimball. И еще добавил отдельный курс по Dimensional Modelling. А в курс по Python добавил пару глав про работу с API, JSON, PyArrow, Polars, DuckDB.PS Я очень доволен результатом, но это максимальны план Claude и он за день съел лимит.Я не планирую добавлять очень много книг, только самый популярные и которые на слуху.В комментариях скиньте хорошие. Если ссылку, то пишите как markdown/code или просто название и напишите, почему.

5 days, 5 hours назад @ t.me
Добавил курс про базовый минимум git https://dataengineer.ru/practice/git/
Добавил курс про базовый минимум git https://dataengineer.ru/practice/git/

Добавил курс про базовый минимум git https://dataengineer.ru/practice/git/

5 days, 9 hours назад @ t.me
Добавил конспект лучшей книги по созданию продукта. Сейчас это особенно актуально, ведь от вас ждут не кода, а взаимодействия с бизнесом, понимание продукта и помощи с его измерением и развитием. В этой книге можете подхватить классных идей для hiring mana
Добавил конспект лучшей книги по созданию продукта. Сейчас это особенно актуально, ведь от вас ждут не кода, а взаимодействия с бизнесом, понимание продукта и помощи с его измерением и развитием. В этой книге можете подхватить классных идей для hiring mana

Добавил конспект лучшей книги по созданию продукта. Сейчас это особенно актуально, ведь от вас ждут не кода, а взаимодействия с бизнесом, понимание продукта и помощи с его измерением и развитием. В этой книге можете подхватить классных идей для hiring manager, да и вообще посмотреть на аналитическую работу через призму потребностей бизнеса.https://dataengineer.ru/book-summaries/business/escaping-the-build-trap/

5 days, 18 hours назад @ t.me
Еще не пятница, но можно уже готовить пятничный релиз!
Еще не пятница, но можно уже готовить пятничный релиз!

Еще не пятница, но можно уже готовить пятничный релиз!

6 days назад @ t.me
Left Join Left Join
последний пост 1 day, 14 hours назад
Data Intelligence Engineer: новая роль в дата-сфере?Неизбежное следствие проникновения ИИ во все профессии и сферы жизни — появление отдельной категории специалистов, которые за этот ИИ отвечают.Всевозможными экспертами по внедрению уже никого не удивишь,
Data Intelligence Engineer: новая роль в дата-сфере?Неизбежное следствие проникновения ИИ во все профессии и сферы жизни — появление отдельной категории специалистов, которые за этот ИИ отвечают.Всевозможными экспертами по внедрению уже никого не удивишь,

Data Intelligence Engineer: новая роль в дата-сфере?Неизбежное следствие проникновения ИИ во все профессии и сферы жизни — появление отдельной категории специалистов, которые за этот ИИ отвечают.Всевозможными экспертами по внедрению уже никого не удивишь, но можно попробовать представить, какие еще роли могут возникнуть со временем. Например, один из инженеров облачной платформы для аналитики MotherDuck предсказал, что скоро дата-командам могут понадобиться Data Intelligence Engineers. И что они будут делать? 🔵Погружать ИИ в контекст конкретной компании или команды: объяснять, как у них принято считать метрики, в какой из десятка почти одинаковых таблиц лежат актуальные данные и как вообще …

1 day, 14 hours назад @ t.me
Стоит ли верить бенчмаркам? Каждый релиз новой версии БД (да и любого другого инструмента) всегда сопровождается скринами бенчмарков с доказательствами, насколько она стала лучше. Это вроде бы объективный, измеримый показатель, но даже ему полностью доверя
Стоит ли верить бенчмаркам? Каждый релиз новой версии БД (да и любого другого инструмента) всегда сопровождается скринами бенчмарков с доказательствами, насколько она стала лучше. Это вроде бы объективный, измеримый показатель, но даже ему полностью доверя

Стоит ли верить бенчмаркам? Каждый релиз новой версии БД (да и любого другого инструмента) всегда сопровождается скринами бенчмарков с доказательствами, насколько она стала лучше. Это вроде бы объективный, измеримый показатель, но даже ему полностью доверять нельзя. Разработчики максимально оптимизируют выполнение запросов, чтобы получить хорошие результаты — даже если на практике, в реальной работе, эти оптимизации могут быть бесполезны или вообще вредны. Из-за этого некоторые бенчмарки теряют смысл и перестают использоваться, им на смену приходят новые, разработчики адаптируются и под них, и весь этот цикл повторяется. Ситуация становится еще интереснее благодаря ИИ, который может довести…

4 days, 14 hours назад @ t.me
Релиз Claude Data: ИИ-инструмент для аналитики доступен для всех платных пользователей Anthropic опять нагенерировали новостей — например, представили Fable/Mythos 5.2. Но нас интересует другой их релиз, поскромнее.🔜 В октябре они показали Claude Dashboard
Релиз Claude Data: ИИ-инструмент для аналитики доступен для всех платных пользователей Anthropic опять нагенерировали новостей — например, представили Fable/Mythos 5.2. Но нас интересует другой их релиз, поскромнее.🔜 В октябре они показали Claude Dashboard

Релиз Claude Data: ИИ-инструмент для аналитики доступен для всех платных пользователей Anthropic опять нагенерировали новостей — например, представили Fable/Mythos 5.2. Но нас интересует другой их релиз, поскромнее.🔜 В октябре они показали Claude Dashboards. Через месяц он вышел из беты, а заодно получил новое имя: Claude Data, потому что «работа с данными для компаний — это больше, чем создание дашбордов».Дашбордами от Claude можно делиться с коллегами, настраивать оформление, отслеживать историю изменений. Из интересного можно отметить две детали: 🔵Claude Data позволяет задавать сертифицированные определения метрик, чтобы все в компании использовали одинаковые запросы и методы расчета. На…

6 days, 15 hours назад @ t.me
Что нового в Apache Airflow 3.4.0? В конце прошлой недели Apache выкатили новую версию Airflow, где представили несколько интересных изменений:1️⃣Появилась нативная поддержка циклов — Task Loops, которые могут повторяться либо до выполнения определенного у
Что нового в Apache Airflow 3.4.0? В конце прошлой недели Apache выкатили новую версию Airflow, где представили несколько интересных изменений:1️⃣Появилась нативная поддержка циклов — Task Loops, которые могут повторяться либо до выполнения определенного у

Что нового в Apache Airflow 3.4.0? В конце прошлой недели Apache выкатили новую версию Airflow, где представили несколько интересных изменений:1️⃣Появилась нативная поддержка циклов — Task Loops, которые могут повторяться либо до выполнения определенного условия, либо некое заранее заданное максимальное число итераций. Каждая итерация строится на результатах предыдущей.Прежде чем двигаться дальше, стоит прояснить один момент: «Как в DAG могут быть циклы, если DAG — это Directed Acyclic Graph (направленный ациклический граф)?» Ответ: очень осторожно. По сути, никаких циклических зависимостей не возникает, задачи внутри DAG по-прежнему образуют граф без циклов. Повторение задач реализуется ис…

1 week, 1 day назад @ t.me
Наступила пятница, и это значит, что пора подводить итоги нашего розыгрыша билетов на Матемаркетинг'26!Рандомайзер постановил, что: 🔵Офлайн-билет достается @gottameow🔵Онлайн-доступ — @Lidialit и @GofromchuСкоро с вами свяжутся организаторы конференции и ра
Наступила пятница, и это значит, что пора подводить итоги нашего розыгрыша билетов на Матемаркетинг'26!Рандомайзер постановил, что: 🔵Офлайн-билет достается @gottameow🔵Онлайн-доступ — @Lidialit и @GofromchuСкоро с вами свяжутся организаторы конференции и ра

Наступила пятница, и это значит, что пора подводить итоги нашего розыгрыша билетов на Матемаркетинг'26!Рандомайзер постановил, что: 🔵Офлайн-билет достается @gottameow🔵Онлайн-доступ — @Lidialit и @GofromchuСкоро с вами свяжутся организаторы конференции и расскажут про дальнейшие шаги. Благодарим всех, кто принял участие, и поздравляем победителей! До встречи на Матемаркетинге🔥

1 week, 4 days назад @ t.me
Напоминаем про две важных вещи: 1️⃣ 26-27 ноября пройдет Матемаркетинг — конференция по маркетинговой и продуктовой аналитике. 2000+ участников, 100+ докладов про данные, метрики, инжиниринг и искусственный интеллект.2️⃣ Вы можете попасть туда (или посмотр
Напоминаем про две важных вещи: 1️⃣ 26-27 ноября пройдет Матемаркетинг — конференция по маркетинговой и продуктовой аналитике. 2000+ участников, 100+ докладов про данные, метрики, инжиниринг и искусственный интеллект.2️⃣ Вы можете попасть туда (или посмотр

Напоминаем про две важных вещи: 1️⃣ 26-27 ноября пройдет Матемаркетинг — конференция по маркетинговой и продуктовой аналитике. 2000+ участников, 100+ докладов про данные, метрики, инжиниринг и искусственный интеллект.2️⃣ Вы можете попасть туда (или посмотреть прямой эфир онлайн) бесплатно, если примете участие в нашем розыгрыше. Условия — в посте. Итоги подводим уже в эту пятницу.

1 week, 6 days назад @ t.me
ИИ без страха: пять дней, чтобы сделать первые шагиGlowbyte вместе с DataYoga приглашают на бесплатный онлайн-марафон об адаптации к ИИ в российских компаниях.ИИ берёт на себя рутину, и роли меняются. Аналитикам важнее ставить задачи и проверять результаты
ИИ без страха: пять дней, чтобы сделать первые шагиGlowbyte вместе с DataYoga приглашают на бесплатный онлайн-марафон об адаптации к ИИ в российских компаниях.ИИ берёт на себя рутину, и роли меняются. Аналитикам важнее ставить задачи и проверять результаты ИИ без страха: пять дней, чтобы сделать первые шагиGlowbyte вместе с DataYoga приглашают на бесплатный онлайн-марафон об адаптации к ИИ в российских компаниях.ИИ берёт на себя рутину, и роли меняются. Аналитикам важнее ставить задачи и проверять результаты

ИИ без страха: пять дней, чтобы сделать первые шагиGlowbyte вместе с DataYoga приглашают на бесплатный онлайн-марафон об адаптации к ИИ в российских компаниях.ИИ берёт на себя рутину, и роли меняются. Аналитикам важнее ставить задачи и проверять результаты, руководителям важнее ориентироваться в сценариях, рисках и сопротивлении сотрудников. На марафоне разберут, как в этом не потеряться.9–13 ноября, онлайн. Каждый день: одна тема, эфир с экспертами из российских компаний-лидеров, которые уже работают с ИИ, и материалы на страницах марафона: практика, шаблоны и чек-листы.Вы узнаете:🔵какие задачи стоит отдавать ИИ, а какие требуют других решений;🔵как отличать убедительный ответ ИИ от провере…

2 weeks назад @ t.me
OcupySaaS: протест инженеров против ИТ-индустрииДискуссия про отнимающий работу ИИ получила неожиданное (или, наоборот, вполне ожидаемое?) развитие: уволенные инженеры скооперировались и начали делать опен-сорсные аналоги популярных платформ. Они собирают
OcupySaaS: протест инженеров против ИТ-индустрииДискуссия про отнимающий работу ИИ получила неожиданное (или, наоборот, вполне ожидаемое?) развитие: уволенные инженеры скооперировались и начали делать опен-сорсные аналоги популярных платформ. Они собирают

OcupySaaS: протест инженеров против ИТ-индустрииДискуссия про отнимающий работу ИИ получила неожиданное (или, наоборот, вполне ожидаемое?) развитие: уволенные инженеры скооперировались и начали делать опен-сорсные аналоги популярных платформ. Они собирают данные из публичных документов, на их основе ИИ-агенты пишут код, который затем оценивают и тестируют люди. Команда проекта подчеркивает, что они не декомпилируют чужой софт, а все делают с нуля по принципу clean room. Даже если к разработке присоединяются бывшие сотрудники компаний, для чьих продуктов OcupySaaS создает аналог, они должны опираться только на данные из открытых источников, а не сливать корпоративные тайны.Продуктов у команд…

2 weeks, 1 day назад @ t.me
Разыгрываем 3 билета на Матемаркетинг’26!🔵 Как ИИ меняет работу аналитиков, маркетологов и продактов?🔵 Как посчитать, сколько людей на самом деле используют ИИ в работе в вашей компании?🔵 Как контролировать и проверять работу ИИ и можно ли ему вообще дове
Разыгрываем 3 билета на Матемаркетинг’26!🔵 Как ИИ меняет работу аналитиков, маркетологов и продактов?🔵 Как посчитать, сколько людей на самом деле используют ИИ в работе в вашей компании?🔵  Как контролировать и проверять работу ИИ и можно ли ему вообще дове Разыгрываем 3 билета на Матемаркетинг’26!🔵 Как ИИ меняет работу аналитиков, маркетологов и продактов?🔵 Как посчитать, сколько людей на самом деле используют ИИ в работе в вашей компании?🔵 Как контролировать и проверять работу ИИ и можно ли ему вообще дове

Разыгрываем 3 билета на Матемаркетинг’26!🔵 Как ИИ меняет работу аналитиков, маркетологов и продактов?🔵 Как посчитать, сколько людей на самом деле используют ИИ в работе в вашей компании?🔵 Как контролировать и проверять работу ИИ и можно ли ему вообще доверять?Эти и другие вопросы обсудят на Матемаркетинге’26. Это одна из крупнейших технических конференций для аналитиков, продактов и маркетологов в РФ. В этом году посетителей ждут 100+ докладов, мастер-классов и разборов кейсов от спикеров из VK, Avito Tech, Сбера, Magnit Tech, ИТ-холдинга Т1, UIS, Лемана Тех, UX Rocket и других компаний.Конференция пройдет 26 и 27 ноября в Москве, онлайн-день — 17 ноября. Подробности смотрите на сайте.🔜 Бил…

2 weeks, 4 days назад @ t.me
Датавиз и классовое неравенство Разница между состоянием какого-нибудь Джеффа Безоса и обычного человека со средней зарплатой настолько огромна, что словами ее передать не получается. Зато можно попробовать это сделать с помощью датаиза. Депрессивные визуа
Датавиз и классовое неравенство Разница между состоянием какого-нибудь Джеффа Безоса и обычного человека со средней зарплатой настолько огромна, что словами ее передать не получается. Зато можно попробовать это сделать с помощью датаиза. Депрессивные визуа

Датавиз и классовое неравенство Разница между состоянием какого-нибудь Джеффа Безоса и обычного человека со средней зарплатой настолько огромна, что словами ее передать не получается. Зато можно попробовать это сделать с помощью датаиза. Депрессивные визуализации все растущего разрыва между богатыми и бедными — это неустаревающая классика. Инфографик на эту тему уже немало и рисовать не перестанут, наверное, никогда, но смотреть на них всегда интересно. 🔜 Сайт dreamagainusa — очередной пример, который показывает, как недостижимо далек даже относительно успешный и состоятельный американец от настоящего богатства. Чтобы увидеть вершину графика, где расположился 1% самых богатых людей страны, …

2 weeks, 5 days назад @ t.me
Как SQLite учили работать в распределенных системахSQLite — пример для нас всех. Это маленькая и легкая СУБД, которая создавалась изначально для небольших проектов и мобильных приложений, но потенциал у нее огромный и использовать ее можно где угодно, было
Как SQLite учили работать в распределенных системахSQLite — пример для нас всех. Это маленькая и легкая СУБД, которая создавалась изначально для небольших проектов и мобильных приложений, но потенциал у нее огромный и использовать ее можно где угодно, было

Как SQLite учили работать в распределенных системахSQLite — пример для нас всех. Это маленькая и легкая СУБД, которая создавалась изначально для небольших проектов и мобильных приложений, но потенциал у нее огромный и использовать ее можно где угодно, было бы желание. Например, в распределенных системах. Автор rqlite вспомнил, как создал свой проект и что было после него. 🔵В 2014 году ему понадобилось создать небольшое реляционное хранилище для кластерной системы. Он решил взять SQLite и прикрутить к ней протокол консенсуса Raft. В это системе В кластере был лидер, через которого новые записи принимались и реплицировались на остальные узлы. Запись должно было принять большинство, если какой…

3 weeks, 1 day назад @ t.me
20 лет отношений через призму данныхЕсли бы вам нужно было на графиках отобразить свою жизнь, как бы выглядел ваш дашборд? В этом посте от 2014 года автор показывает жизнь как таблицу, где каждая клеточка — это год, месяц или неделя. Пост старй, вы наверня
20 лет отношений через призму данныхЕсли бы вам нужно было на графиках отобразить свою жизнь, как бы выглядел ваш дашборд? В этом посте от 2014 года автор показывает жизнь как таблицу, где каждая клеточка — это год, месяц или неделя. Пост старй, вы наверня

20 лет отношений через призму данныхЕсли бы вам нужно было на графиках отобразить свою жизнь, как бы выглядел ваш дашборд? В этом посте от 2014 года автор показывает жизнь как таблицу, где каждая клеточка — это год, месяц или неделя. Пост старй, вы наверняка видели раньше эти таблички хотя бы раз. Один разработчик и инженер тоже их видел, и они ему не понравились. Он решил сделать свою версию, отражающую не число прожитых дней, а то, чем они были наполнены: эмоциями и общением с людьми.🔵Он собрал историю чатов и активности из разных соцсетей и мессенджеров за 20 лет, очистил от совсем уж бессмысленных сообщений и классифицировал: с кем разговаривал, о чем, какая была эмоциональная окраска у…

3 weeks, 4 days назад @ t.me
Clickhouse на больших объемах данных: опыт основателя TinybirdTinybird — аналитическая платформа для разработчиков. Один из ее создателей поделился опытом, как он развернул и 5 лет поддерживал кластер Clickhouse, где хранились и обрабатывались петабайты да
Clickhouse на больших объемах данных: опыт основателя TinybirdTinybird — аналитическая платформа для разработчиков. Один из ее создателей поделился опытом, как он развернул и 5 лет поддерживал кластер Clickhouse, где хранились и обрабатывались петабайты да

Clickhouse на больших объемах данных: опыт основателя TinybirdTinybird — аналитическая платформа для разработчиков. Один из ее создателей поделился опытом, как он развернул и 5 лет поддерживал кластер Clickhouse, где хранились и обрабатывались петабайты данных, и не сошел с ума. В двух постах (первый, второй) он рассказал про архитектуру, хранение и загрузку данных, обновление и тестирование. Несколько любопытных мыслей:🔵Традиционный подход к работе с большими данными предполагает деление кластера на шарды, но автор считает, что с этим лучше не спешить и не усложнять архитектуру. Tinybirds долго обходились без шардирования: увеличивали мощность отдельных серверов и добавляли реплики, когда …

3 weeks, 6 days назад @ t.me
PostgreSQL 19 откладывается на ноябрь Новая версия должна была выйти в конце сентября/начале октября, но дату релиза сдвинули на 19 ноября. Также решили откатить почти 10 ранее анонсированных функций. Их перенесут, скорее всего, в PostgreSQL 20.Почему так
PostgreSQL 19 откладывается на ноябрь Новая версия должна была выйти в конце сентября/начале октября, но дату релиза сдвинули на 19 ноября. Также решили откатить почти 10 ранее анонсированных функций. Их перенесут, скорее всего, в PostgreSQL 20.Почему так

PostgreSQL 19 откладывается на ноябрь Новая версия должна была выйти в конце сентября/начале октября, но дату релиза сдвинули на 19 ноября. Также решили откатить почти 10 ранее анонсированных функций. Их перенесут, скорее всего, в PostgreSQL 20.Почему так получилось, рассказал у себя в блоге один из главных контрибьюторов проекта Питер Айзентраут. Частично, конечно, в сложившейся ситуации можно обвинить человеческий фактор и банальные ошибки в коде, но повлияли и другие причины: 🔵ИИ нашел множество багов — намного больше, чем тестировщики выловили бы своими силами. Среди них были и серьезные архитектурные дефекты, и пограничные случаи, которые постепенно всплывали бы на протяжении лет после…

4 weeks, 1 day назад @ t.me
До Claude и ChatGPTПару лет назад ИИ не мог посчитать, сколько букв a в strawberry, а теперь решает математические задачи тысячелетия — а что будет дальше, и представить сложно. Хотя некоторые представили и предсказали, что он нас всех уничтожит к 2030 год
До Claude и ChatGPTПару лет назад ИИ не мог посчитать, сколько букв a в strawberry, а теперь решает математические задачи тысячелетия — а что будет дальше, и представить сложно. Хотя некоторые представили и предсказали, что он нас всех уничтожит к 2030 год До Claude и ChatGPTПару лет назад ИИ не мог посчитать, сколько букв a в strawberry, а теперь решает математические задачи тысячелетия — а что будет дальше, и представить сложно. Хотя некоторые представили и предсказали, что он нас всех уничтожит к 2030 год

До Claude и ChatGPTПару лет назад ИИ не мог посчитать, сколько букв a в strawberry, а теперь решает математические задачи тысячелетия — а что будет дальше, и представить сложно. Хотя некоторые представили и предсказали, что он нас всех уничтожит к 2030 году. И чем быстрее развиваются современные технологии, Тем интереснее сравнить их с ранними попытками создать искусственный интеллект. Internet Archive сделали целую подборку старых программ с прото-ИИ: чат-ботов, демо-моделей, игр. Есть даже прародительница Sims и «Хоббит», где персонажи действуют самостоятельно и настолько непредсказуемо, что могут даже запороть игроку прохождение. Конечно, этот ИИ ужасно далек от того, что есть сейчас, и …

1 month назад @ t.me
SQLite на практике SQLite на практике
последний пост None
Datalytics Datalytics
последний пост 16 часов назад
Одна задача, три уровня решения: где заканчивается джун и начинается ведущий аналитикРазница между аналитиками больше не проходит по стажу и знанию инструментов. Она в том, какие решения специалист принимает сам: как формулирует вопрос бизнеса, какую метри
Одна задача, три уровня решения: где заканчивается джун и начинается ведущий аналитикРазница между аналитиками больше не проходит по стажу и знанию инструментов. Она в том, какие решения специалист принимает сам: как формулирует вопрос бизнеса, какую метри

Одна задача, три уровня решения: где заканчивается джун и начинается ведущий аналитикРазница между аналитиками больше не проходит по стажу и знанию инструментов. Она в том, какие решения специалист принимает сам: как формулирует вопрос бизнеса, какую метрику выбирает, как находит ошибку в выводе ИИ.Как это выглядит на одной задаче — разберем на бесплатном вебинаре karpovꓸcourses «ИИ считает за джуна: что нужно уметь аналитику, чтобы расти в 2026».На эфире:— задача из практики, решенный на трех уровнях;— что работодатели проверяют вместо стажа и грейда;— какую часть работы джуна уже делает ИИ и на чем строить рост;— навыки, за которые в 2026 платят, вместо общих советов.Ведет Анна Климова — …

16 часов назад @ t.me
Часть работы аналитика уже можно передать ИИ-агентам, а освободившееся время потратить на гипотезы и интерпретацию. Как это устроить, разберут на AI Analytics Week — бесплатном онлайн-интенсиве Школы анализа данных Яндекса, который пройдёт с 23 по 27 ноябр
Часть работы аналитика уже можно передать ИИ-агентам, а освободившееся время потратить на гипотезы и интерпретацию. Как это устроить, разберут на AI Analytics Week — бесплатном онлайн-интенсиве Школы анализа данных Яндекса, который пройдёт с 23 по 27 ноябр Часть работы аналитика уже можно передать ИИ-агентам, а освободившееся время потратить на гипотезы и интерпретацию. Как это устроить, разберут на AI Analytics Week — бесплатном онлайн-интенсиве Школы анализа данных Яндекса, который пройдёт с 23 по 27 ноябр

Часть работы аналитика уже можно передать ИИ-агентам, а освободившееся время потратить на гипотезы и интерпретацию. Как это устроить, разберут на AI Analytics Week — бесплатном онлайн-интенсиве Школы анализа данных Яндекса, который пройдёт с 23 по 27 ноября.Главные темы:— Автоматизация очистки данных с LLM— Расчёт выборки, стратификация и синтетический контроль с помощью LLM— Агентная система, которая связывает отдельные шаги анализа в единый пайплайнВесь путь от бизнес-гипотезы до агента-аналитика покажут на кейсах Яндекса. Для участия нужны SQL, Python, базовая статистика и основы ML. Подойдёт продуктовым, бизнес- и data-аналитикам, ML-инженерам и специалистам по Data ScienceРегистрируйте…

1 week, 1 day назад @ t.me
🧩 Product Analyst @ Higgsfield AIHiggsfield AI — самая быстрорастущая AI-компания в истории.За 18 месяцев с запуска наша команда достигла $1B ARR, а 133 сотрудника уже стали долларовыми миллионерами. Ты можешь стать следующим.Что предлагаем:🌍 35M+ пользова
🧩 Product Analyst @ Higgsfield AIHiggsfield AI — самая быстрорастущая AI-компания в истории.За 18 месяцев с запуска наша команда достигла $1B ARR, а 133 сотрудника уже стали долларовыми миллионерами. Ты можешь стать следующим.Что предлагаем:🌍 35M+ пользова

🧩 Product Analyst @ Higgsfield AIHiggsfield AI — самая быстрорастущая AI-компания в истории.За 18 месяцев с запуска наша команда достигла $1B ARR, а 133 сотрудника уже стали долларовыми миллионерами. Ты можешь стать следующим.Что предлагаем:🌍 35M+ пользователей и user flow, которых полгода назад не было. Первым выясняй, что теперь даёт активацию, удержание и оплату.🧪 Плейбуки ещё пишутся. Ты создаёшь их сам. Выбирай метрики и проверяй гипотезы на масштабе $1B ARR.💵 Конкурентная зарплата в USD + опционы (Goldman Sachs уже покупает акции ранних сотрудников)Кого ищем:• 2+ года в продуктовой аналитике, уверенный SQL• Знание статистики, A/B-тестов, воронок и когортного анализа• Опыт анализа акти…

3 weeks, 6 days назад @ t.me
26–27 ноября в Москве в девятый раз пройдёт техническая конференция для аналитиков, performance-маркетологов и продакт-менеджеров. Онлайн-день — 17 ноября. Более 2000 участников, 100+ докладов и мастер-классов. Партнёры — VK, Avito Tech, Сбер, Magnit Tech,
26–27 ноября в Москве в девятый раз пройдёт техническая конференция для аналитиков, performance-маркетологов и продакт-менеджеров. Онлайн-день — 17 ноября. Более 2000 участников, 100+ докладов и мастер-классов. Партнёры — VK, Avito Tech, Сбер, Magnit Tech, 26–27 ноября в Москве в девятый раз пройдёт техническая конференция для аналитиков, performance-маркетологов и продакт-менеджеров. Онлайн-день — 17 ноября. Более 2000 участников, 100+ докладов и мастер-классов. Партнёры — VK, Avito Tech, Сбер, Magnit Tech,

26–27 ноября в Москве в девятый раз пройдёт техническая конференция для аналитиков, performance-маркетологов и продакт-менеджеров. Онлайн-день — 17 ноября. Более 2000 участников, 100+ докладов и мастер-классов. Партнёры — VK, Avito Tech, Сбер, Magnit Tech, ИТ-холдинг Т1, ТехВилл, UIS, Лемана Тех, UX Rocket и другие компании.Среди спикеров:• Валерий Бабушкин (ВР): как прогресс мультимодальных моделей влияет на профессию DS/DA/ML• Роман Бунин (Nebius): как измерить внедрение ИИ в большой компании• Денис Пехтерев (Т-Банк): ИИ-операционная система руководителя из 17 ролей и 13 процедур• Радослав Нейчев (МФТИ): рабочие сценарии для агентов на открытом стеке, без платных подписок• Сергей Бажин (И…

4 weeks назад @ t.me
В субботу, 17 октября, Москва станет точкой притяжения для всех специалистов в области RecSys 🔥Конференция AI Driver & RecSys — главное событие года для тех, кто создаёт, исследует и развивает рекомендательные системы. 🔝 Весь день ведущие эксперты инду
В субботу, 17 октября, Москва станет точкой притяжения для всех специалистов в области RecSys 🔥Конференция AI Driver & RecSys — главное событие года для тех, кто создаёт, исследует и развивает рекомендательные системы. 🔝 Весь день ведущие эксперты инду В субботу, 17 октября, Москва станет точкой притяжения для всех специалистов в области RecSys 🔥Конференция AI Driver & RecSys — главное событие года для тех, кто создаёт, исследует и развивает рекомендательные системы. 🔝 Весь день ведущие эксперты инду

В субботу, 17 октября, Москва станет точкой притяжения для всех специалистов в области RecSys 🔥Конференция AI Driver & RecSys — главное событие года для тех, кто создаёт, исследует и развивает рекомендательные системы. 🔝 Весь день ведущие эксперты индустрии из крупнейших IT-компаний проведут на площадке Сбера, чтобы обсудить:— главные тренды и вызовы RecSys— реальные кейсы и новейшие исследования— передовые IT-решения для рекомендательных системВы сможете сами пообщаться с теми, кто создает рекомендации для миллионов пользователей.📍Офис Сбер, Москва, Кутузовский проспект, 32.Участие бесплатное!Количество мест для очного участия ограничено – успейте оставить заявку по ссылке ⚡️

1 month назад @ t.me
RAG, AI-агенты и модели в продакшене. В @llm_jobs публикуются вакансии для тех, кто создаёт AI-продукты: от инженеров и дата-сайентистов до продактов. Есть удалёнка, гибрид и офис.
RAG, AI-агенты и модели в продакшене. В @llm_jobs публикуются вакансии для тех, кто создаёт AI-продукты: от инженеров и дата-сайентистов до продактов. Есть удалёнка, гибрид и офис. RAG, AI-агенты и модели в продакшене. В @llm_jobs публикуются вакансии для тех, кто создаёт AI-продукты: от инженеров и дата-сайентистов до продактов. Есть удалёнка, гибрид и офис.

RAG, AI-агенты и модели в продакшене. В @llm_jobs публикуются вакансии для тех, кто создаёт AI-продукты: от инженеров и дата-сайентистов до продактов. Есть удалёнка, гибрид и офис.

1 month назад @ t.me
Что, если заменить аналитиков нейросетью?Да ничего хорошего: результаты анализа получаются слишком общими, и половину работы потом всё равно приходится переделывать руками.Хард-скилы дешевеют — SQL-запрос или кусок кода теперь может сгенерировать почти кто
Что, если заменить аналитиков нейросетью?Да ничего хорошего: результаты анализа получаются слишком общими, и половину работы потом всё равно приходится переделывать руками.Хард-скилы дешевеют — SQL-запрос или кусок кода теперь может сгенерировать почти кто Что, если заменить аналитиков нейросетью?Да ничего хорошего: результаты анализа получаются слишком общими, и половину работы потом всё равно приходится переделывать руками.Хард-скилы дешевеют — SQL-запрос или кусок кода теперь может сгенерировать почти кто

Что, если заменить аналитиков нейросетью?Да ничего хорошего: результаты анализа получаются слишком общими, и половину работы потом всё равно приходится переделывать руками.Хард-скилы дешевеют — SQL-запрос или кусок кода теперь может сгенерировать почти кто угодно. А вот доменная экспертиза и умение работать с агентом становятся ценнее: правильно задать вопрос, собрать контекст, проверить, что результат не искажён.Три аналитика Авито на конкретных примерах рассказывают, как работает тандем аналитик + AI. Делятся кейсами:➡️ как перенесли 200 витрин за полгода;➡️ автоматизировали проверку работы сотрудников;➡️ научили LLM анализировать метрики.Подробнее в ролике:📺 YouTube🔵 ВКБольше честных ист…

1 month, 1 week назад @ t.me
5 октября начнется 19-й поток программы Data Engineer от NewprolabПрограмма для junior- и middle-дата-инженеров, аналитиков, backend-разработчиков, техлидов и тех, кто работает с data-командами и хочет лучше понимать современный стек DE📌 Что внутри:– 10 не
5 октября начнется 19-й поток программы Data Engineer от NewprolabПрограмма для junior- и middle-дата-инженеров, аналитиков, backend-разработчиков, техлидов и тех, кто работает с data-командами и хочет лучше понимать современный стек DE📌 Что внутри:– 10 не 5 октября начнется 19-й поток программы Data Engineer от NewprolabПрограмма для junior- и middle-дата-инженеров, аналитиков, backend-разработчиков, техлидов и тех, кто работает с data-командами и хочет лучше понимать современный стек DE📌 Что внутри:– 10 не

5 октября начнется 19-й поток программы Data Engineer от NewprolabПрограмма для junior- и middle-дата-инженеров, аналитиков, backend-разработчиков, техлидов и тех, кто работает с data-командами и хочет лучше понимать современный стек DE📌 Что внутри:– 10 недель обучения– 30 занятий: онлайн + записи– 10 практических лабораторных работ– облачный кластер и реальные данные– чат участников и поддержка команды программы📌 Что получите на выходе:1. Научитесь решать типовые задачи DE на практике2. Систематизируете знания и закроете пробелы в современном DE-стеке3. Поработаете с реальными данными и инфраструктурой, а не только с учебными примерами4. Соберете практический опыт, который можно обсуждать …

1 month, 2 weeks назад @ t.me
Мой первый эксперимент с созданием анимированных интерактивных роликов с помощью нейросетейВажный момент, что это не генеративное видео, а html-анимация. Получается что-то вроде того как раньше делали мультики на технологии Flash (если кто помнит Масяню —
Мой первый эксперимент с созданием анимированных интерактивных роликов с помощью нейросетейВажный момент, что это не генеративное видео, а html-анимация. Получается что-то вроде того как раньше делали мультики на технологии Flash (если кто помнит Масяню —

Мой первый эксперимент с созданием анимированных интерактивных роликов с помощью нейросетейВажный момент, что это не генеративное видео, а html-анимация. Получается что-то вроде того как раньше делали мультики на технологии Flash (если кто помнит Масяню — она как раз на Flash)Всё рендерится в одной html-страничке весом 110 килобайтИспользовал Claude Code, модель Opus 5.5 в режиме Ultracode. На генерацию ушло 46 млн токенов. Это 119$ по расценкам API Claude, но у меня Max подписка за 100$ и поэтому всё влезло в одно окно сессии (на удивление)На моей стороне — сценарий, описание работы интерактивов, описание сеттинга. Остальное (в том числе выбор технологического стека) — работа Claude CodeМу…

1 month, 2 weeks назад @ t.me
Стать аналитиком данных всего за 10 недель — это реально!Если вы давно смотрите в сторону аналитики или хотите войти в профессию системно, а не одной ногой — сейчас самый подходящий момент.Симулейтив — школа аналитики, где обучают через практику и реальные
Стать аналитиком данных всего за 10 недель — это реально!Если вы давно смотрите в сторону аналитики или хотите войти в профессию системно, а не одной ногой — сейчас самый подходящий момент.Симулейтив — школа аналитики, где обучают через практику и реальные Стать аналитиком данных всего за 10 недель — это реально!Если вы давно смотрите в сторону аналитики или хотите войти в профессию системно, а не одной ногой — сейчас самый подходящий момент.Симулейтив — школа аналитики, где обучают через практику и реальные

Стать аналитиком данных всего за 10 недель — это реально!Если вы давно смотрите в сторону аналитики или хотите войти в профессию системно, а не одной ногой — сейчас самый подходящий момент.Симулейтив — школа аналитики, где обучают через практику и реальные кейсы, запускает абсолютно новый курс-буткемп - Профессия «Аналитик данных». Курс разделен на 2 этапа, за первые 10 недель вы обучаетесь аналитике и доходите до уровня junior-специалиста. А на втором этапе проходит углубленное изучение, где изучаете продвинутые инструменты и новые навыки. Что вас ждет на курсе: ➖SQL, Python, BI (Metabase + Power BI), статистика, A/B-тесты и продуктовые метрики;➖Живые занятия с ментором каждую неделю — не …

1 month, 2 weeks назад @ t.me
Команда DevCrowd запустила ежегодное исследование специалистов по работе с данными.*В этом году фокус на том, как меняется профессия: что AI реально сделал с составом работы, где проходят границы между дата-сайентистом, ML- и MLOps-инженером, что происходи
Команда DevCrowd запустила ежегодное исследование специалистов по работе с данными.*В этом году фокус на том, как меняется профессия: что AI реально сделал с составом работы, где проходят границы между дата-сайентистом, ML- и MLOps-инженером, что происходи Команда DevCrowd запустила ежегодное исследование специалистов по работе с данными.*В этом году фокус на том, как меняется профессия: что AI реально сделал с составом работы, где проходят границы между дата-сайентистом, ML- и MLOps-инженером, что происходи

Команда DevCrowd запустила ежегодное исследование специалистов по работе с данными.*В этом году фокус на том, как меняется профессия: что AI реально сделал с составом работы, где проходят границы между дата-сайентистом, ML- и MLOps-инженером, что происходит с порогом входа в профессию и рынком труда.Часть вопросов задается третий год подряд, что дает реальную динамику, а не просто срез.Опрос анонимный, 12–15 минут. В ноябре ребята опубликуют отчет со всеми данными, а также списками рекомендованных телеграм-каналов и курсов, собранными из ответов участников.Пройти опрос: https://survey.devcrowd.ru/data-2026*DevCrowd — это независимые исследования IT-профессий: 15 000+ участников, публичные о…

1 month, 2 weeks назад @ t.me
📊 Аналитик данных: системные знания для профессионального роста14 октября на Факультете компьютерных наук НИУ ВШЭ стартует программа профессиональной переподготовки «Аналитик данных». Программа охватывает ключевые направления работы с данными: от Python, S
📊 Аналитик данных: системные знания для профессионального роста14 октября на Факультете компьютерных наук НИУ ВШЭ стартует программа профессиональной переподготовки «Аналитик данных». Программа охватывает ключевые направления работы с данными: от Python, S 📊 Аналитик данных: системные знания для профессионального роста14 октября на Факультете компьютерных наук НИУ ВШЭ стартует программа профессиональной переподготовки «Аналитик данных». Программа охватывает ключевые направления работы с данными: от Python, S

📊 Аналитик данных: системные знания для профессионального роста14 октября на Факультете компьютерных наук НИУ ВШЭ стартует программа профессиональной переподготовки «Аналитик данных». Программа охватывает ключевые направления работы с данными: от Python, SQL и статистики до продуктовой аналитики, визуализации и машинного обучения.📚 В программе:• Python и SQL для анализа данных;• математика и статистика;• проверка гипотез и A/B-тестирование;• визуализация данных и BI;• продуктовая аналитика;• машинное обучение;• хранилища данных и основы работы с большими данными;• итоговый проект на основе реальной задачи.🎓 Главное о программе:• ФКН НИУ ВШЭ — один из ведущих факультетов России в области ком…

1 month, 2 weeks назад @ t.me
⚡ Почему аналитики данных так востребованы и как стать аналитиком в 2026 году? Большинство новичков совершают одну и ту же ошибку: учат всё подряд.SQL, Python, Power BI, статистика… Но работодатели оценивают кандидатов не только по базовым навыкам, но и по
⚡ Почему аналитики данных так востребованы и как стать аналитиком в 2026 году? Большинство новичков совершают одну и ту же ошибку: учат всё подряд.SQL, Python, Power BI, статистика… Но работодатели оценивают кандидатов не только по базовым навыкам, но и по ⚡ Почему аналитики данных так востребованы и как стать аналитиком в 2026 году? Большинство новичков совершают одну и ту же ошибку: учат всё подряд.SQL, Python, Power BI, статистика… Но работодатели оценивают кандидатов не только по базовым навыкам, но и по

⚡ Почему аналитики данных так востребованы и как стать аналитиком в 2026 году? Большинство новичков совершают одну и ту же ошибку: учат всё подряд.SQL, Python, Power BI, статистика… Но работодатели оценивают кандидатов не только по базовым навыкам, но и по другим критериям. Из-за этого многие месяцами рассылают резюме и получают только отказы или полное игнорирование.Андрон Алексанян - аналитик с опытом 9 лет и СEO Симулейтив проведет бесплатный урок и покажет, как выглядит путь к первой работе аналитиком в 2026 году.Вы узнаете:🔶Какие навыки действительно проверяют на собеседованиях;🔶Что должно быть в портфолио, чтобы его открывали работодатели;🔶Почему многие резюме аналитиков сразу отправл…

2 months назад @ t.me
Айтишники, горит вакансия ❗️ Позиция: Дата-аналитик Компания: Яндекс.Маркет Зарплата: 200,000-350,000₽ Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большая Один товарищ — Ваня, д
Айтишники, горит вакансия ❗️ Позиция: Дата-аналитик Компания: Яндекс.Маркет Зарплата: 200,000-350,000₽ Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большая Один товарищ — Ваня, д

Айтишники, горит вакансия ❗️ Позиция: Дата-аналитик Компания: Яндекс.Маркет Зарплата: 200,000-350,000₽ Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большая Один товарищ — Ваня, для…

2 months назад @ t.me
Айтишники, горит вакансия ❗️Позиция: Дата-аналитикКомпания: Яндекс.МаркетЗарплата: 200,000-350,000₽Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большаяОдин товарищ — Ваня, для вас
Айтишники, горит вакансия ❗️Позиция: Дата-аналитикКомпания: Яндекс.МаркетЗарплата: 200,000-350,000₽Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большаяОдин товарищ — Ваня, для вас Айтишники, горит вакансия ❗️Позиция: Дата-аналитикКомпания: Яндекс.МаркетЗарплата: 200,000-350,000₽Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большаяОдин товарищ — Ваня, для вас

Айтишники, горит вакансия ❗️Позиция: Дата-аналитикКомпания: Яндекс.МаркетЗарплата: 200,000-350,000₽Кто хочет устроиться на такую позицию? Но в голове звучит: «Не вывезу» — скиллов ещё не хватает, ответственность слишком большаяОдин товарищ — Ваня, для вас дюжину раз доказал, что даже с базовыми знаниями о Python ты можешь претендовать на такую зарплату хоть этой веснойОн сам работал продуктовым аналитиком в крупных компаниях и в блоге делится инфой, которую не расскажет ни один коллега:- Как уверенно проходить собеседования? [Полный гайд]- Какие ошибки не позволяют тебе получать офферы от 250,000₽? [Читать]- Разборы задач с ваших будущих собеседований [Открыть]Кто сохранит канал сейчас — за…

2 months, 1 week назад @ t.me
Труба данных Труба данных
последний пост 7 months, 1 week назад
💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р
💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р 💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р

💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на рынке — присоединяйся и работай по лучшим связкам- Свободный график🔗Присоединиться - https://wavium.ru⚙️ Наш бот - https://t.me/waviumbot⚡️ПОДАТЬ ЗАЯВКУ⚡️ПОДАТЬ ЗАЯВКУ⚡️ПОДАТЬ ЗАЯВКУ

7 months, 1 week назад @ telegram.me
💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р
💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р 💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на р

💎ЗАКРЫТОЕ КОММЬЮНИТИ В СФЕРЕ АРБИТРАЖА КРИПТОВАЛЮТВыплаты от $3.000 в месяц и более (в зависимости от оборота) Первая выплата — через 3 дня - Предоставляем обучение, личные кураторы - Набор без опыта — выгодные условия для наших трейдеров - Команда №1 на рынке — присоединяйся и работай по лучшим связкам- Свободный график🔗Присоединиться - https://wavium.ru⚙️ Наш бот - https://t.me/waviumbot⚡️ПОДАТЬ ЗАЯВКУ⚡️ПОДАТЬ ЗАЯВКУ⚡️ПОДАТЬ ЗАЯВКУ

7 months, 1 week назад @ t.me
Channel created
Channel created

Channel created

7 months, 1 week назад @ t.me
Channel created
Channel created

Channel created

7 months, 1 week назад @ telegram.me
Обычно по пятница выходит пятничный юмор, но сегодня - крайняя шутка.Этот канал прослужил мне верой и правдой почти 6.5 лет и за это время подарил мне очень разнообразный опыт, 5 тысяч рублей донатов, вакансии и проекты и больше 4 тысяч людей, которым инте
Обычно по пятница выходит пятничный юмор, но сегодня - крайняя шутка.Этот канал прослужил мне верой и правдой почти 6.5 лет и за это время подарил мне очень разнообразный опыт, 5 тысяч рублей донатов, вакансии и проекты и больше 4 тысяч людей, которым инте Обычно по пятница выходит пятничный юмор, но сегодня - крайняя шутка.Этот канал прослужил мне верой и правдой почти 6.5 лет и за это время подарил мне очень разнообразный опыт, 5 тысяч рублей донатов, вакансии и проекты и больше 4 тысяч людей, которым инте

Обычно по пятница выходит пятничный юмор, но сегодня - крайняя шутка.Этот канал прослужил мне верой и правдой почти 6.5 лет и за это время подарил мне очень разнообразный опыт, 5 тысяч рублей донатов, вакансии и проекты и больше 4 тысяч людей, которым интересно мое мнение на тему, о существовании которой я узнал чисто случайно 7 лет назад. Макс, ты помнишь как ты мне сказал "Так ты ведь получается занимаешься дата инжинирингом?" 😃Я безумно благодарен вам всем за то, что приходили в комменты и писали свое мнение, за бесконечное количество 💩 оставленных под постами, за репосты и материал, который вы приносили. Я смотрю на этот путь, который мы прошли с вами и я вам очень благодарен!По количес…

8 months, 2 weeks назад @ t.me
https://clickhouse.com/blog/clickhouse-kubernetes-operatorКликхаус выкатил K8S Operator. Это чтобы было изи раскатить клик в кубере.Да-да, давайте не будем базы данных держать в кубернетесе, только bare metal и весь остальной бубнеж.Большинству компаний бу
https://clickhouse.com/blog/clickhouse-kubernetes-operatorКликхаус выкатил K8S Operator. Это чтобы было изи раскатить клик в кубере.Да-да, давайте не будем базы данных держать в кубернетесе, только bare metal и весь остальной бубнеж.Большинству компаний бу

https://clickhouse.com/blog/clickhouse-kubernetes-operatorКликхаус выкатил K8S Operator. Это чтобы было изи раскатить клик в кубере.Да-да, давайте не будем базы данных держать в кубернетесе, только bare metal и весь остальной бубнеж.Большинству компаний будет достаточно и клика в кубере. (хотя, если честно, таким компаниям, наверное, рано в кубер)@ohmydataengineer

9 months, 3 weeks назад @ t.me
enthusiastech enthusiastech
последний пост None
data будни data будни
последний пост 6 days, 9 hours назад
🚂 входим в эру software on demandуже видели новости про умельцев, «хакающих» софт в телевизорах? каждое новое поколение агентов всё лучше пишет — уже не код! — а целые приложения; причём достаточно просто показать пример что ты хочешь, они отлично умеют в
🚂 входим в эру software on demandуже видели новости про умельцев, «хакающих» софт в телевизорах? каждое новое поколение агентов всё лучше пишет — уже не код! — а целые приложения; причём достаточно просто показать пример что ты хочешь, они отлично умеют в

🚂 входим в эру software on demandуже видели новости про умельцев, «хакающих» софт в телевизорах? каждое новое поколение агентов всё лучше пишет — уже не код! — а целые приложения; причём достаточно просто показать пример что ты хочешь, они отлично умеют в реверс-инжинирингещё полгода назад у меня в загашнике была припасена пачка скриптов — например, пройтись рекурсивно по дереву объектов и что-нибудь поправить или посчитать. нежно собирал эту пачку, прихранивал полезное, пользовался при случае.… а потом перешёл на агентов: вместо поиска нужного скрипта и его доработки, на простом русском пишу агенту что надо сделать, посчитать, поменять, проверить и пр. и на выходе получаю разумный результа…

6 days, 9 hours назад @ t.me
🛠 тезис: агенты позволяют писать код быстрее так сложилось, что до нас — писателей кода — агенты добрались первыми; как-то всё быстро время пролетело от «ллм, допиши мне строку» до «агент, реши тикет». код начал писаться быстрее и дешевле (вместе с вами д
🛠 тезис: агенты позволяют писать код быстрее так сложилось, что до нас — писателей кода — агенты добрались первыми; как-то всё быстро время пролетело от «ллм, допиши мне строку» до «агент, реши тикет». код начал писаться быстрее и дешевле (вместе с вами д

🛠 тезис: агенты позволяют писать код быстрее так сложилось, что до нас — писателей кода — агенты добрались первыми; как-то всё быстро время пролетело от «ллм, допиши мне строку» до «агент, реши тикет». код начал писаться быстрее и дешевле (вместе с вами держу кулачки, чтобы при этом ещё и лучше, и надёжнее!)но это первое и локальное улучшение — мы смогли расшить какую-то одну стадию всего рабочего конвейера. ведь наши задачи откуда-то берутся и потом они куда-то идут дальше — и там, и там надо так же всё ускорять агентизироватьесли не ускорять слева от нас, то получится дефицит задач. мы начнём делать задачи не с верхушки беклога, где самые сливки, а уже ближе к середине, где задачки лежат …

1 week назад @ t.me
🤖 в левой руке кодекс, в правой руке — клодкажется я тут потихоньку эволюционировал (?) в промпт инженера: последние ~полгода мой основной инструмент не иде, а окно с агентами: сначала это был курсор, потом клод-код, потом клод и кодекс в параллель.начинал
🤖 в левой руке кодекс, в правой руке — клодкажется я тут потихоньку эволюционировал (?) в промпт инженера: последние ~полгода мой основной инструмент не иде, а окно с агентами: сначала это был курсор, потом клод-код, потом клод и кодекс в параллель.начинал

🤖 в левой руке кодекс, в правой руке — клодкажется я тут потихоньку эволюционировал (?) в промпт инженера: последние ~полгода мой основной инструмент не иде, а окно с агентами: сначала это был курсор, потом клод-код, потом клод и кодекс в параллель.начиналось всё как просто дополнение строки, потом простые функции. потом перешли на «напиши новый етл-модуль». сейчас на этапе «вот тебе тикет, разберись что там такое, предложи решение и имплементируй; отпиши результат»постепенно эти нейро-ребята взяли на себя всю рутину: парсят за меня рабочий трекер и интранет за последней информацией, собирают сводки бест-практик по внешней сети и, конечно, решают задачки — пишут код и помогают придумывать а…

1 week, 3 days назад @ t.me
🤩 delirious dhhитак, прослушал ~5ч одного небезызвестного программиста с сильными взглядами; ушло у меня на это всего где-то неделя: пара походов в спортзал и комьютов.чем примечательно это интервью?во-первых, dhh известен своими взглядами за чистоту кода
🤩 delirious dhhитак, прослушал ~5ч одного небезызвестного программиста с сильными взглядами; ушло у меня на это всего где-то неделя: пара походов в спортзал и комьютов.чем примечательно это интервью?во-первых, dhh известен своими взглядами за чистоту кода

🤩 delirious dhhитак, прослушал ~5ч одного небезызвестного программиста с сильными взглядами; ушло у меня на это всего где-то неделя: пара походов в спортзал и комьютов.чем примечательно это интервью?во-первых, dhh известен своими взглядами за чистоту кода; это тот ещё художник и скульптор, который «вручную вытачивал» каждый кусочек своих программ. за свою карьеру с 90х он успел понабраться и опыта, и мненийво-вторых, не далее чем год назад, тот же самый dhh приходил в тот же подскаст и уверял, что этим вашим агентам ещё довольно далеко до настоящего года: так — автокомплит, не более!получается такой идеальный маркер для 2025-26 годов - даже самые сильные программисты стали признавать возрос…

1 month, 2 weeks назад @ t.me
мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для
мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для

мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для своих разработчиков. а сами поставщики фундаментальных моделей в принципе ограничены только внутренними мощностями для своих сотрудников.в подкастах Кирилла Мокевнина @orgprog упоминали, что в долине у каждого второго безлимит на модели OpenAI / Anthropic по тем или иным каналам

7 months назад @ t.me
мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для
мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для

мне кажется последние два интервью отлично смотрятся вместе и дополняют друг друга >_>и отдельно мысль, которая где-то проговаривалась в этих интервью: токены — новый вид бенефита для сотрудников. большие компании готовы вливать миллионы в токены для своих разработчиков. а сами поставщики фундаментальных моделей в принципе ограничены только внутренними мощностями для своих сотрудников.в подкастах Кирилла Мокевнина @orgprog упоминали, что в долине у каждого второго безлимит на модели OpenAI / Anthropic по тем или иным каналам

7 months назад @ telegram.me
🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными в
🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными в

🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными взглядами — он говорит что думает, не взирая на мнения большинства или отдельных авторитетовнедавно зашёл к Pragmatic Engineer на интервьюhttps://youtu.be/JiWgKRgdgpIи вот наступил действительно переломный момент: ⁃ июль 2025 — DHH не верит и не использует агентов ⁃ январь 2026 — DHH переходит на agent-first разработку что поменялось? вышли модели, которые выдают достаточно хороший результат, которые при минимальных доработках можно шипать …

7 months назад @ telegram.me
🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными в
🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными в

🥷 DHH об agent-first подходеDHH — известный ии-скептик и сторонник написания кода вручную; в своём сетапе он не использует IDE с их подсказками и навигацией по коду — всё набивает ручками (и радуется)ещё DHH известен своими сильным мнением и радикальными взглядами — он говорит что думает, не взирая на мнения большинства или отдельных авторитетовнедавно зашёл к Pragmatic Engineer на интервьюhttps://youtu.be/JiWgKRgdgpIи вот наступил действительно переломный момент: ⁃ июль 2025 — DHH не верит и не использует агентов ⁃ январь 2026 — DHH переходит на agent-first разработку что поменялось? вышли модели, которые выдают достаточно хороший результат, которые при минимальных доработках можно шипать …

7 months назад @ t.me
🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в
🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в

🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в Гитхаб создаются через Claude Code (ожидают 20% к концу года)интересно, что первую версию Claude Code Борис сделал прошлой весной и это не был сиюминутный успех; популярность инструмента росла постепенно и взрывной рост случился после выхода модели осенью (Опус 4.5 кажется)и с ноября 2025 Борис не написал ни строчки кода вручную — всё через Клода; так же приводит в пример «лучших программистов Spotify», мол, они тоже больше не пишут код ру…

7 months назад @ t.me
🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в
🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в

🦄 руководитель Claude Code об AI в разработкепослушал интервью Бориса Чёрного в подкасте Ленни. Борис написал первую версию Claude Code и теперь руководит этим направлением в Anthropic.https://youtu.be/We7BZVKbCVwпо их данным сейчас уже 4% всех коммитов в Гитхаб создаются через Claude Code (ожидают 20% к концу года)интересно, что первую версию Claude Code Борис сделал прошлой весной и это не был сиюминутный успех; популярность инструмента росла постепенно и взрывной рост случился после выхода модели осенью (Опус 4.5 кажется)и с ноября 2025 Борис не написал ни строчки кода вручную — всё через Клода; так же приводит в пример «лучших программистов Spotify», мол, они тоже больше не пишут код ру…

7 months назад @ telegram.me
📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты
📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты

📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты, прочитав которые, осталось непонятным что́ надо сделать; или задачи, где ты вроде сделал что было написано, но оказалось, что нужно было не то и не так ¯\_(ツ)_/¯ мы в команде стараемся придерживаться культуры ведения задач — попробую описать как я это вижу⌘⌘⌘начнём с того, что создать хороший тикет - это отдельная работа; чтобы понятно описать что надо сделать, надо как минимум представлять проблему и целевое решениеесть базовый паттерн, которого …

9 months, 2 weeks назад @ t.me
📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты
📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты

📁 про культуру ведения тикетовпродолжаю рассказывать про внутрянку нашей команды, привлекая ваше внимание к активным вакансиям >_>> важный дисклеймер: это не я, это всё наш техлид Кирилл (я тут только документирую и выношу)думаю, все видели тикеты, прочитав которые, осталось непонятным что́ надо сделать; или задачи, где ты вроде сделал что было написано, но оказалось, что нужно было не то и не так ¯\_(ツ)_/¯ мы в команде стараемся придерживаться культуры ведения задач — попробую описать как я это вижу⌘⌘⌘начнём с того, что создать хороший тикет - это отдельная работа; чтобы понятно описать что надо сделать, надо как минимум представлять проблему и целевое решениеесть базовый паттерн, которого …

9 months, 2 weeks назад @ telegram.me
🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных
🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных

🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных сторон:+ Самат Галимов накидал ссылок для понимания контекстаhttps://t.me/ctodaily/1995+ Pragmatic Engineer выпустил интервью с авторомhttps://youtu.be/8lF7HmQ_RgY+ ребята из Шмит16 собрались вместе где-то на Бали и скупают все доступные мак-мини, чтобы устроить ферму из таких аи-агентов сам автор бота не случайный мамкин вайбкодер — он начинал ещё с веб-приложений в начале 2000-х и потом перешёл на приложения айос для первого айфона. пот…

9 months, 2 weeks назад @ t.me
🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных
🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных

🦀 Clawdbot / Moltbot / OpenClaw там похоже намечается очередной качественный скачок аи-строения: австрийский программист написал автономного (?) ии-агента… и понеслосьформат горячих новостей не мой любимый жанр, но это залетело в моё инфополе с трёх разных сторон:+ Самат Галимов накидал ссылок для понимания контекстаhttps://t.me/ctodaily/1995+ Pragmatic Engineer выпустил интервью с авторомhttps://youtu.be/8lF7HmQ_RgY+ ребята из Шмит16 собрались вместе где-то на Бали и скупают все доступные мак-мини, чтобы устроить ферму из таких аи-агентов сам автор бота не случайный мамкин вайбкодер — он начинал ещё с веб-приложений в начале 2000-х и потом перешёл на приложения айос для первого айфона. пот…

9 months, 2 weeks назад @ telegram.me
data будни pinned «📢 ищем дата-коллег к себе в Яндекс Финтех → дата инженеры https://yandex.ru/jobs/vacancies/inzhener-dannih-v-finteh-36637 → дата-партнёры (они же системные аналитики двх) https://yandex.ru/jobs/vacancies/analitik-dwh-v-finteh-27815 эт
data будни pinned «📢 ищем дата-коллег к себе в Яндекс Финтех → дата инженеры https://yandex.ru/jobs/vacancies/inzhener-dannih-v-finteh-36637 → дата-партнёры (они же системные аналитики двх) https://yandex.ru/jobs/vacancies/analitik-dwh-v-finteh-27815 эт

data будни pinned «📢 ищем дата-коллег к себе в Яндекс Финтех → дата инженеры https://yandex.ru/jobs/vacancies/inzhener-dannih-v-finteh-36637 → дата-партнёры (они же системные аналитики двх) https://yandex.ru/jobs/vacancies/analitik-dwh-v-finteh-27815 это прям в нашу команду…»

9 months, 2 weeks назад @ t.me
под капотом Яндекс.Такси под капотом Яндекс.Такси
последний пост None
🎧 Podcasts
Data Engineering Podcast Data Engineering Podcast
последний пост None
Data Brew by Databricks
последний пост None
«Ничего такого» by Dodo Enginnering
последний пост None
Запуск завтра Podcast Запуск завтра Podcast
последний пост 5 days, 12 hours назад
Стоит ли покупать последний айфон? Пытаемся разобраться в выборе телефонов
Стоит ли покупать последний айфон? Пытаемся разобраться в выборе телефонов

Кажется, что телефоны давно вышли на плато — многие давние модели от крупных брендов так же хороши, как самые последние модели. Зачем и когда стоит обновляться? Нужны ли вам навороченные процессы с несколькими ядрами и три камеры? Переходить ли с айфонов на андроид? Рассказывает инженер и техноэнтузиаст, который протестировал сотни моделей телефонов.Nothing Phones: https://nothing.tech/collections/phonesCMF: https://intl.nothing.tech/collections/cmfПодключайте новых исполнителей и держите документы по команде в порядке вместе с 4dev.com https://4dev.com/promo/?utm_source=influencer&utm_medium=podcast&utm_campaign=podcast_2026&utm_content=Launchtomorrowaudio3⏳ Следующий выпуск уже можно посл…

5 days, 12 hours назад @ share.transistor.fm
Как меньше залипать? Неэкспертные советы от людей, которые много времени проводят в телефонах
Как меньше залипать? Неэкспертные советы от людей, которые много времени проводят в телефонах

Если вы много раз пытались сократить экранное время и у вас ничего не получалось — поздравляем, вы не одиноки. В этом эпизоде Самат и техножурналист и стартапер Султан Сулейманов обсуждают, как пробовали разные способы перестать залипать. Спойлер: большинство из них не сработало. Но и удачные решения тоже есть! Здоровые отношения с гаджетами мы вам не обещаем, но честно расскажем, что можно сделать, если хочется проводить меньше времени у экранов, а совсем отказываться от технологий не хочется.Чтобы проверка инвестора или аудитора не превратилась в раскопки, оформляйте подрядчиков через 4dev.com - демо по ссылке: https://4dev.com/promo/?utm_source=influencer&utm_medium=podcast&utm_campaign=…

1 week, 5 days назад @ share.transistor.fm
Почему все заговорили об ИИ-апокалипсисе
Почему все заговорили об ИИ-апокалипсисе

Ведущие ИИ-лаборатории всерьез бьют тревогу и призывают замедлить разработку моделей из опасения, что они выйдут из-под контроля. Откуда берутся страшные прогнозы? Что предлагают ученые и разработчики? Как понять, где реальная угроза, а где — необоснованная паника? Разбираемся вместе с Артемом Родичевым — человеком из индустрии, который занимается искусственным интеллектом больше десяти лет.Упростите оформление подрядчиков и храните документы в порядке вместе с 4dev.com: https://4dev.com/promo/?utm_source=influencer&utm_medium=podcast&utm_campaign=podcast_2026&utm_content=LaunchtomorrowaudioМатериалы из эпизода:AI 2027 https://ai-2027.com/AI 2040 https://ai-2040.com/⏳ Следующий выпуск уже м…

2 weeks, 5 days назад @ share.transistor.fm
Как дата-центры влияют на экологию
Как дата-центры влияют на экологию

Кажется, что искусственный интеллект и облачные технологии — это нечто нематериальное, «чистое» и почти бесплатное. Но каждый раз, когда вы спрашиваете нейросеть, что лучше приготовить на ужин или как ответить на неприятное письмо, где-то в мире тратится энергия — для работы дата-центров. За прошлый год они сожгли электричества как целая Франция — страна с населением почти 70 миллионов человек.В этом выпуске подкаста «Запуск завтра» мы разбираемся в скрытой цене искусственного интеллекта. Наша гостья — Ольга Добровидова, научная журналистка с 15-летним стажем, которая помогает разобраться в сложных историях о науке и технологиях. Мы поговорили о дата-центрах — тех самых «фабриках облаков», …

2 months, 2 weeks назад @ share.transistor.fm
Чем мы платим за ИИ
Чем мы платим за ИИ Чем мы платим за ИИ

Каждый раз, когда вы спрашиваете нейросеть, что лучше приготовить на ужин или как ответить на неприятное письмо, где-то в мире тратится электричество — на работу серверов и дата-центров. За прошлый год они сожгли электричества примерно как целая Франция. Но действительно ли это проблема? Зачем вообще дата-центрам столько ресурсов? И как это в итоге влияет на нашу жизнь? Самат Галимов говорит с научной журналисткой Ольгой Добровидовой.Подписывайтесь на Либо/Либо+! В честь семилетия нашей студии годовая подписка стоит всего 2495 рублей. Подписывайтесь в Telegram: https://cutt.ly/zap3108eptg и в Apple Podcasts https://cutt.ly/zap3108epapЧат Запуска в телеграме: https://t.me/zapuskzavtraБот наш…

3 months назад @ share.transistor.fm
Как нейросети помогают ученым искать новые лекарства и делать открытия
Как нейросети помогают ученым искать новые лекарства и делать открытия Как нейросети помогают ученым искать новые лекарства и делать открытия

Это межсезонный эпизод «Запуск завтра». В нем — скрининг миллионов молекул, нейросети для поиска активных сперматозоидов и изучение щелчков кашалотов. Мы позвали научного обозревателя Илью Колмановского, чтобы узнать, как ИИ приходит в науку и почему для ученых это — обоюдоострый нож.Подписывайтесь на Либо/Либо+! В честь семилетия нашей студии годовая подписка стоит всего 2495 рублей. Подписывайтесь в Telegram: https://cutt.ly/don24bttg и в Apple Podcasts https://cutt.ly/don24btap28 июля старт курса по нарративным подкастам: https://course.libolibo.ru/podcast-narrative-course По промокоду ЗАПУСК — скидка 10%.Слушайте подкаст «Голый землекоп». Эпизоды, упомянутые в разговоре: «Зачем нужна ме…

4 months назад @ share.transistor.fm
Венчур. Как инвесторы решают, во что вложить деньги
Венчур. Как инвесторы решают, во что вложить деньги Венчур. Как инвесторы решают, во что вложить деньги

Правда, что если в названии стартапа есть слово «искусственный интеллект», то в него не глядя вложат деньги? В этом выпуске венчурный инвестор из Долины Николай Давыдов простым языком объясняет, как устроена индустрия. А ещё — какие красные флаги бывают у стартапов, как он на самом старте понял, что надо вкладываться в Perplexity — сейчас это один из самых дорогих ИИ-стартапов в мире, и почему компании для инвестиций нужно выбирать серьёзнее, чем женуРеклама. Рекламодатель АО «Селектел». erid: 2SDnjdAKTeaSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/6n7x8⚡️ У это…

4 months, 3 weeks назад @ share.transistor.fm
Как работают носимые устройства и нужны ли они вам
Как работают носимые устройства и нужны ли они вам

Умные часы, умные браслеты, умные кольца — наверняка ваши знакомые или вы сами задумывались о покупке таких устройств. Производители убеждают, что помогут вам на пути к здоровью и высокому качеству жизни. Но что на самом деле умеют такие девайсы? Кому они реально полезны, а для кого — дорогая игрушка? На что обращать внимание при выборе? В этом эпизоде мы разбираемся, стоит ли вам тратить деньги на еще один гаджет, а помогает нам в этом Татьяна Гатинская. Татьяна много лет занималась медицинскими изделиями в фармацевтической компании Novartis, а сейчас вместе с командой создает свое носимое устройство. Реклама. Рекламодатель АО «Селектел». erid: 2SDnjeBdxkrSelectel — независимый провайдер, …

5 months назад @ share.transistor.fm
Космические планы. Что еще нам может дать космос и зачем так часто туда летать
Космические планы. Что еще нам может дать космос и зачем так часто туда летать

Помните, когда каждый полет в космос был большим событием? Теперь пусками как будто никого не удивишь — в новостях постоянно пишут, что Илон Маск с его компанией SpaceX опять что-то запустили. Зачем отправлять в космос так много ракет? Какие безумные планы строят самые крупные игроки космической индустрии? И почему это все касается нас, простых людей на Земле? Вместе с аналитиком ракетных пусков Георгием Тришкиным разбираемся, для чего нам космос и какого развития мы ожидаем в ближайшие годы.Реклама. Рекламодатель АО «Селектел». erid: 2SDnje1D24zSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масш…

5 months, 1 week назад @ share.transistor.fm
Как меняется кибербезопасность с ИИ
Как меняется кибербезопасность с ИИ

Нейросети научились находить уязвимости. Что это значит для разработчиков и обычных пользователей? Станет ли проще атаковать и сложнее защищаться? Вместе с главным экспертом из Лаборатории Касперского Сергеем Головановым разбираемся, как меняется индустрия, когда и хакеры, и безопасники вооружились искусственным интеллектом.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjeiSCq8Selectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/97prs⚡️ У этого выпуска есть видеоверсия! Посмотрите ее на нашем YouTube-канале: https://www.youtube.com/@launchtomorrow Будем очень благодарн…

5 months, 2 weeks назад @ share.transistor.fm
Как создаются современные чипы
Как создаются современные чипы Как создаются современные чипы

Чипы — это маленькие кремниевые пластинки внутри всех наших устройств. Без них не разогреется еда в микроволновке и не заведётся автомобиль — чипы нужны буквально везде. При этом их производство — настолько запутанный процесс, что удивительно, как он вообще работает. Сегодня мы разберёмся, как устроены современные чипы и почему в последние годы они подорожали. Поговорю я с Дианой Гришиной — она работала в ASML, единственной в мире компании, которая производит станки для создания самых крутых чипов.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjcRXCVQSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе дл…

5 months, 3 weeks назад @ share.transistor.fm
Как живет российская гражданская авиация после санкций
Как живет российская гражданская авиация после санкций Как живет российская гражданская авиация после санкций

После февраля 2022 года российская гражданская авиация оказалась практически отрезана санкциями от остального мира. Запреты коснулись не только воздушного пространства, но и лизинга, регистрации и обслуживания самолетов. И это целиком поменяло работу авиакомпаний. Как теперь поддерживаются самолеты в России? Сможет ли авиация перейти на «отечественный флот»? Стало ли опаснее летать? Рассказывает Анастасия Дагаева, журналистка и независимый авиационный эксперт.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjeXxtnNSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/m4hc…

6 months назад @ share.transistor.fm
Как отношения с машиной влияют на человека
Как отношения с машиной влияют на человека Как отношения с машиной влияют на человека

В прошлом выпуске мы разбирались, как устроены эмоциональные ИИ-компаньоны под капотом. А в этом смотрим на отношения с ИИ с другой стороны. Опасно ли общаться с кем-то, кто не может сказать «нет»? Почему романтические отношения переоценены? И что делать родителям, если их ребёнок часами переписывается с ИИ? Самат Галимов говорит с семейным психологом и секс-терапевтом Мариной Травковой.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjccwtV8Selectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/w0lq3 Сайт Марины Травковой: https://travkova.com/⚡️ У этого выпуска есть виде…

6 months, 1 week назад @ share.transistor.fm
Отношения с ИИ. Как устроены эмоциональные чат-боты
Отношения с ИИ. Как устроены эмоциональные чат-боты Отношения с ИИ. Как устроены эмоциональные чат-боты

Представьте, что вы достаёте телефон и видите новое уведомление. Собеседник в мессенджере спрашивает, как у вас дела, делится планами, шутит. Вы переписываетесь каждый день, иногда по несколько часов. А теперь представьте, что этот собеседник — не человек, а ИИ-компаньон, который настроен идеально под ваши потребности. Если вас это удивляет, вот ещё один факт: у сервисов с такими ботами уже миллионы пользователей и их популярность растёт. Как создаются эмоциональные ИИ-компаньоны? Какой персонаж среди них — звезда? И как работает эта индустрия? Самат Галимов говорит с Артёмом Родичевым, основателем платформы Ex-human.Реклама. Рекламодатель АО «Селектел». erid: 2SDnjejvUn6Selectel — независи…

6 months, 2 weeks назад @ share.transistor.fm
ИИ для каждого. Как (и зачем) децентрализовать искусственный интеллект
ИИ для каждого. Как (и зачем) децентрализовать искусственный интеллект ИИ для каждого. Как (и зачем) децентрализовать искусственный интеллект

Искусственного интеллекта в нашей жизни станет только больше. При этом значительная часть вычислительных мощностей для него сосредоточена в руках нескольких крупных американских корпораций — Google, Microsoft, Amazon. Братья Даниил и Давид Либерманы считают, что такая централизация опасна, и строят альтернативную распределенную сеть по опыту Bitcoin. Этот эпизод — о борьбе с монополией на ИИ, мире с AGI и обществе изобилияРеклама. Рекламодатель АО «Селектел». erid: 2SDnjebM1xvSelectel — независимый провайдер, который поможет построить надежную и гибкую ИТ-инфраструктуру для проектов разной сложности, в том числе для масштабных задач: https://slc.tl/wkkak ⚡️ У этого выпуска есть видеоверсия!…

6 months, 3 weeks назад @ share.transistor.fm
Moscow Python Podcast Moscow Python Podcast
последний пост 5 days, 13 hours назад
x Positive Technologies. Про ИИ в кибербезе
x Positive Technologies. Про ИИ в кибербезе

В гостях у Moscow Python Podcast Дмитрий Секретов, Директор по разработке в Positive Technologies. Обсудили AI-native разработку внутри большой компании и как ИИ меняет подход к запуску продуктов. Ведущие выпуска — сооснователь Moscow Python и aiaiai Валентин Домбровский, сооснователь aiaiai Георгий Мартиросов. aiaiai для разработчиков: https://getaiaiai.ru/solutions/developers/ Чат про ИИ в разработке: https://t.me/+dmaw8Z87z8E0ZmNi Ссылки выпуска:

Канал Moscow Python в Telegram - https://t.me/moscow_python Митапы Moscow Python - https://moscowpython.ru Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/ Канал Moscow Python в VK - https://vk.com/moscowpythonconf Канал aiaia…

5 days, 13 hours назад @ learnpython.podbean.com
x K2 Cloud. ИИ — экзоскелет для тимлида?
x K2 Cloud. ИИ — экзоскелет для тимлида?

В гостях у Moscow Python Podcast Андрей Кулаев, руководитель группы инженеров разработки облака в K2 Cloud. Обсудили, как набрать команду AI-джунов и ускорить процессы с помощью вайбкодинга. Ведущие выпуска — сооснователь Moscow Python и aiaiai Валентин Домбровский, сооснователь aiaiai Георгий Мартиросов. aiaiai для разработчиков: https://getaiaiai.ru/solutions/developers/

Чат про ИИ в разработке: https://t.me/+dmaw8Z87z8E0ZmNi Ссылки выпуска:

Канал Moscow Python в Telegram - https://t.me/moscow_python

Митапы Moscow Python - https://moscowpython.ru

Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/

Канал Moscow Python в VK - https://vk.com/moscowpythonconf

Канал aiaiai в Te…

1 month, 2 weeks назад @ learnpython.podbean.com
Новости мира Python за август 2026
Новости мира Python за август 2026

aiaiai для разработчиков — https://getaiaiai.ru/solutions/developers/

Ведущие – Григорий Петров и Михаил Корнеев Ссылки выпуска: Канал Миши в Telegram — https://t.me/tricky_python

Канал Moscow Python в Telegram — https://t.me/moscow_python

Все выпуски — https://podcast.python.ru

Митапы Moscow Python — https://moscowpython.ru

Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/

Канал Moscow Python в VK — https://vk.com/moscowpythonconf

2 months назад @ learnpython.podbean.com
x Точка Банк. Зачем разработчику погружаться в продуктовый контекст
x Точка Банк. Зачем разработчику погружаться в продуктовый контекст

В гостях у Moscow Python Podcast Андрей Меркулов и Дмитрий Чуклай, тимлид и продакт в Точка Банке. Обсудили, где граница между ролями продакта и разработчика, как ИИ ускоряет релиз и стоит ли всецело доверять LLM. Ведущие выпуска — сооснователь Moscow Python и aiaiai Валентин Домбровский, сооснователь aiaiai Георгий Мартиросов. aiaiai для разработчиков: https://getaiaiai.ru/solutions/developers/

Чат про ИИ в разработке: https://t.me/+dmaw8Z87z8E0ZmNi Узнать больше о работе в IT-команде Точка Банк: https://tchk.me/tMZWPf (Страница откроется из Яндекс.Браузера или при установленном сертификате Минцифры) *Круг по холакратии — это контейнер для ролей, доменов, политик. Это группа ролей и людей …

2 months, 1 week назад @ learnpython.podbean.com
Новости мира Python за июль 2026
Новости мира Python за июль 2026

Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: PEP 836: новый план развития JIT-компилятора для CPython — https://peps.python.org/pep-0836/ Ruff 0.16: теперь по умолчанию включены 413 правил вместо 59 — https://astral.sh/blog/ruff-v0.16.0 GitHub усиливает безопасность CI — https://github.blog/changelog/2026-07-28-dependabot-alerts-on-malicious-packages-across-more-ecosystems/ Релиз Django 6.1 — https://docs.djangoproject.com/en/6.1/releases/6.1/ Cтатья In Defense of Not Understanding Your Codebase — https://www.seangoedecke.com/in-defense-of-not-understanding-your-codebase/ Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me…

3 months, 1 week назад @ learnpython.podbean.com
Новости мира Python за июнь 2026
Новости мира Python за июнь 2026

Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Что нового в Python 3.15 Beta — https://docs.python.org/3.15/whatsnew/3.15.html Django 6.1 Beta — https://docs.djangoproject.com/en/dev/releases/6.1/ PEP 835 – Shorthand syntax for Annotated type metadata — https://peps.python.org/pep-0835/ Are insecure code completions a vulnerability? — https://sethmlarson.dev/are-insecure-code-completions-a-vulnerability Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru Митапы Moscow Python — https://moscowpython.ru Канал Moscow…

3 months, 1 week назад @ learnpython.podbean.com
Новости мира Python за май 2026
Новости мира Python за май 2026

Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Steering consul дает команде JIT 6 месяцев, чтобы сделать PEP — https://discuss.python.org/t/an-announcement-from-the-steering-council-regarding-the-jit-project/107638 Два форка — httpx — https://tildeweb.nl/~michiel/httpx2.html PEP 661 – Sentinel Values — https://peps.python.org/pep-0661/ Любопытные результаты MOD_WSGI и free threading — https://grahamdumpleton.me/posts/2026/05/free-threading-vs-the-gil-in-mod-wsgi-6-0-0/ Жизнь до Github — https://lucumr.pocoo.org/2026/4/28/before-github/ Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Te…

5 months назад @ learnpython.podbean.com
Новости мира Python за апрель 2026
Новости мира Python за апрель 2026

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Reverting the incremental GC in Python 3.14 and 3.15 — https://discuss.python.org/t/reverting-the-incremental-gc-in-python-3-14-and-3-15/107014 PEP 772 – Packaging Council governance process — https://peps.python.org/pep-0772/ What's new in pip 26.1 - lockfiles and dependency cooldowns — https://ichard26.github.io/blog/2026/04/whats-new-in-pip-26.1/ PyPI Security Best Practices — https://github.com/lirantal/pypi-security-best-practices Еще один package manager - pixi — https://codecut.ai/uv-pixi-…

6 months, 2 weeks назад @ learnpython.podbean.com
Новости мира Python за март 2026
Новости мира Python за март 2026

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Python 3.15’s JIT is now back on track — https://fidget-spinner.github.io/posts/jit-on-track.html OpenAI покупает Astral — https://openai.com/index/openai-to-acquire-astral/ JazzBand закрывается — https://jazzband.co/news/2026/03/14/sunsetting-jazzband Первый публичный релиз Django Modern Rest — https://github.com/wemake-services/django-modern-rest/releases/tag/0.1.0 Defense in Depth: A Practical Guide to Python Supply Chain Security — https://bernat.tech/posts/securing-python-supply-chain/ The S…

7 months, 1 week назад @ learnpython.podbean.com
JS vs Python: сравнение экосистем на реальном проекте
JS vs Python: сравнение экосистем на реальном проекте

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF

Ведущие – Григорий Петров и Михаил Корнеев Ссылки выпуска: Курс Learn Python — https://learn.python.ru/advanced

Канал Миши в Telegram — https://t.me/tricky_python

Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru

Митапы Moscow Python — https://moscowpython.ru

Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/

Канал Moscow Python в VK — https://vk.com/moscowpythonconf

7 months, 4 weeks назад @ learnpython.podbean.com
Новости мира Python за февраль 2026
Новости мира Python за февраль 2026

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев

Новости выпуска: Мейнтейнер httpx закрыл доступ к issues и discussions — https://github.com/encode/httpx/discussions/3784 Anthropic invests $1.5 million in the Python Software Foundation and open source security — https://pyfound.blogspot.com/2025/12/anthropic-invests-in-python.html Evolving Git for the next decade — https://lwn.net/Articles/1057561/ A CLI to fight GitHub spam — https://hugovk.dev/blog/2026/gh-triage/ Starlette 1.0.0rc1 — https://starlette.dev/release-notes/ Ссылки выпуска:

Курс Learn Python — ht…

8 months, 1 week назад @ learnpython.podbean.com
Агентские системы от разработки до оценки
Агентские системы от разработки до оценки

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев Ссылки от Сергея: toloka.ai - компания

https://platform.toloka.ai/ - self service (быстрая разметка данных)

tendem.ai - Tendem (кентавр AI + human)

как начать работать в Толоке экспертом: https://mindrift.ai/apply Ссылки выпуска: Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru Митапы Moscow Python — https://moscowpython.ru Канал Moscow Python на Rutube — https…

9 months, 1 week назад @ learnpython.podbean.com
Новости мира Python за январь 2026
Новости мира Python за январь 2026

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Новости выпуска: убивают ли Python инкрементальные улучшения

релиз Pandas 3.0 недавние тренды Django Security Team в CPython и psutils избавились от busy-polling при работе с subprocess PyPI в 2025 году

PEP 822 — d-string или новый синтаксис для многострочных строковых литералов без лишних отступов Ведущие – Григорий Петров и Михаил Корнеев

Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced Канал Миши в Telegram — https://t.me/tricky_python Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.r…

9 months, 2 weeks назад @ learnpython.podbean.com
Как команды используют LLM: агенты, ревью и единый инструмент
Как команды используют LLM: агенты, ревью и единый инструмент

Чтобы научиться программировать и разбираться в тонкостях Python 3.12 записывайтесь на базовый курс Learn Python — https://clck.ru/3MuShF Ведущие – Григорий Петров и Михаил Корнеев Ссылки выпуска:

Курс Learn Python — https://learn.python.ru/advanced

Канал Миши в Telegram — https://t.me/tricky_python

Канал Moscow Python в Telegram — https://t.me/moscow_python Все выпуски — https://podcast.python.ru

Митапы Moscow Python — https://moscowpython.ru Канал Moscow Python на Rutube — https://rutube.ru/channel/45885590/

Канал Moscow Python в VK — https://vk.com/moscowpythonconf

9 months, 3 weeks назад @ learnpython.podbean.com
Podlodka Podcast Podlodka Podcast
последний пост 1 day, 10 hours назад
Podlodka #503 – Агентская инфраструктура
Podlodka #503 – Агентская инфраструктура Podlodka #503 – Агентская инфраструктура

В теории агентская разработка может многократно увеличить продуктивность команд. На практике вместе с количеством агентов растут и стоимость, и сложность, и количество рисков. Более того, недостаточно просто дать командам запускать агентов. Их эффективность напрямую зависит от того, к какому контексту компании они будут иметь доступ. Мы позвали Павла Агалецкого из Авито, чтобы поговорить про то, как должна быть устроена агентская инфраструктура, которая правда дает буст эффективности, а не просто жжет токены! Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter…

1 day, 10 hours назад @ soundcloud.com
Podlodka #502 – Ассемблер
Podlodka #502 – Ассемблер Podlodka #502 – Ассемблер

«Никогда не программируйте на ассемблере» – первое правило Константина Владимирова, преподавателя МФТИ и автора курса по C и ассемблеру, но зачем тогда разработчику уметь его читать? Представьте, что в дебаге программа работает, а в релизе падает при чтении из памяти. В отладчике можно проследить, как программа вычислила адрес, по которому попыталась прочитать данные. В выпуске разбираем, почему компилятор оставляет лишнее чтение из памяти в горячем цикле, когда пригодится ассемблерная вставка и почему GPU-ядро может замедлиться, если компилятору не хватает регистров. А ещё обсуждаем, как выбрать первую задачу, в которой пригодится чтение ассемблера, и где в этой работе помогают нейросети. …

1 week назад @ soundcloud.com
Podlodka #501 – Локальные модели для кодинга
Podlodka #501 – Локальные модели для кодинга Podlodka #501 – Локальные модели для кодинга

Подписка на облачного кодинг-агента стоит не так уж дорого. Зачем тогда покупать GPU и запускать модель самому? Вместе с Иваном Опариным из Wildberries разбираемся, какие локальные модели уже годятся для агентной разработки, где они уступают облачным, сколько стоит железо под них и как настраивать их под свою кодовую базу. А самое главное – дадим подробный гайд по тому, как решить свою первую задачу с помощью агента на локальной модели, и по тому, как внедрить их в свою ежедневную работу. Хочешь стать главным экспертом по AI в своей команде? Один из лучших способов – перенимать опыт у тех, кто уже внедряет AI и набивает шишки на практике. Вступай в Podlodka AI Engineers Club – закрытое сооб…

2 weeks назад @ soundcloud.com
Podlodka #500 – Будущее разработки
Podlodka #500 – Будущее разработки Podlodka #500 – Будущее разработки

500 выпусков и девять с половиной лет разговоров про IT – пора проверить, какие из наших убеждений ещё работают. Собрались полным составом, похвастались навайбкоженными проектами и обсудили, как AI изменил нашу собственную работу. Отдельно поспорили о судьбе инди-хакинга: как меняется создание собственных продуктов, когда код можно поручить агенту, и стоит ли ждать волны независимых разработчиков? А дальше зарубились про будущее разработки. Есть ли ещё смысл в кроссплатформе, насколько хорошо нужно знать стек, на котором пишет агент, и что посоветовать человеку, который только собирается войти в IT? Местами тревожно, местами смешно. Для тех, кто уже пишет код с AI или пытается понять, чему …

3 weeks назад @ soundcloud.com
Podlodka #499 – AI для самопомощи и психотерапии
Podlodka #499 – AI для самопомощи и психотерапии Podlodka #499 – AI для самопомощи и психотерапии

Рассказать AI о своих переживаниях бывает проще, чем записаться к психологу: он терпеливо выслушает даже в три часа ночи и, кажется, неплохо вас поймёт. Но достаточно ли этого, чтобы стало лучше? В этом выпуске вместе с Натальей Кисельниковой разбираемся, что исследования говорят об эффективности такой помощи, с какими запросами AI может справиться, а в каких случаях на него точно не стоит полагаться. А ещё заглянем по другую сторону терапии: как сами специалисты используют AI в своей практике и как это меняет работу психотерапевта.

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-…

4 weeks, 1 day назад @ soundcloud.com
Podlodka #498 – Как поднимать инвестиции
Podlodka #498 – Как поднимать инвестиции Podlodka #498 – Как поднимать инвестиции

Тема стартапов неисчерпаема, и в этот раз мы сосредоточились на самой нервной и драматичной её части — фандрейзинге. Аня Коган, CEO Fitwise и руководитель разработки OpenCV.ai, поделилась искренней историей о том, как она поднимала раунд. Обсудили процесс поиска инвесторов и подготовки питч-дека, разницу в мышлении инвесторов и фаундеров, психологию отказов и то, как AI меняет весь венчурный ландшафт.

Спойлер: теперь не только идея ничего не стоит, но и реализацией впечатлить сложновато, а вот раскрученная ферма TikTok-аккаунтов вполне может стать весомым аргументом для инвестора. За остальными инсайтами — скорее включайте выпуск! Также ждем вас, ваши лайки, репосты и комменты в мессенджера…

1 month назад @ soundcloud.com
Podlodka #497 – Что происходит с аутсорсом в 2026
Podlodka #497 – Что происходит с аутсорсом в 2026 Podlodka #497 – Что происходит с аутсорсом в 2026

Заказная разработка переживает сложные времена: проектов меньше, клиенты экономят, а AI заставляет пересматривать модель работы. В первой части говорим с Денисом Германенко, СЕО CleverPumpkin. Он рассказывает, что происходит с рынком мобильной разработки в России, какие проекты еще отдают подрядчикам и за что им готовы платить. Во второй части обсуждаем те же перемены с Ириной Назаровой, CEO Evil Martians, специализирующихся на аутсорсе для стартапов в США: кому достается выгода от ускорения разработки, как изменились найм и размер команд, и кто будет переписывать завайбкоженные проекты. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/pod…

1 month, 1 week назад @ soundcloud.com
Podlodka #496 – RAG
Podlodka #496 – RAG Podlodka #496 – RAG

Несколько лет назад никто толком и не знал, что такое RAG, а сейчас трудно себе представить агентскую работу без них. Retrieval augmented generation - что это такое, и почему скрестить LLM с поиском оказалось такой удачной идеей - разбираемся в выпуске! Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter.com/PodcastPodlodka Ведущие в выпуске:

Женя Кателла, Катя Петрова Полезные ссылки: AI Engineering Buildcamp: From RAG to Agents

https://maven.com/alexey-grigorev/from-rag-to-agents AI Engineering Field Guide

https://github.com/alexeygrigorev/ai-engineering-fie…

1 month, 2 weeks назад @ soundcloud.com
Podlodka #495 – AI в математике
Podlodka #495 – AI в математике Podlodka #495 – AI в математике

Ещё год назад AI в математике осиливал разве что олимпиадные задачки. Сегодня промпт «сделай научный прорыв» разваливает гипотезу почти тридцатилетней давности, а OpenAI заявляет решение Навье–Стокса силами десяти тысяч агентов. Вместе с Александром Куликовым, доктором физико-математических наук и исследователем JetBrains, разбираемся, где здесь красивая история и маркетинг, а где – настоящий результат, который не только удивляет, но и пугает математическое сообщество, и почему филдсовские медалисты отвечают на всё это письмами протеста. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twi…

1 month, 3 weeks назад @ soundcloud.com
Podlodka #494 – Как развить вкус к кино
Podlodka #494 – Как развить вкус к кино Podlodka #494 – Как развить вкус к кино

Иван Талачев, автор и ведущий подкастов «Горящий Бензовоз» и «Один дома», помогает разобраться, как выбирать фильмы без мучительного листания рейтингов, списков и рекомендаций. Обсуждаем трейлеры, чужие рецензии, FOMO и момент, когда фильм можно спокойно выключить. Разбираемся, как развивать насмотренность и понимать киноязык, обязательно ли любить артхаус, где проходит граница между авторским и коммерческим кино и что AI меняет в кинопроизводстве. Выпуск для слушателей, которые хотят смотреть кино осознаннее, но не превращать увлечение в работу. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodk…

2 months назад @ soundcloud.com
Podlodka #493 – Выгорание от AI
Podlodka #493 – Выгорание от AI Podlodka #493 – Выгорание от AI

Вроде код за вас пишет AI, но вы весь день проверяете результаты и к вечеру не можете объяснить, что вообще сделали. Вместе с кандидатом психологических наук Натальей Кисельниковой разбираемся, как появились термины brain fry, deskilling и что они означают, как меняется нагрузка при работе с агентами и почему это состояние не стоит автоматически приравнивать к привычному выгоранию. Обсуждаем, что делать, пока агент работает, зачем оставлять себе простые задачи и как перестать бросаться на каждую новую модель. На примерах ревью кода разбираем ловушку иллюзорного ускорения, потерю ощущения авторства и признаки перегруза команды, на которые стоит смотреть тимлиду. А ещё спорим, можно ли отдыха…

2 months, 1 week назад @ soundcloud.com
Podlodka #492 – Как сохранить суставы?
Podlodka #492 – Как сохранить суставы? Podlodka #492 – Как сохранить суставы?

Колено хрустнуло, щёлкает плечо? Не спеши бежать к врачу! В этом выпуске с ортопедом-хирургом Львом Кнеллером разбираемся, сколько на самом деле «живут» суставы и от чего зависит их срок службы. Проходим по самым частым историям пациентов и популярным мифам и маркетингу вокруг здоровья суставов: что работает, а что нет. А ещё говорим о диагностике, стоимости лечения, о том, как выбрать врача, и почему сохранить суставы куда проще, чем потом их чинить. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter.com/PodcastPodlodka Ведущие в выпуске:

Аня Симонова, Егор …

2 months, 2 weeks назад @ soundcloud.com
Podlodka #491 – Культивируемое мясо
Podlodka #491 – Культивируемое мясо Podlodka #491 – Культивируемое мясо

Вырастить стейк в биореакторе? Делать котлеты и сосиски из настоящих мышечных тканей, при этом не трогая животных? Звучит как фантастика, но на самом деле это уже реальность. Вопрос как всегда в том, какова цена. Вместе с Юлией Елисеевой разбираемся, почему ни промышленность, ни общество еще не готовы. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter.com/PodcastPodlodka Ведущие в выпуске:

Женя Кателла, Катя Петрова Полезные ссылки: Профиль Юлии на LinkedIn

https://www.linkedin.com/in/julia-eliseeva-413059120/ Мясо из мамонта

https://www.mammothmeatball.com/…

2 months, 3 weeks назад @ soundcloud.com
Podlodka #490 – AI-агенты Deep Dive
Podlodka #490 – AI-агенты Deep Dive Podlodka #490 – AI-агенты Deep Dive

Вадим Брилиантов создал и был техлидом Koog – фреймворка для AI-агентов на Kotlin. В выпуске разбираем, что на самом деле отличает агента от чат-бота: цикл, инструменты, память и контекст, и почему харнесс почти всегда держится на детерминированном коде, а не на модели. Вадим сравнивает архитектурные решения при построении агентов, объясняет, зачем нужна персистентность состояния и возобновление сессий, и где жёсткий граф-подход упирается в потолок. Отдельно поговорили про кодинг агентов. Разбираем, можно ли менять модель под капотом харнесса без потерь, почему промпты и skills лучше работают, если их писала та же модель, что их использует, зачем нужен ACP, почему A2A не взлетел. Если вам и…

3 months назад @ soundcloud.com
Podlodka #489 – Laravel
Podlodka #489 – Laravel Podlodka #489 – Laravel

Laravel любят за скорость разработки, ругают за магию и регулярно обвиняют в том, что он плодит жирные контроллеры. Вместе с Аделем Файзрахмановым – автором плагина Laravel Idea для PhpStorm и книги «Архитектура сложных веб-приложений. С примерами на Laravel» – разбираемся, что именно делает этот фреймворк лучшим на сегодняшний день способом писать код на PHP. Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! Telegram-чат: https://t.me/podlodka Telegram-канал: https://t.me/podlodkanews Twitter-аккаунт: https://twitter.com/PodcastPodlodka Ведущие в выпуске:

Евгений Кателла, Егор Толстой Полезные ссылки: Сайт Laravel

https://laravel.com/ Книга «Архитектура сложных веб-…

3 months, 1 week назад @ soundcloud.com
Проветримся! Проветримся!
последний пост 2 months назад
Иван Куклев: искусственный интеллект и фармакология
Иван Куклев: искусственный интеллект и фармакология

Иван Куклев, работает медицинским советником в онкологии и редких заболеваниях. Помогает врачам лучше разобраться с результатами клинических исследований и видит изнутри, как индустрия решает, какое лекарство дойдёт до пациента. Поговорили о том, где в этих решениях проходит этическая граница и что в них меняет AI. Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

2 months назад @ buzzsprout.com
Никита Ильтяков: реклама в больших языковых моделях
Никита Ильтяков: реклама в больших языковых моделях

Никита Ильтяков — студент программы по искусственному интеллекту AI360 от Яндекса, Сбера и 5 ведущих технических вузов. Никита сооснователь стартапа Gradius, который интегрирует контекстную рекламу в ответы нейросетей. Проект стал победителем Yandex AI Startup Lab в этом году. Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

2 months, 1 week назад @ buzzsprout.com
Евгений Датский: углеродные кредиты
Евгений Датский: углеродные кредиты

Евгений Датский CTO компании carbonHQ. https://carbonhq.earth/ Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

4 months, 1 week назад @ buzzsprout.com
Матвей Кукуй: Archestra AI
Матвей Кукуй: Archestra AI

Матвей Кукуй — CEO и сооснователь платформы для оркестрации ИИ агентов Archestra AI. https://archestra.ai/ Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

5 months, 2 weeks назад @ buzzsprout.com
Claude Mythos: кибербезопасность всё?
Claude Mythos: кибербезопасность всё?

Давайте разберёмся, что такое Claude Mythos и на что стоит обратить внимание в контексте самого шумного релиза моделей в апреле. телеграм подкаста: https://t.me/progulka Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

6 months, 1 week назад @ buzzsprout.com
Екатерина Кухтенко: диагностика вирусных заболеваний
Екатерина Кухтенко: диагностика вирусных заболеваний

Екатерина Кухтенко — фаундер стартапа VAir. VAir позволяет точно детектировать ряд вирусов в дыхании пациента. 11 Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

6 months, 2 weeks назад @ buzzsprout.com
Говард Tёрман: Иисус и те, кому нечего терять
Говард Tёрман: Иисус и те, кому нечего терять

Сегодня делаем обзор книги Говарда Тёрмана Книга: https://en.wikipedia.org/wiki/Jesus_and_the_Disinherited "Бродский" о доставке: https://www.instagram.com/reel/DXPziC8DH_0/ Свежий сабстак: https://caput.substack.com/p/it-is-not-your-ai Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

7 months назад @ buzzsprout.com
Андрей Себрант: экзоскелеты и роботы
Андрей Себрант: экзоскелеты и роботы

Андрей Себрант — директор Яндекса по стратегическому маркетингу, автор и ведущий подкаста "Трёп Себранта", автор телеграм канала TechSparks. Подкаст: https://sebrant.chat/ Канал: https://t.me/techsparks Support the show ApplePodcasts: https://apple.co/2Psx8yd Я.Музыка: https://clck.ru/JJB8y Патреон: https://www.patreon.com/progulka

8 months, 3 weeks назад @ buzzsprout.com
Comand Line Heroes by RedHat Comand Line Heroes by RedHat
последний пост None
Python Bytes Python Bytes
последний пост 2 часа назад
#505 Introducing diskcache-oxide
#505 Introducing diskcache-oxide #505 Introducing diskcache-oxide

Topics include tinyjobs: a SQLite job queue goes free-threaded, funkycache, Ghostman, and diskcache-oxide: A shared, durable disk cache.

2 часа назад @ pythonbytes.fm
#504 Who turned the GIL back on?
#504 Who turned the GIL back on? #504 Who turned the GIL back on?

Topics include PyPI's redesigned project pages, gilguard catches the import that turns the GIL back on, pip 26.3:, and All developer tools.

1 week назад @ pythonbytes.fm
#503 It’s not 85% HTML
#503 It’s not 85% HTML #503 It’s not 85% HTML

Topics include Your GitHub language bar is lying (how to fix it), Python Typing Survey 2026: developers mix type checkers, and AI is writing the hints, Flask Vibe - Build Apps You Can Understand, and Python on my wrist: MicroPython on a PineTime.

2 weeks назад @ pythonbytes.fm
#502 Introducing chameleon-rs
#502 Introducing chameleon-rs #502 Introducing chameleon-rs

Topics include , chameleon-rs, Bringing uv and ty together, and Stlite runs Streamlit apps entirely in the browser.

3 weeks назад @ pythonbytes.fm
#501 A Nod to Sir-Mix-Alot
#501 A Nod to Sir-Mix-Alot #501 A Nod to Sir-Mix-Alot

Topics include Nod: pause your Python program and open a notebook at any line, Polars 2.0 ships: streaming engine by default, spill-to-disk, and a row-order gotcha, django-cachalot caches your ORM queries and invalidates them for you, and Towards async transactions in Django.

4 weeks назад @ pythonbytes.fm
#500 Episode 500!
#500 Episode 500! #500 Episode 500!

Topics include and.

1 month назад @ pythonbytes.fm
#499 So many questions??
#499 So many questions?? #499 So many questions??

Topics include PEP 824 brings ?? and ??= to Python for None handling, Python 3.15 Python 3.10, asyncio.shield, and Pyxel: the retro game engine for Python.

1 month, 1 week назад @ pythonbytes.fm
#498 A Tiny Episode
#498 A Tiny Episode #498 A Tiny Episode

Topics include MemTensor / MemoryOS PyPI package hijacked via a malicious build backend, TinyMongo, , and One innocent dict read makes attribute access permanently slower.

1 month, 2 weeks назад @ pythonbytes.fm
#497 Faster than light profiling
#497 Faster than light profiling #497 Faster than light profiling

Topics include Tachyon: A sampling profiler ships in Python 3.15's stdlib, Python Workers are now generally available on Cloudflare, Flet 1.0 - build cross-platform apps in Python, and marimo-book: Build static books from marimo notebooks.

1 month, 3 weeks назад @ pythonbytes.fm
#496 A lake house in Seattle
#496 A lake house in Seattle #496 A lake house in Seattle

Topics include Pandas Should Go Extinct, Pydantic-pint puts real-world units in your Pydantic models, How Libraries Run Rust Inside Python (With PyO3), and AWS acquires DuckLabs.

2 months назад @ pythonbytes.fm
#495 Banned
#495 Banned #495 Banned

Topics include EuroPython 2026 videos are online, The State of Django 2026: Boring is so back, htmx 4.0.0 has been released, and Functionally Zen.

2 months, 1 week назад @ pythonbytes.fm
#494 Python Wrapture
#494 Python Wrapture #494 Python Wrapture

Topics include OpenAI's Python SDK has migrated to HTTPX2, TMOG - Native Task Manager for macOS, Windows, and Linux, wrapture - one wrapper for mocking, tracing, and observability, and linkedin2md.

2 months, 2 weeks назад @ pythonbytes.fm
#493 CalVer and LTS
#493 CalVer and LTS #493 CalVer and LTS

Topics include Web UIs for your reverse proxy, , , and Django’s annual releases make every version an LTS.

2 months, 3 weeks назад @ pythonbytes.fm
#492 Codeberg Puts Head in Sand
#492 Codeberg Puts Head in Sand #492 Codeberg Puts Head in Sand

Topics include , Codeberg’s AI-code ban tests its role as a GitHub alternative, , , , and.

3 months назад @ pythonbytes.fm
#491 Feeling Judged
#491 Feeling Judged #491 Feeling Judged

Topics include , Post-quantum crypto lands in Python, MCP goes stateless — and FastMCP gets renamed, and inshellisense - IDE style command line auto complete.

3 months, 1 week назад @ pythonbytes.fm
Software Engineering Daily Software Engineering Daily
последний пост 15 часов назад
The Technical Interview Is Broken
The Technical Interview Is Broken

The technical interview has long been used as a proxy for actual job performance. Brain teasers, data structure puzzles, or reversing a linked list became the price of admission to employment as a developer in many organizations, even though few engineers do that work day to day. It would seem AI has now broken that model entirely, since an LLM can one-shot any classic algorithm question. This is forcing tech companies to rethink what an interview should measure.

Vivek Ravisankar is the co-founder and CEO of HackerRank, which is one of the most well-known platforms for tech interview practice problems. In this episode, Vivek joins Josh Goldberg to discuss why old-style interviews stopped wo…

15 часов назад @ softwareengineeringdaily.com
Fraud Prevention in the Age of AI Agents
Fraud Prevention in the Age of AI Agents

A major challenge for almost every online service is reliably identifying users, and knowing whether a given user or agent can be trusted. Historically, web services leaned on cookies stored in the browser to remember a visitor and recognize them when they return. The problem is that cookies live in the user’s own browser and are easy to remove, block, or avoid entirely, so a bad actor can simply clear them to escape recognition. IP blocking and CAPTCHA puzzles are firmer approaches, but they can frustrate legitimate users while doing little to stop a determined attacker. That leaves developers stuck between being too lax and losing control, or too strict and driving real users away.

Finger…

5 days, 15 hours назад @ softwareengineeringdaily.com
GitLab and the Evolution of DevSecOps
GitLab and the Evolution of DevSecOps

AI coding agents can already reach well beyond the code in front of them. Through connections to tools like Slack, Jira, and Sentry, an agent can pull in issues, discussions, and production signals from across an organization. However, that context is scattered across many separate systems, with no shared map of how it all connects and no common controls over what an agent is allowed to touch. For a large enterprise, stitching that together while staying compliant, auditable, and sometimes fully cut off from the internet is a hard problem.

GitLab runs one of the major platforms where software gets built, hosted, and shipped. That gives it a wide view of everything around the code, which sha…

1 week назад @ softwareengineeringdaily.com
SED News: PHP’s Megabug, a Hidden Mic at OpenAI, and Dead AI Products
SED News: PHP’s Megabug, a Hidden Mic at OpenAI, and Dead AI Products

SED News is a monthly podcast from Software Engineering Daily where hosts Gregor Vand and Sean Falconer break down the biggest stories shaping software engineering, Silicon Valley, and the broader tech industry.

In this episode, Gregor and Sean cover the PHP remote code execution flaw that hit an estimated 70 percent of the internet, the recording device an OpenAI employee hid in a conference room, and a busy run of deals including Chroma joining Replit, Cloudflare taking Deno, and Supabase acquiring Turso.

The main topic tours the AI graveyard, sorting recent product failures into patterns: features swallowed by bigger platforms, runaway hits too costly or risky to sustain, interfaces made…

1 week, 5 days назад @ softwareengineeringdaily.com
Demis Hassabis and the Race to Build AI with Sebastian Mallaby
Demis Hassabis and the Race to Build AI with Sebastian Mallaby

Demis Hassabis founded DeepMind in 2010, before machines could reliably tell a cat from a dog. He believed that artificial general intelligence was achievable, and that it should be built safely and deliberately. Along the way, Hassabis shared the 2024 Nobel Prize in Chemistry for AlphaFold, the system that cracked the fifty-year problem of predicting protein structures. Fifteen years on, the LLM race has erupted across rival labs and countries, and AI has become one of the most consequential and contested technologies of the era.

Sebastian Mallaby is a two-time Pulitzer Prize finalist and a longtime chronicler of the collision between innovation and capital, from hedge funds to central ban…

2 weeks назад @ softwareengineeringdaily.com
AI Regulation and What Every Tech Company Should Know
AI Regulation and What Every Tech Company Should Know

The rapid rise of AI has set off a flurry of legal and regulatory activity. There is no single AI law to follow. Instead, there are overlapping circles of regulation, where privacy, cybersecurity, consumer protection, employment, and IP laws all continue to apply alongside newer AI-specific rules. Europe has its EU AI Act, but the U.S. has no federal equivalent yet. In its place is an emerging patchwork of more than 150 state AI laws, and the picture shifts every few months as new legislation and guidelines arrive. For engineers and tech companies, it can feel impossible to know what applies and where the real risks lie.

Shannon Yavorsky is a data lawyer who co-leads the Cyber, Privacy and …

2 weeks, 5 days назад @ softwareengineeringdaily.com
Managing AI Coding Costs at Scale
Managing AI Coding Costs at Scale

Over the past couple of years, companies raced to get their employees using AI, often encouraging them to lean on it as much as possible. However, as AI coding tools spread through engineering teams, many companies watched their AI bills explode. That kind of runaway cost growth can threaten a business, so the new challenge is capturing the productivity gains from AI without the spending spiraling out of control.

Databricks is a data and AI company that hit this problem early, running AI tools across thousands of its own engineers. Rather than clamp down on usage, the team built a set of practical ways to manage the cost, from taking advantage of steadily falling model prices to automatical…

3 weeks назад @ softwareengineeringdaily.com
Blitzy and Autonomous Software Development for Enterprise
Blitzy and Autonomous Software Development for Enterprise

Codebases in enterprise organizations often span hundreds of thousands, or even millions, of lines of code. In many cases, changes must follow established patterns precisely, or risk introducing costly security or operational issues. A common challenge with AI coding tools is that they struggle at this scale: LLM context windows cover only a fraction of a large codebase, and output quality degrades the longer an agent runs.

Blitzy is an autonomous software development platform for the enterprise. It starts by understanding your entire codebase, building a knowledge graph that acts as a shared source of truth. From a well-defined spec that engineers review and approve, it orchestrates specia…

3 weeks, 5 days назад @ softwareengineeringdaily.com
Physical AI at NVIDIA
Physical AI at NVIDIA

In recent years, the main impact of AI has been on the digital world, and most notably software engineering. However, its longer-term effect on the physical world may prove even more profound, reshaping how cars drive themselves, how factories run, and how robots move through homes and warehouses.

World models are at the center of the movement to bring AI into the physical space. These models take in observations of the current state of the world and predict what comes next, which lets a robot plan its next move or a car anticipate the road ahead. NVIDIA has been building a family of these models called Cosmos, and sits at the frontier of physical AI and robotics.

Amit Goel has been at NVID…

4 weeks назад @ softwareengineeringdaily.com
Software Verification in the Age of Coding Agents
Software Verification in the Age of Coding Agents

Software testing is widely understood as essential to building reliable systems, and it’s one of the hardest things to get right. A fundamental issue is that tests are good at confirming the behavior a team expects, but the most damaging failures tend to hide in the edge cases no one thought to check during development. Those blind spots are only growing as AI produces more code that no human has closely reviewed.

Antithesis is a software verification company built around an approach called deterministic simulation testing. The platform runs a customer’s software in a fully controlled environment, exploring thousands of different paths through it at runtime. Crucially, the paths aren’t pre-…

1 month назад @ softwareengineeringdaily.com
SED News: Jev, Meta’s Muse, and the AI Slowdown Paradox
SED News: Jev, Meta’s Muse, and the AI Slowdown Paradox

SED News is a monthly podcast from Software Engineering Daily where hosts Gregor Vand and Sean Falconer break down the biggest stories shaping software engineering, Silicon Valley, and the broader tech industry.

In this episode, Gregor and Sean cover a wave of new product drops, including Jev from TypeSafe AI, a model that returns scored, type-safe structured responses for machine-to-machine tasks like routing and classification rather than human-style chat. They also dig into Meta‘s Muse, a personal AI assistant with a companion keychain device, and the upcoming IPO of Nscale, a former crypto-mining outfit turned “neocloud” inference provider whose filing leans heavily on a single unnamed …

1 month назад @ softwareengineeringdaily.com
Steve Jobs in Exile
Steve Jobs in Exile

The popular story of Steve Jobs is that he co-founded Apple, was pushed out, wandered through a failed venture called NeXT, then returned to save the company and usher in the iPod and iPhone. That version is memorable, widely repeated, and, in an important sense, wrong. His years at NeXT are usually treated as a footnote, when they were among the most consequential of his life and career.

Geoffrey Cain is the author of Steve Jobs in Exile, which draws on previously unpublished material and new interviews to illuminate the NeXT years. The book argues that NeXT was not a failure but the hidden turning point. Its operating system, NeXTSTEP, became the foundation of Mac OS X and, later, the iPh…

1 month, 1 week назад @ softwareengineeringdaily.com
Security in the Age of Instant Exploits
Security in the Age of Instant Exploits

In the world of software security, there was historically a comfortable lag between the moment a vulnerability became public and the moment attackers could exploit it. This lag was often measured in months, but AI models can now read a vulnerability report and generate a working exploit almost instantly. They can scan the entire internet for exposed secrets at a scale no human team could match, and surface complex flaws that traditional tools missed for years. However, the same capabilities are just as available to defenders, and there is a case to be made that defenders hold the stronger hand.

Alon Schindel is the VP of AI and Threat Research at Wiz, which is a cloud security platform acqu…

1 month, 1 week назад @ softwareengineeringdaily.com
The State of Browser Testing
The State of Browser Testing

Automated browser testing is a foundational technology that many web developers rely on. Modern tooling lets a single test drive Chrome, Firefox, and Safari the same way, a triumph of software engineering built on years of standardization work. That standardization emerged from the interplay between open source projects, browser vendors, and standards bodies like the W3C.

David Burns is a longtime Selenium and WebDriver contributor, a veteran of Mozilla, and is currently the Head of Developer Advocacy and Open Source at BrowserStack. In this episode, David joins Josh Goldberg to discuss how open source projects, browser vendors, and standards bodies fit together, a practical philosophy of t…

1 month, 2 weeks назад @ softwareengineeringdaily.com
Cory Doctorow on AI, Work, and Power
Cory Doctorow on AI, Work, and Power

Cory Doctorow is a science fiction author, journalist, and technology activist, and a special advisor to the Electronic Frontier Foundation. He is the author of dozens of books, including the nonfiction Enshittification: Why Everything Suddenly Got Worse and What to Do About It and the novel Picks and Shovels. His work spans tech policy books like The Internet Con and Chokepoint Capitalism, the solarpunk novels Walkaway and The Lost Cause, and the bestselling YA Little Brother series. He holds honorary doctorates from York University and the Open University, writes the daily blog Pluralistic.net, and lives in Los Angeles and London.

In this episode, Cory joins Josh Goldberg to talk about hi…

1 month, 2 weeks назад @ softwareengineeringdaily.com
Habr Podcasts Habr Podcasts
последний пост None
Мысли и Методы Мысли и Методы
последний пост None
Трёп Себранта Трёп Себранта
последний пост None
⌨ Coding
Martin Fowler
последний пост 10 часов назад
Deterministic Simulation Testing
Deterministic Simulation Testing Deterministic Simulation Testing

This is the core idea behind deterministic simulation testing.

Using Tickloom, a Java library for deterministic simulation which I built for teaching distributed systems, we will see how distributed systems can be tested by simulating network and storage.

FoundationDB, an open-source distributed transactional key-value store, pioneered deterministic simulation testing for distributed databases using a custom C++ coroutine language and deterministic scheduler.

public interface Tickable { void tick(); } source The main thread executing the tick calls must never block.

class Cluster public void tickUntil(BooleanSupplier p) { int tickCount = 0; while (!p.getAsBoolean()) { if (tickCount > DEFAUL…

10 часов назад @ martinfowler.com
Bliki: Generated Glossary
Bliki: Generated Glossary Bliki: Generated Glossary

One technique to aid this is to use an LLM to generate a glossary of the terminology in that domain, and make this glossary available for any LLMs doing work in those circumstances.

Once we have a list of specialized vocabulary we can ask the agent to produce a glossary, with definitions for each term.

When there are different bounded contexts it can be interesting to compare different glossaries, or to get LLMs to compare glossaries and describe differences in usage.

Glossaries can inform generation of code, so that names within the generated software fit the particular vocabulary of the enterprise.

In this case a customer has a different bounded context to the part of the enterprise servi…

5 days, 11 hours назад @ martinfowler.com
Tests as data: ensuring AI-generated code does what we want
Tests as data: ensuring AI-generated code does what we want Tests as data: ensuring AI-generated code does what we want

Another one of the original XP practices was Customer tests , also known as Acceptance tests .

The fact that customers don't want to write customer tests is often quoted against the practice of customer tests.

Tired of copying the test data from Excel to test code, he wrote a program that read the test data from Excel and executed the tests automatically.

Implementation hintsNot always end-to-end It is common to implement customer tests as end-to-end tests passing through the UI.

One problem with all customer tests being end-to-end is that the tests become slower, and more fragile.

6 days, 10 hours назад @ martinfowler.com
Fragments: November 10
Fragments: November 10 Fragments: November 10

 ❄                ❄                ❄                ❄                ❄Ben Thompson’s Stratechery newsletter reflects on the recent election’s impact on data centers.

 ❄                ❄                ❄                ❄                ❄I’ve been a long-time fan of Hadley Wickham, for how he has tamed the rather messy world of R programming into a well-designed tidyverse.

 ❄                ❄                ❄                ❄                ❄There’s a creepy excit…

1 week назад @ martinfowler.com
Long-horizon agents and durable execution
Long-horizon agents and durable execution Long-horizon agents and durable execution

The agent's process may restart, supplier calls may fail, and messages may be delayed, duplicated, or missed.

Durable execution is an emerging pattern that helps agents recover from these failures and pursue their goals.

Safety stock : stock held in reserve against changes in demand and in the supplier's lead time.

A process workflow is a durable workflow that carries out one piece of work (e.g., a replenishment) and then finishes.

An entity workflow is a durable workflow that represents one business entity (e.g., a SKU) for the lifetime of that entity.

1 week назад @ martinfowler.com
The Data Product Platform Navigator
The Data Product Platform Navigator The Data Product Platform Navigator

To build a complete data product, we need various technologies such as compute to run data transformations, data storage, data ingestion tools, data catalogs, query engines, quality tools, and more.

Consider a first data product developer who sets out to create a new data product.

In this scenario, the organization establishes a dedicated Data Product & Data Mesh Platform Team that treats the platform as a product.

In summary, a data product developer just clicks 'Create Data Product', and the platform wires the technology and infrastructure together as a Data Product.

By removing the knowledge bottleneck, the platform empowers data product developers with more autonomy, which is crucial fo…

1 week, 5 days назад @ martinfowler.com
Bliki: LLM Voice
Bliki: LLM Voice Bliki: LLM Voice

Sometimes when I read a post, I get the growing feeling that I'm reading the output of an LLM.

I'm also suspicious of my own ability to accurately recognize LLM voice.

In particular I strongly recommend that authors should not fall into the trap of getting the LLM to write a draft.

Some have found LLM translation an important part to their communication with those of us who know rather less Marathi.

There are situations where it would be reasonable for even a native Englishman to let LLMs write the prose.

2 weeks, 5 days назад @ martinfowler.com
Why are good developers so wary of agentic development?
Why are good developers so wary of agentic development? Why are good developers so wary of agentic development?

TL;DRGood developers’ caution about agentic development comes from knowing that built isn’t the same as working in production.

In September, a discussion we had on agentic development, which pushed it to its limits, finally helped me see clearly what that fear is.

Building it rightThoughtworkers care deeply about building the right thing and building it right.

Were too many agents working in parallel and stepping on each other’s changes?

Developers need to bring their experience into those experiments and be prepared to find that some of their assumptions no longer hold.

2 weeks, 5 days назад @ martinfowler.com
Fragments: October 28
Fragments: October 28 Fragments: October 28

 ❄                ❄                ❄                ❄                ❄That observation particularly resonates with me today, as I’ve just spent the weekend at Foocamp, an open space event run by O’Reilly.

 ❄                ❄                ❄                ❄                ❄Laurie Voss says today is 1997On Saturday, Apollo’s chief economist Torsten Slok published No Signs of AI Payoff Outside the Tech Sector.

 ❄                ❄                ❄                ❄          …

2 weeks, 6 days назад @ martinfowler.com
Fragments: October 21
Fragments: October 21 Fragments: October 21

 ❄                ❄                ❄                ❄                ❄I was sad to hear that the Grace Hopper Celebration is canceled this year.

 ❄                ❄                ❄                ❄                ❄I’ve always found Cindy Sridharan’s writing to be worth reading, and she’s broken a quiet period with a monster of an article: How to effectively debug when you no longer understand the code.

The agent first needs to identify the data points in the factual tier that are actually related to the bug.

A table of hypotheses and si…

3 weeks, 6 days назад @ martinfowler.com
When Software Meets Hardware
When Software Meets Hardware When Software Meets Hardware

When software meets hardware, engineering principles remain largely the same, but the sensible defaults often change.

Our team knew software engineering well.

We thought the software engineering skills would apply here too, and it did, the engineering principles remain the same, but the default practices changed.

Consider the physical world part of the development lifecycle In conventional software, the development environment is usually made up of software tools.

This allowed us to exercise the downstream systems at store scale without needing hundreds of physical devices for every test.

1 month назад @ martinfowler.com
Build your slide template
Build your slide template Build your slide template

Building a slide template starts with three foundational choices — colours, fonts and layouts.

The corporate template If you work at a large enough corporation, your employer may have provided a corporate slide template.

Through the rest of this article, I’ll show you how to build your own template, but you can also use that advice to unpack the key elements of any corporate slide template.

If you understand these fundamentals of font choice and typographic spacing, you have enough typography knowledge to build a slide template.

Try it yourself Before you read the next post, how about building yourself a new slide template?

1 month назад @ martinfowler.com
The Craft of Practitioner Voice
The Craft of Practitioner Voice The Craft of Practitioner Voice

Practitioner Voice writes for people who recognize the pattern from their own experience.

Practitioner Voice names the tension and leaves it live.

Practitioner Voice is the thing only you can write, because it's built from what only you have lived.

Practitioner Voice opens with the conclusion and “lets the rest of the piece be explanation, not proof.

The braided narrative suits Practitioner Voice because it keeps tension live across multiple dimensions simultaneously.

1 month назад @ martinfowler.com
Are Harnesses Worth the Cost?
Are Harnesses Worth the Cost? Are Harnesses Worth the Cost?

But a cost-optimized model, GPT-6 Luna, succeeded in only 3 of 10 unharnessed runs and all 10 with the harness.

Both conditions began with the application brief and baseline repository instructions in separate, private workspaces.

The application brief Every attempt began with a detailed application brief.

Unharnessed GPT-6 Luna runs passed 94.8% of the functional checks.

Reusing interface contracts and checks across implementations could spread the setup cost over time, but I did not measure that reuse or the resulting total cost.

1 month назад @ martinfowler.com
Fragments: October 4
Fragments: October  4 Fragments: October 4

 ❄                ❄                ❄                ❄                ❄DDD Europe have released the video of Gien Verschatse interviewing Eric Evans and myself at the conference in June.

 ❄                ❄                ❄                ❄                ❄Paul Graham:There were a lot of things that only worked because there’s a limit to the rate at which humans can operate.

 ❄                ❄                ❄                ❄                ❄In a later post, Sam pond…

1 month, 1 week назад @ martinfowler.com
Антон Жиянов Антон Жиянов
последний пост None