Anthropic перевела монорепозиторий с Git на собственную систему Scion

В Anthropic число сливаемых изменений выросло, по данным компании, примерно с 2500 в день в мае до более чем 30 000 в сентябре. Компания связывает эту нагрузку с тем, что Claude пишет код и выполняет исследовательские итерации быстрее, чем прежняя инфраструктура успевает их обслуживать. Scion создавали не как универсальную замену Git для всех разработчиков, а под собственный большой монорепозиторий. Одновременно Anthropic построила интерфейс код-ревью Antique, поиск по коду и систему управления доступом к исходникам.

Масштаб репозитория объясняет, почему обычные операции стали дорогими. История основной ветки занимает почти 100 ГБ, сжатая рабочая копия – более 25 ГБ, а CI выполняет около 25 млн checkout в день, ещё до учёта рабочих сред разработчиков и песочниц агентов. Checkout здесь – получение нужной версии файлов для сборки или теста. Если каждый раз загружать данные из Git без оптимизаций, объём передачи, по расчёту Anthropic, превысил бы 600 ПБ в день. Это оценка гипотетической нагрузки, а не фактический трафик компании.

Anthropic уже пользовалась частичными клонами, локальными зеркалами Git и снимками репозитория. В пиковый момент, по её данным, работало несколько сотен зеркал. Такие способы уменьшали объём загрузок, но при росте числа изменений снимки быстрее устаревали, а операции, которым нужна история, например просмотр различий и поиск автора строки, требовали всё более сложной настройки. Git устроен так, чтобы локальная копия могла содержать историю и выполнять многие действия без сети; при огромном репозитории и частых запросах за эту самостоятельность приходится платить хранением и синхронизацией.

Scion переносит больше работы на сервер. Его запросы к исходникам доступны через API, поэтому внутреннему инструменту не всегда требуется локальный репозиторий. Базовая единица изменений хранит список изменённых файлов и ссылки на их сжатое содержимое в объектном хранилище, а не указатель на полное дерево файлов, как коммит Git. Это меняет баланс: клиентам нужно меньше локальных данных, зато возрастает зависимость от быстрого и доступного серверного слоя. Именно такой обмен Anthropic сочла подходящим для своих CI-задач и агентных окружений.

Переход всего монорепозитория с Git на Scion занял пять месяцев. Anthropic подчёркивает, что её нагрузка необычна: компания использует Claude для программирования гораздо активнее большинства организаций и не ожидает, что всем срочно понадобится собственная система версий. Но пример позволяет точнее увидеть пределы масштабирования агентной разработки: даже если код создаётся быстро, каждое изменение всё равно нужно получить, проверить и безопасно объединить с остальными.