Video
All Code Is Slop (Except Mine) — Lauren Tan, SpaceXSI
2026.11.17
·YouTube·by Mineru#Agent#AI#DL#JavaScript#React
핵심 포인트
- 1포테이토는 에이전트의 생산성을 극대화하기 위해 코드베이스를 정원처럼 관리하며, 결정론적 검사와 강력한 API 제약 조건을 통해 에이전트가 올바른 작업을 수행하도록 강제해야 한다고 강조합니다.
- 2에이전트의 결과물을 신뢰하기 위해 런타임 검증과 정형 검증(Formal Verification)을 도입하여 테스트 및 디버깅 비용을 획기적으로 낮추고 소프트웨어 테스트의 황금기를 활용해야 합니다.
- 3탄탄한 유기적 아키텍처와 자동화된 검증 체계를 구축하면 코드 리뷰 부담을 최소화하면서도, 수천 개의 풀 리퀘스트를 안정적으로 프로덕션에 반영하는 고속의 소프트웨어 팩토리를 실현할 수 있습니다.
본 강연은 SpaceX SI의 엔지니어 포테이토(Potato)가 에이전트 기반 소프트웨어 개발 환경을 구축하여 코드 품질을 유지하면서도 생산성을 극대화한 경험과 전략을 다룹니다. 핵심은 에이전트를 단순히 코딩을 시키는 도구가 아닌, '신뢰' 가능한 시스템으로 구축하는 것입니다.
1. 에이전트 환경의 역 피라미드 구조 (Inverted Pyramid Strategy)
에이전트가 올바른 작업을 수행하도록 강제하기 위해 다음 세 계층에 투자해야 합니다.- 기반 계층 (Deterministic Layer): 코드 베이스 자체를 활용하는 영역입니다. 좋은 API 설계, 아키텍처, 린트(Lint) 규칙, 타입 시스템 등을 통해 에이전트가 잘못된 방향으로 나아갈 가능성을 원천 차단합니다.
- 검증 계층 (Runtime & Formal Verification): 에이전트의 결과물을 검증하는 단계입니다. 버그를 찾고 시스템의 불변 속성(Invariant)을 확인하며, 에이전트가 의도를 정확히 파악했는지 검증합니다.
- 판단 계층 (Prose & Heuristics): 판단력이 필요한 규칙이나
agents.md와 같은 문장 기반 가이드라인입니다.
2. 핵심 방법론 및 기술적 구현
- 유기적 아키텍처(Organic Architecture): 코드 베이스를 잘 가꿔진 정원으로 비유하며, 안티 패턴이나 기술 부채를 방치하면 에이전트가 이를 복제하여 악순환을 만든다고 지적합니다.
- 제약 조건을 통한 자동화:
- 코드 강제성: React의
useEffect와 같이 오용 가능성이 높은 패턴을 금지하고, 대신 안전한 API 내부에서만 사용하도록 제약합니다. - 의존성 제어: 디렉터리 구조(예: Electron renderer vs main)와 린트 규칙을 결합하여 잘못된 모듈 호출을 물리적으로 차단합니다.
- 주석 금지: 낡은 정보가 되기 쉬운 주석 대신, 에이전트가 근본적인 해결책을 찾도록 유도하는 오류 메시지 중심의 설계를 도입합니다.
- 코드 강제성: React의
- 고도화된 검증 기술:
- Feature Map: 사용자 관점의 기능을 공유 어휘로 정의하여 에이전트의 추측을 방지합니다.
- Formal Verification: 를 활용하여 주요 사용자 흐름을 모델 체킹(Model Checking)하고, Lean을 통해 특정 알고리즘의 정합성을 증명합니다.
- Property-based Testing: Bombadil 라이브러리 등을 사용하여 UI 속성 기반 테스트를 수행합니다.
3. 결과 및 결론
이러한 체계적인 투자를 통해 팀은 월 11,000개의 풀 리퀘스트(PR)를 처리하면서도, 되돌려지는 PR 비율을 0.5% 미만으로 유지하는 성과를 거두었습니다.- 생산성 지표: 단순한 자동화를 넘어, 빌드 전체를 퍼징(Fuzzing) 테스트하고 버그 수정 PR 생성 및 자동 병합까지 수행하는 자율 시스템을 구축했습니다.
- 핵심 철학: 소프트웨어 엔지니어링의 본질은 에이전트에게 맹목적으로 의존하는 것이 아니라, 결정론적 검사(Deterministic Checks)와 기술적 기반을 강화하여 에이전트가 실수할 수 없는 환경을 만드는 것입니다.
결론적으로, 코드 베이스가 엉망인 상태에서 자동화를 도입하면 더 많은 엉망인 코드만 생산될 뿐입니다. 따라서 코드 품질을 개선하고 검증 절차를 강화하는 선행 작업이 에이전트 기반 '소프트웨어 팩토리' 구축의 필수 전제 조건임을 강조합니다.