- 코드 줄 수, 수락률, 도입률로 Copilot 효과를 잰 보고서는 전부 다른 걸 측정한 것이다.
- 소프트웨어 한계비용이 0으로 가는 시대, 구매 기준이 ‘기능’에서 ‘판단력’으로 이동했다.
- 오픈소스는 더 이상 개발 방식이 아니다. Android·Kubernetes·RISC-V를 만든 ‘전략 무기’다.
5월 22~23일 GeekNews TOP3는 우연인지 모두 같은 신경을 건드린다. 하나는 우리가 도입한 도구를 어떻게 평가할 것인가, 하나는 그 도구로 만든 제품이 더 이상 차별화되지 않을 때 무엇으로 살아남을 것인가, 마지막 하나는 그 모든 변화의 밑바닥에서 누가 판을 짜고 있는가다. CEO·기술 리더가 오늘 한 번은 멈춰서 들여다봐야 하는 세 가지 질문을 정리했다.
AI 코딩 효과를 잘못 측정하는 열두 가지 방식
“코드 30% 더 빨리 쓴다”가 생산성 증가의 증거가 되지 못하는 이유
Software Carpentry 공동 창립자 Greg Wilson은 우리가 AI 보조 코딩을 평가할 때 반복적으로 빠지는 함정 12가지를 정리했다. 코드 줄 수·커밋 수·티켓 수는 Goodhart의 법칙에 그대로 노출돼 측정 대상이 되는 순간 조작된다. 400명 대상 기업 연구에서 평균 수락률 33%가 나왔지만, 그 코드가 정확한지·안전한지는 추적되지 않았다.
더 결정적인 건 실험 설계 자체다. 흔히 인용되는 55% 속도 향상 연구는 ’90분 동안 JS HTTP 서버 짜기’ 같은 그린필드 장난감 과제였다. 반면 숙련된 오픈소스 개발자 대상 무작위 대조 시험(METR)에서는 AI 도구 접근권을 받은 그룹이 오히려 과제 시간을 19% 더 썼다. 본인들은 빨라졌다고 느꼈다. Cursor를 도입한 807개 저장소 분석에서도 단기 속도는 올랐지만, 코드 복잡도와 정적 분석 경고는 지속적으로 증가했다.
시스템 관점 누락도 치명적이다. 한 연구에서 시니어 개발자는 AI 코드 리뷰 부하가 6.5% 늘면서 본인 생산성이 19% 떨어졌다. AI는 코드 작성 단계만 가속하고 리뷰·디버깅·보안 점검은 그대로 사람에게 남는다.
Tech Insight — 도입률·수락률만 보고 ROI 보고서를 올리는 팀이라면 오늘 KPI를 다시 짜야 한다. 봐야 할 건 PR 머지 시점부터 프로덕션 배포까지의 리드타임, 머지 후 30일 내 발생한 버그 비율, 보안 스캐너 신규 경고 수 같은 시스템 지표다. 짧은 신기효과 기간이 아니라 3~6개월 종단 추적이 필요하다.
제품의 시대는 끝났다, 두뇌의 시대가 온다
소프트웨어 한계비용 0의 시대, 구매 기준이 바뀐다
소프트웨어 한계 생산비용이 0에 수렴하고 카테고리마다 도구가 폭증해도 가격은 죽음의 나선으로 추락하지 않는다. Mr.Market의 분석에 따르면, 구매 동기 자체가 ‘내가 만들 수 없어서’에서 ‘만들 시간이나 유지보수 의지가 없어서’로 이동했기 때문이다. 도구 선택의 새 기준은 단 하나, 그 소프트웨어를 운영하는 사람들의 판단력이다.
규제 산업의 대형 기업이 묻는 질문은 ROI가 아니다. “누가 우리를 큰 곤란에 빠뜨리지 않을 것인가, 누구에게 조직의 미래를 맡길 수 있는가, 누가 충분한 선견지명으로 시스템을 다시 뜯어내는 고통을 반복하지 않게 해줄 것인가.” 펀드 매니저 평가와 똑같은 구조다. 전략은 복제되지만 알파는 복제되지 않는다.
21세기의 새 생산 요소는 ‘대규모 의사결정 품질’이다. 실행 비용은 자동화·AI로 빠르게 떨어지지만, 무엇을 실행할지에 대한 최선의 판단 비용은 떨어지지 않는다. 두 회사가 같은 LLM API·CRM·데이터 웨어하우스를 쓰더라도, 결과를 가르는 건 수많은 작은 의사결정의 누적 품질이다. 그래서 창업자가 다음으로 갖춰야 할 무기는 제품 데모가 아니라 예측 품질·결정 투명성·인식론적 정직성을 공개적으로 입증하는 ‘주주서한급 콘텐츠’다.
Tech Insight — 회사 홈페이지에 ‘기능 비교표’만 있고 창업자의 시장 예측·틀렸던 사례·로드맵 이력이 없다면 엔터프라이즈 구매자에겐 사실상 평가할 근거가 없는 셈이다. 검증 가능한 구체적 주장을 공개 트랙 레코드로 쌓는 일이, 기능 한 개 추가보다 장기적으로 더 큰 해자다.
오픈소스 소프트웨어에서 오픈소스 ‘전략’으로
Android·Kubernetes·RISC-V가 같은 플레이북에서 나왔다
P3 Institute는 지난 15년의 사례 6개(Android·OCP·Kubernetes·LF Networking·RISC-V·Overture Maps)를 묶어 ‘오픈소스 전략’이라는 동일 플레이북을 추출했다. 강한 경쟁자 무력화, 비싼 인풋 상품화, 산업 표준 통일이라는 세 가지 목적을 위해 대기업이 의도적으로 오픈소스를 쥐는 방식이다. Google이 Apple의 모바일 지배를 Android로, AWS의 클라우드 지배를 Kubernetes로 무력화한 것이 같은 패턴이다.
데이터가 이를 뒷받침한다. IBM 단독으로 Red Hat·HashiCorp·Confluent 등 오픈소스 기업 인수에 500억 달러 이상을 썼다. CNCF 회원은 800개를 넘고, 프로덕션 생성형 AI 워크로드의 66%가 Kubernetes 위에서 돈다. RISC-V는 출시 시점 동급 최강이라 평가받은 Alibaba C950을 포함해 전 세계 200억 개 코어가 작동 중이고, 본부가 스위스에 있어 ‘제재 불가능’이다.
관전 포인트는 자율주행과 AI다. Waymo·Tesla 외 50여 개 기업이 죄수의 딜레마에 갇혀 있고, GM Cruise는 100억 달러를 쓰고 종료했다. AI에서는 DeepSeek·Qwen·Kimi가 오픈 가중치 프론티어를 선도 중이고, Meta는 ‘Open Source AI is the Path Forward’ 선언 2년 만에 첫 폐쇄 프론티어 모델 Muse Spark를 냈다. 신뢰할 만한 서구 오픈 프론티어 부재가 굳어지면 2030년 글로벌 AI 기본값이 중국 모델이 될 수 있다는 게 P3의 진단이다.
Tech Insight — 한국 IT 기업이 자사의 핵심 의존 인프라(데이터·AI 모델·결제·지도) 중 ‘단일 기업의 닫힌 해자’에 묶여 있는 항목이 몇 개인지 점검할 시점이다. 오픈소스는 더 이상 비용 절감 카드가 아니라 공급자 권력을 끊는 협상 카드다. 이걸 보드 회의 어젠다에 올리는 회사와 그렇지 않은 회사의 5년 후 위치가 크게 갈린다.
관련 글
- 잭 도시가 6천명한테 한 짓 — Tech Digest 5/22
- 긱뉴스 2위 보고 다들 멈췄다 — Tech Digest 5/21
- 엔비디아, 큰일 났습니다 — MS Maia 칩 협상
- 섀도우 AI, 다 들켰습니다 — Microsoft Agent 365
- Claude 2.5배 빨라진 댓가 — Fast Mode 분석
출처
- third-bit.com — Twelve Ways to Be Wrong About AI-Assisted Coding (2026.05.20)
- mrmarket.bearblog.dev — Products Are Out, Brains Are In
- P3 Institute — From Open Source Software to Open Source Strategy
- GeekNews (news.hada.io) — TOP3 큐레이션, 2026.05.23
AI Biz Insider · Tech Digest · aibizinsider.com
댓글 남기기