매일 코딩 소식 · 2026년 9월 19일

2026년 9월 19일 AI 코딩 소식

TL;DR

  • 7월 23일부터 25일까지 72시간이 안 걸린 일이에요. 오픈AI 커뮤니티 포럼(Discourse)이 이미지 변환에 쓰는 libheif 의 힙 오버플로(수정은 있었지만 보안 수정으로 표시되지 않아 데비안에 백포트되지 않았고 당시 CVE 도 없던 결함)로 원격 코드 실행을 얻은 뒤, 오픈AI SSO 설정 결함으로 직원 여러 명의 챗GPT·코덱스 계정을 넘겨받아 직원 코덱스에 연결된 깃허브로 내부 모노레포 openai/openai 에 PR 을 열었어요. 오푸스 4.8 은 ASLR 이 켜진 상태에서 여러 세션을 돌려도 동작하는 익스플로잇을 못 만들었는데 7월 24일 저녁에 나온 오푸스 5 는 몇 시간 만에 ARM64 익스플로잇을 만들었고, 연구팀은 자기들 Discourse 인스턴스를 CTF 처럼 보이는 주소로 프록시해 모델이 원격 대상 익스플로잇을 거부하지 않게 한 뒤 /goal 자율 루프를 돌렸다고 적었어요. 다만 완전 자율은 아니었고 사람의 지도가 중요했다고 스스로 밝혔고, 오픈AI 는 9월 18일 언론에 커뮤니티 로그인 토큰 권한을 좁히고 영향받은 토큰·세션을 폐기했다고 밝혔으며 6,500달러 포상금은 포럼이 아니라 오픈AI 쪽 결함에 준 것이라고 했어요.
  • 앤트로픽이 9월 18일 낸 클로드 코드 v2.1.277 릴리스 노트에 「CLAUDE.md 가 없는 프로젝트에서는 AGENTS.md 를 대신 읽는다」는 항목이 들어갔고, 공식 문서 메모리 페이지에도 AGENTS.md 절이 새로 생겼어요. 기본값은 대체 읽기라서 작업 폴더나 그 위에 CLAUDE.md·.claude/CLAUDE.md·CLAUDE.local.md 가 하나라도 있으면 AGENTS.md 는 읽히지 않고, 둘 다 읽게 하려면 /config 의 Project instructions 를 claude-md-and-agents-md 로 바꿔야 해요. 하위 폴더 AGENTS.md 는 CLAUDE.md 처럼 그 폴더 파일을 Read 도구로 열 때 붙지만 /memory·/context 목록에는 안 보이고, 베드록·버텍스·파운드리처럼 기능 플래그를 못 받는 세션·텔레메트리를 끈 세션·설치나 업그레이드 직후 첫 세션에서는 아직 안 읽히니 거기서는 종전대로 CLAUDE.md 에 @AGENTS.md 한 줄을 두는 방법을 써야 해요.
  • 깃허브가 9월 18일 코파일럿 모델 여섯 개를 10월 19일자로 없앤다고 예고했어요. GPT-5.5·GPT-5.4 는 GPT-5.6 Sol 로, GPT-5.4 mini·GPT-5 mini 는 GPT-5.6 Luna 로, 제미나이 3.7 플래시는 3.8 플래시로, 그록 4.5 는 4.6 으로 옮기라고 적혀 있고, 챗·인라인 편집·ask·에이전트 모드·코드 자동완성까지 모든 코파일럿 화면에서 한꺼번에 빠져요. 제미나이 3.7 플래시는 8월 13일에 코파일럿에 들어와 8월 31일 공지에서 제미나이 3.1 프로의 대체로 지목됐던 모델이라 들어온 지 67일 만에 다시 갈아타야 하고, 여섯 모델 가운데 제공사 폐기 문서에 은퇴 일정이 있는 건 GPT-5 mini 하나뿐인데 오픈AI 의 API 종료일은 12월 11일이라 깃허브가 그보다 7주 앞서 빼요.

주요 업데이트

에이전트 코딩 ★★★★★

보안 스타트업 핵트론이 오푸스 5 가 몇 시간 만에 만든 libheif 익스플로잇으로 오픈AI 포럼을 뚫고 직원 코덱스 계정으로 내부 모노레포에 PR 을 열었어요

7월 23일부터 25일까지 72시간이 안 걸린 일이에요. 오픈AI 커뮤니티 포럼(Discourse)이 이미지 변환에 쓰는 libheif 의 힙 오버플로(수정은 있었지만 보안 수정으로 표시되지 않아 데비안에 백포트되지 않았고 당시 CVE 도 없던 결함)로 원격 코드 실행을 얻은 뒤, 오픈AI SSO 설정 결함으로 직원 여러 명의 챗GPT·코덱스 계정을 넘겨받아 직원 코덱스에 연결된 깃허브로 내부 모노레포 openai/openai 에 PR 을 열었어요. 오푸스 4.8 은 ASLR 이 켜진 상태에서 여러 세션을 돌려도 동작하는 익스플로잇을 못 만들었는데 7월 24일 저녁에 나온 오푸스 5 는 몇 시간 만에 ARM64 익스플로잇을 만들었고, 연구팀은 자기들 Discourse 인스턴스를 CTF 처럼 보이는 주소로 프록시해 모델이 원격 대상 익스플로잇을 거부하지 않게 한 뒤 /goal 자율 루프를 돌렸다고 적었어요. 다만 완전 자율은 아니었고 사람의 지도가 중요했다고 스스로 밝혔고, 오픈AI 는 9월 18일 언론에 커뮤니티 로그인 토큰 권한을 좁히고 영향받은 토큰·세션을 폐기했다고 밝혔으며 6,500달러 포상금은 포럼이 아니라 오픈AI 쪽 결함에 준 것이라고 했어요.

용어 풀이
SSO
한 번 로그인으로 여러 서비스에 들어가는 통합 인증(Single Sign-On)
ASLR
메모리 배치를 무작위로 바꿔 익스플로잇을 어렵게 하는 운영체제 보호 기능
CTF
해킹 문제를 푸는 보안 경연(Capture The Flag), 연습용 대상이라는 뜻으로 쓰임
PR
코드 변경을 저장소에 합쳐 달라는 요청(Pull Request)
CVE
공개된 보안 취약점에 붙는 공식 식별 번호
운영자 인사이트

코덱스·클로드 코드 같은 에이전트에 붙여 둔 깃허브·슬랙·메일 연동은 계정 하나가 넘어가면 그대로 열리니 연동 토큰 범위를 최소로 두고, 이미지 업로드는 배포판 패치를 믿지 말고 디코더를 별도 샌드박스에서 돌리세요. 모델의 거부는 대상을 CTF 처럼 보이게 하는 것만으로 넘어갔으니 안전장치를 방어 수단으로 계산에 넣지 마세요.

여러 관점으로 보기
  • 오픈AI 공식 반응 오픈AI 는 연구자에게 감사하며 커뮤니티 로그인 토큰의 권한을 좁히고 영향받은 토큰·세션을 폐기했다고 밝혔어요. VentureBeat
  • 포상금 범위 해명과 앤트로픽 무응답 오픈AI 는 Discourse 포럼 자체는 버그바운티 범위 밖이었고 6,500달러는 오픈AI 쪽 결함에 준 것이라고 했고, 앤트로픽은 논평 요청에 답하지 않았어요. The Register
  • 언론 보도 경위 월스트리트저널이 9월 17일 저녁 먼저 보도했고, 3인 팀이 오푸스 4.8 로는 실패하다 오푸스 5 로 몇 시간 만에 성공했다는 대목이 보도의 중심이에요. TechCrunch
  • 해커뉴스 반응 6,500달러가 너무 적다는 논쟁, CTF 로 위장해 모델 안전장치를 넘긴 점, SSO 결함의 실제 원인이 설명되지 않았다는 지적이 나왔고 Discourse 공동창업자는 외부 실행 파일을 landlock 샌드박스로 옮겼다고 답했어요. Hacker News
  • 더 넓은 캠페인 HEIF Heist 같은 팀이 두 달간 3,000달러 미만의 토큰으로 슬랙·메타·깃허브 엔터프라이즈(CVE-2026-19118)·Next.js 까지 같은 디코더 계열 결함을 찾았고, 여기에는 오푸스 5 와 GPT-5.6 Sol 을 함께 썼다고 적었어요. CyberScoop

원본 보기 (hn:top-stories)

Claude Code ★★★★★

클로드 코드 v2.1.277 부터 CLAUDE.md 가 없는 프로젝트에서는 AGENTS.md 를 직접 읽고, 둘 다 읽게 하려면 /config 에서 바꿔야 해요

앤트로픽이 9월 18일 낸 클로드 코드 v2.1.277 릴리스 노트에 「CLAUDE.md 가 없는 프로젝트에서는 AGENTS.md 를 대신 읽는다」는 항목이 들어갔고, 공식 문서 메모리 페이지에도 AGENTS.md 절이 새로 생겼어요. 기본값은 대체 읽기라서 작업 폴더나 그 위에 CLAUDE.md·.claude/CLAUDE.md·CLAUDE.local.md 가 하나라도 있으면 AGENTS.md 는 읽히지 않고, 둘 다 읽게 하려면 /config 의 Project instructions 를 claude-md-and-agents-md 로 바꿔야 해요. 하위 폴더 AGENTS.md 는 CLAUDE.md 처럼 그 폴더 파일을 Read 도구로 열 때 붙지만 /memory·/context 목록에는 안 보이고, 베드록·버텍스·파운드리처럼 기능 플래그를 못 받는 세션·텔레메트리를 끈 세션·설치나 업그레이드 직후 첫 세션에서는 아직 안 읽히니 거기서는 종전대로 CLAUDE.md 에 @AGENTS.md 한 줄을 두는 방법을 써야 해요.

용어 풀이
AGENTS.md
코덱스·커서·코파일럿 등 여러 코딩 에이전트가 공통으로 읽는 저장소 지침 파일
CLAUDE.local.md
커밋하지 않는 개인용 클로드 코드 지침 파일
기능 플래그
앤트로픽 서버에서 받아 오는 기능 켜기·끄기 값. 서드파티 제공자나 텔레메트리 차단 환경에서는 받지 못함
텔레메트리
사용 통계를 제공사 서버로 보내는 기능
운영자 인사이트

코덱스·커서와 저장소를 같이 쓰느라 AGENTS.md 를 원본으로 두고 @AGENTS.md 한 줄짜리 CLAUDE.md 를 만들어 뒀다면 그대로 둬도 두 번 읽히지 않으니 급히 지울 이유는 없고, 오히려 팀원 한 명이 개인용 CLAUDE.local.md 를 두는 순간 그 사람만 AGENTS.md 를 못 읽게 되니 사내 기준은 「가져오기용 CLAUDE.md 유지」나 「전원 claude-md-and-agents-md」 중 하나로 정해 두는 게 안전해요.

여러 관점으로 보기
  • 릴리스 노트 「CLAUDE.md 가 없는 프로젝트에서는 AGENTS.md 를 대신 읽고, /config 의 Project instructions 에서 바꾼다, 베드록·버텍스·파운드리는 아직」이 첫 항목이에요. GitHub
  • 공식 문서의 동작 규칙 작업 폴더나 그 위의 CLAUDE.md·.claude/CLAUDE.md·CLAUDE.local.md 는 AGENTS.md 를 막지만 ~/.claude/CLAUDE.md·관리형 CLAUDE.md·.claude/rules/ 는 막지 않고, AGENTS.local.md·.agents/ 아래는 읽지 않는다고 적혀 있어요. Claude Code Docs
  • 구현 커밋 mods/agents-md 라는 내장 플러그인으로 들어왔고, 설정 키 instructionFiles 에 claude-md·claude-md-or-agents-md(기본)·claude-md-and-agents-md·managed-only 네 값이 있으며 프로젝트의 .claude/settings.json 에서는 이 옵션을 읽지 않아요. GitHub
  • 해커뉴스 반응 「1년 반 동안 다들 불평한 끝에야 했다」는 반응이 많고, .agents/skills 폴더의 스킬은 여전히 읽지 않는다는 지적과 심볼릭 링크 우회는 하위 폴더까지 안 미쳤다는 경험담이 달렸어요. Hacker News
  • 같은 날 바로 앞 릴리스 몇 시간 앞선 v2.1.276 은 ANTHROPIC_BASE_URL 로 프록시·게이트웨이를 쓸 때 모든 요청이 400 으로 실패하던 2.1.275 회귀 하나만 고쳤어요. GitHub

원본 보기 (github-releases:claude-code)

GitHub Copilot ★★★★

깃허브가 코파일럿에서 GPT-5.5·5.4·5.4 mini·GPT-5 mini 와 제미나이 3.7 플래시, 그록 4.5 를 10월 19일에 뺀다고 예고했어요

깃허브가 9월 18일 코파일럿 모델 여섯 개를 10월 19일자로 없앤다고 예고했어요. GPT-5.5·GPT-5.4 는 GPT-5.6 Sol 로, GPT-5.4 mini·GPT-5 mini 는 GPT-5.6 Luna 로, 제미나이 3.7 플래시는 3.8 플래시로, 그록 4.5 는 4.6 으로 옮기라고 적혀 있고, 챗·인라인 편집·ask·에이전트 모드·코드 자동완성까지 모든 코파일럿 화면에서 한꺼번에 빠져요. 제미나이 3.7 플래시는 8월 13일에 코파일럿에 들어와 8월 31일 공지에서 제미나이 3.1 프로의 대체로 지목됐던 모델이라 들어온 지 67일 만에 다시 갈아타야 하고, 여섯 모델 가운데 제공사 폐기 문서에 은퇴 일정이 있는 건 GPT-5 mini 하나뿐인데 오픈AI 의 API 종료일은 12월 11일이라 깃허브가 그보다 7주 앞서 빼요.

용어 풀이
LTS
Long-Term Support. 깃허브가 지정일부터 1년 동안 지원을 약속한 코파일럿 모델
GPT-5.6 Sol·Terra·Luna
오픈AI GPT-5.6 의 세 변형. Sol 이 추론 상한이 가장 높고 Luna 가 가장 가볍고 싸다
모델 정책
코파일럿 비즈니스·엔터프라이즈 관리자가 구성원에게 어떤 모델을 열어 줄지 켜고 끄는 설정
기본 모델 활성화
정식 출시된 모델을 회사 계정에서 관리자가 끄지 않는 한 자동으로 켜 주는 정책. 8월 26일부터 적용
운영자 인사이트

모델 이름을 설정에 박아 둔 팀은 10월 19일 전에 바꿔야 하는데, 공지는 안 바꾸면 그날 어떻게 되는지를 적지 않았어요. GPT-5.4 는 Pro 요금제에도 열려 있었지만 대체로 적힌 GPT-5.6 Sol 은 7월 9일 공지 기준 Pro+ 부터라 Pro 개인 사용자는 Terra 나 Luna 로 가야 하고, 회사 계정은 8월 26일부터 걸린 기본 모델 활성화로 대체 모델이 저절로 켜지지만 관리자가 전역 기본값을 껐다면 모델 정책에서 따로 열어야 해요. 깃허브가 1년 지원을 약속한 LTS 모델은 3월 18일 지정된 GPT-5.3-Codex 하나뿐이라, 그 밖의 모델은 이번처럼 한 달 예고로 빠질 수 있다고 보고 고정하세요.

여러 관점으로 보기
  • 대체 모델의 요금제 조건 7월 9일 공지에서 GPT-5.6 Sol 은 Pro+·Max·Business·Enterprise 에만 열렸고 Terra·Luna 는 Pro 부터 쓸 수 있다고 적혀 있어요. GitHub
  • 빠지는 GPT-5.4 의 요금제 3월 5일 정식 출시 공지는 GPT-5.4 를 Pro·Pro+·Business·Enterprise 에 열었다고 적어서, Pro 사용자는 대체로 지목된 Sol 을 그대로 고를 수 없어요. GitHub
  • 3.7 플래시는 7주 전 대체 모델이었어요 8월 31일 폐기 공지는 제미나이 3.1 프로를 없애며 대체로 제미나이 3.7 플래시를 지목했는데, 그 모델이 이번에 빠져요. GitHub
  • 3.7 플래시가 들어온 날 제미나이 3.7 플래시는 8월 13일 코파일럿에 들어왔고, 그때도 회사 계정은 관리자가 정책을 켜야 쓸 수 있다고 적혀 있었어요. GitHub
  • 오픈AI 쪽 은퇴 일정과의 차이 오픈AI 폐기 문서는 gpt-5-mini 의 API 종료일을 12월 11일로 적고 대체로 gpt-5.6-terra 를 권하는데, GPT-5.4·5.5 는 폐기 항목이 없고 깃허브는 GPT-5 mini 의 대체로 Luna 를 적었어요. OpenAI
  • 1년 지원이 약속된 모델 깃허브 문서는 LTS 모델을 지정일부터 1년 지원을 약속한 모델로 정의하고, 3월 18일 기준 기본 모델과 LTS 모델 모두 GPT-5.3-Codex 라고 적어 뒀어요. GitHub Docs

원본 보기 (rss:github-changelog)

MCP ★★★★

깃랩 19.4 부터 MCP 서버 도구에도 그룹·프로젝트 관리자가 정한 항상 허용·항상 확인·항상 차단 규칙이 적용돼요

9월 17일 나온 깃랩 19.4 는 이미 있던 깃랩 MCP 서버(18.3 실험, 18.6 베타, 19.2 부터 Free 요금제)에 파이프라인 실행·재시도·취소와 잡 로그 조회, 머지 리퀘스트 리뷰 작성·머지, 커밋 추가·포크, 이슈·에픽 같은 작업 항목 생성·수정, 취약점 상태 변경 도구를 더했고, 그동안 고정 규칙으로만 돌던 MCP 서버 도구를 Duo 에이전트 플랫폼 내부 도구와 같은 화면에서 도구별로 항상 허용·항상 확인·항상 차단으로 정하게 했어요. 읽기 도구는 기본이 항상 허용, 쓰기·삭제 도구는 기본이 항상 확인이고, 이름이 다른 짝(create_merge_request 와 save_merge_request)도 하나의 모드로 함께 묶여요. 다만 요금제는 릴리스 노트가 Free 포함·정식 출시라고 적은 반면 도구 거버넌스 문서 상단은 Premium·Ultimate·베타로 적혀 있어 자기 요금제의 문서를 직접 확인해야 하고, 클로드 코드 같은 외부 클라이언트가 항상 확인 도구를 부를 때 그 확인이 어디서 어떻게 뜨는지는 두 문서 어디에도 없어요.

용어 풀이
MCP
Model Context Protocol. AI 에이전트가 외부 도구·데이터에 연결되는 표준 규약
OAuth
비밀번호 대신 토큰을 발급받아 다른 서비스의 권한을 위임받는 인증 규약
운영자 인사이트

깃허브 대신 깃랩을 쓰는 조직이라면 클로드 코드·커서에 https://<인스턴스>/api/v4/mcp 를 붙일 때 인증은 OAuth 동적 등록이고 셀프 매니지드는 인스턴스 설정에서 먼저 켜야 하는데, 이제 에이전트가 머지·파이프라인 취소·취약점 상태 변경까지 할 수 있으니 클라이언트 쪽 권한 설정과 별개로 그룹 Owner 가 서버 쪽에서 쓰기 도구를 항상 확인·차단으로 두는지가 실제 동작을 정하고, 그 확인이 외부 클라이언트에서 어떻게 나타나는지는 문서에 없으니 도입 전에 시험 프로젝트에서 직접 확인하세요.

여러 관점으로 보기
  • 거버넌스 문서 도구 거버넌스 문서는 상단에 Premium·Ultimate·베타로 적었고, MCP 서버 도구 절은 19.4 에서 duo_mcp_tool_governance 플래그로 들어와 GitLab.com·셀프 매니지드·Dedicated 에서 켜졌다고 적혀 있어요. GitLab Docs
  • MCP 서버 이력·인증 MCP 서버 문서는 18.3 실험, 18.6 베타, 19.2 Free 요금제 이관을 적었고 인증은 OAuth 동적 클라이언트 등록, 셀프 매니지드는 인스턴스 설정에서 허용해야 한다고 적혀 있어요. GitLab Docs
  • 도구 목록 MCP 서버 도구 문서는 서버 전체 상태를 여전히 베타로 적고, 80개 넘는 도구마다 어느 버전에서 들어왔는지 이력을 달아 두었어요. GitLab Docs
  • 피드백 이슈 깃랩이 연 피드백 이슈는 세 모드와 기본값을 설명하지만 외부 클라이언트가 항상 확인 도구를 부를 때의 동작은 적지 않았어요. GitLab

원본 보기 (hn:mcp-server)

바이브 코딩 ★★★★

타엘린이 낸 Bend 2 는 LAWS.bend 규칙을 증명하지 못하는 AI 수정을 컴파일러가 거부하는 언어이고, 컴파일러의 99% 는 AI 가 썼다고 저장소에 적혀 있어요

HigherOrderCO 의 빅터 타엘린이 9월 17일 공개한 Bend 2 는 Bend 1·HVM 과 호환되지 않는 새 언어로, LAWS.bend 에 적은 규칙을 PROOF.bend 의 증명으로 지키게 하고 타입 검사기가 Lean 처럼 증명 검사기 역할을 하며 C·CUDA·Metal·자바스크립트로 컴파일돼요. 저장소 README 는 「컴파일러(커널 제외)는 99% AI 가 썼고 아직 완전히 감사되지 않았다」「Lean 형식화와 구현이 어긋난다」고 적어 두었고, 공개 당시 커밋 이력을 한 개로 뭉갠 것이 지적되자 타엘린이 이력을 복구하고 사과했어요. 다음 날 리엄 파웰이 올린 「Bend 2 와 바이브 코딩 함정」은 데모에서 규칙 58줄에 증명 442줄이 붙는 점을 들어 LLM 으로 빨리 만들 수 있으니 SPARK 같은 자동 증명기 기반 기존 도구를 조사하지 않은 설계라고 비판했는데, 타엘린은 형식 검증을 10년 해 왔고 증명이 장황한 것은 속도를 위한 의도적 설계라고 반박했고 파웰은 SPARK 비교 예제를 LLM 에 그대로 맡겨 만들었다고 밝히며 Bend 는 일반론의 예시일 뿐이라는 주석을 글 상단에 달았어요.

용어 풀이
HVM
Higher-order Virtual Machine. Bend 1 이 돌던 HigherOrderCO 의 병렬 실행 엔진
SPARK
Ada 언어의 형식 검증용 부분집합. 자동 증명기 GNATprove 로 성질을 검사
SMT
Satisfiability Modulo Theories. 논리식의 참·거짓을 자동으로 판정하는 풀이기 계열
LLM
Large Language Model, 대규모 언어 모델
CUDA
엔비디아 GPU 에서 범용 계산을 돌리는 플랫폼
운영자 인사이트

「AI 실수를 증명으로 막는다」는 도구를 검토할 때는 도구 자체가 검증됐는지(컴파일러 99% AI 작성·감사 전·형식화와 구현 불일치)와 규칙 한 줄에 증명 몇 줄이 붙는지를 따로 봐야 하고, SMT 자동 증명기 기반 SPARK·Dafny 와의 우열은 양쪽 예제를 모두 LLM 이 쓴 상태라 아직 결론이 없어요.

여러 관점으로 보기
  • 프로젝트 주장 타입 검사기가 Lean·Rocq 처럼 증명 검사기라서 LAWS.bend 를 어기는 코드는 「병합이 수학적으로 불가능하다」고 소개하고, GPU 에서 한 코어보다 최대 100배 빠르다고 적어요. Bend
  • 프로젝트 주장 저장소 README 가 「Bend 2 는 새 언어라 Bend 1·HVM 은 이어지지 않는다」「컴파일러(커널 제외)는 99% AI 가 썼고 아직 완전히 감사되지 않았다」고 적어 두었고, 라이선스는 아파치 2.0 이에요. GitHub
  • 비판 리엄 파웰은 데모의 규칙 58줄에 증명 442줄이 붙는 점을 들어, LLM 으로 빨리 만들 수 있으니 자동 증명기 GNATprove 를 쓰는 SPARK 같은 기존 도구를 조사하지 않고 설계했다고 비판했고, SPARK 예제는 자기도 LLM 에 그대로 맡겨 만들었다고 밝혔어요. Liam Powell's Blog
  • 커뮤니티 반응 타엘린은 7년 전 DevCon 형식 검증 발표와 2018년 Formality 를 들어 「그 분야를 모른다」는 비판을 반박하고 증명이 장황한 것은 속도를 위한 의도적 설계이며 어려운 설계 결정은 자기가 한 뒤 LLM 으로 코드를 채운다고 적었고, 파웰은 일반론과 Bend 비판을 뒤섞었다고 인정했어요. Hacker News
  • 커뮤니티 반응 공개 당일 토론에서는 커밋 이력을 한 개로 뭉개 벤치마크 SHA 를 재현할 수 없다는 지적, 규칙이 덜 정해져 있어 AI 가 규칙은 지키면서 게임 자체를 바꿨다는 지적, GPU 가 증명 검사에 도움이 되는지 불분명하다는 지적이 나왔고 직접 설치해 돌려 본 보고는 없었어요. Hacker News

원본 보기 (hn:top-stories)

엔비디아가 검증 스킬 300여 개를 켜고 끈 채 클로드 코드·코덱스에서 돌려 정답률 평균 41점 상승을 쟀고, 그 측정 도구 SkillEvaluator 를 아파치 2.0 으로 공개했어요

엔비디아가 8월 19일 블로그에서 자사 제품 30여 개의 검증 스킬 300여 개를 스킬 없이 한 번, 켜고 한 번 돌려 정답률이 46점에서 87점으로, 유효성이 39점에서 78점으로 올랐다고 밝혔고, 하네스별 평균 상승은 클로드 코드 34점·코덱스 29점이었어요. 다만 토큰은 스킬마다 달라서 jetson-optimize-memory 는 76.9% 줄었지만 cuopt-install 은 120.3% 늘었고, 이 결과는 엔비디아가 직접 검증한 스킬 기준이라 아무 스킬에나 옮겨지진 않아요. 실제로 SkillsBench 논문은 과제 87개에서 큐레이션 스킬의 평균 이득을 16.6포인트로 쟀는데 도메인별로 소프트웨어 공학 4.5포인트부터 의료 51.9포인트까지 벌어졌고 모델이 스스로 만든 스킬은 평균 이득이 없었으며, Vercel 은 1월 평가에서 56% 의 경우 스킬이 아예 호출되지 않았다고 적었어요.

용어 풀이
하네스
모델을 감싸 도구 호출·파일 접근을 맡는 실행 틀. 클로드 코드·코덱스가 각각 하나의 하네스
Harbor
격리된 컨테이너에서 에이전트 과제를 돌리는 오픈소스 평가 프레임워크
SpreadsheetBench
실제 스프레드시트 편집 과제로 모델을 재는 벤치마크
운영자 인사이트

스킬을 쓸지 말지보다 자기 스킬을 켜고 끈 채 같은 과제로 짝지어 돌려 본 적이 있는지가 문제예요. SkillEvaluator 의 실제 실행 계층은 Harbor 샌드박스와 API 키가 필요하니 전부 돌리려 하지 말고, 팀에서 자주 쓰는 스킬 두세 개만이라도 켜고 끈 채 돌려 정답률과 토큰을 함께 보고, 토큰만 늘고 정답률이 안 오르는 스킬은 빼세요. 스킬이 호출되지 않는 문제는 설명문 점검이 아니라 이런 실행 시험에서만 드러나요.

여러 관점으로 보기
  • 도구 구조 SkillEvaluator 는 정적 검사·PII 스캔(1계층), 임베딩으로 스킬 간 중복 탐지(2계층), Harbor 샌드박스에서 스킬 유무를 짝지어 실행(3계층) 세 층으로 나뉘고, agentskills.io 명세의 SKILL.md 를 받아요. 별 479개, 아파치 2.0 이에요. GitHub
  • 독립 벤치마크 SkillsBench 논문은 큐레이션 스킬이 통과율을 33.9% 에서 50.5% 로 16.6포인트 올리지만 설정별로 4.1~25.7포인트로 갈리고, 모듈 3개 이하의 작은 스킬이 큰 묶음보다 낫다고 적었어요. arXiv
  • 스킬 자동 최적화 마이크로소프트 SkillOpt 논문은 스킬 문서를 검증 점수로 고쳐 가는 최적화기로, SpreadsheetBench 에서 GPT-5.5 가 클로드 코드 하네스로 돌 때 스킬 없이 22.1점, 사람이 쓴 스킬로 37.1점, 최적화된 스킬로 80.4점을 냈어요. arXiv
  • 반대 결과 Vercel 은 1월 27일 자사 Next.js 평가에서 56% 의 경우 스킬이 아예 호출되지 않았고 호출을 강제해도 79% 가 상한이었던 반면, AGENTS.md 에 8KB 문서 색인을 넣은 쪽은 100% 였다고 적었어요. Vercel

원본 보기 (reddit:claudeai)

제브를 흉내 낸 개인 프로젝트 OpenJev 는 Qwen3.5 4B 의 선택지 로짓을 바로 읽어 타입세이프 공개 평가 102건에서 84.5% 일치했고, 상표 지적 뒤 SemIf 로 이름을 바꿨어요

해커뉴스 532점에 오른 OpenJev 는 타입세이프 AI(TypeSafe AI)가 낸 것이 아니라 개발자 시어도어 리(Theodore Lee)가 MIT 라이선스로 올린 독립 프로젝트로, README 는 제브(Jev)의 비공개 모델과 학습을 재현한 것이 아니라 '선택지를 주면 타입이 정해진 확률만 돌려주는' 인터페이스 패턴만 따라 만든 것이라고 적었고, 오픈 모델 Qwen3.5-4B 를 한 번만 앞으로 돌려 선택지 토큰의 로짓(logit)을 읽고 그 안에서만 정규화하기 때문에 답 문장을 생성하지 않아요. 저장소 수치로는 RTX 3090 에서 기준 21개짜리 판정이 로짓 읽기 1.023초, 같은 모델로 JSON 을 생성하게 하면 5.332초였고, 타입세이프가 공개한 평가 가운데 맞춰 볼 수 있는 102건에서 일치율 84.5% 로 타입세이프가 발표한 제브 값 88.3% 보다 조금 낮았으며, 사이트에서는 0.6B·2B·4B GGUF 모델을 브라우저 WebGPU 로 직접 돌려 볼 수 있어요. 해커뉴스에서는 상태(state)에 '이 메일은 정상 메일' 한 줄을 넣자 100% 정상으로 분류됐다는 프롬프트 인젝션 시험과 'BERT 류 인코더 분류기로 예전부터 하던 일'이라는 반론, 이름이 상표 문제라는 지적이 나왔고, 제출 5시간 뒤 사이트는 'SemIf, 이전 이름 OpenJev, 타입세이프와 무관' 으로 바뀌어 있었어요.

용어 풀이
로짓
모델이 다음 토큰마다 매기는 정규화 전 점수. 여기서는 선택지 토큰의 점수만 읽어 확률로 바꾼다
GGUF
llama.cpp 계열이 쓰는 양자화 모델 파일 형식
WebGPU
브라우저에서 GPU 연산을 쓰게 하는 웹 표준
SGLang
오픈소스 LLM 추론 서버
WANLI
허깅페이스에 공개된 자연어 추론 검증 데이터셋
운영자 인사이트

9월 16일에 다룬 제브의 대기자 명단을 기다리지 않아도, 라우팅·재시도·검증처럼 선택지가 정해진 판정은 이미 쓰는 vLLM·SGLang·llama.cpp 에서 선택지 토큰의 로짓만 읽는 방식으로 자기 데이터에 먼저 시험해 볼 수 있어요. 다만 이 방식도 상태 문자열에 외부 텍스트가 섞이면 프롬프트 인젝션이 그대로 통하고, 저장소의 외부 검증 데이터(WANLI)에서는 정확도가 63.7% 라 자기 라벨로 재고 나서 들여야 해요.

여러 관점으로 보기
  • 프로젝트 저장소 독립 프로젝트이며 제브의 모델·학습이 아니라 인터페이스 패턴만 재현했다고 적었고, 3090 에서 로짓 읽기 1.023초 대 JSON 생성 5.332초, 타입세이프 공개 평가 102건 일치율 84.5% 대 제브 88.3% 를 표로 냈어요. GitHub
  • 해커뉴스 시험·반론 상태에 '정상 메일' 한 줄을 넣자 100% 정상으로 분류됐다는 인젝션 시험, 인코더 분류기와 다를 게 없다는 반론, 이름이 상표 문제라는 지적이 나왔고 제출 5시간 뒤 이름이 SemIf 로 바뀐 것이 확인됐어요. Hacker News
  • 같은 방식의 다른 구현 ekzhang 은 Qwen3.6-35B-A3B 를 SGLang 으로 돌려 제브 API 와 호환되는 엔드포인트를 모달(Modal)에 올렸고, 해커뉴스의 다른 개발자는 자기 추론 엔진에서 같은 방식을 재현해 제브 엔드포인트와 비슷한 속도를 냈다고 적었어요. GitHub

원본 보기 (hn:top-stories)

코파일럿 코드 리뷰 총평이 지적을 열림·해결됨·이전에 놓침으로 나눠 보여 주고, 이전에 놓친 지적은 총평에만 적혀요

9월 18일 깃허브가 코파일럿 코드 리뷰의 총평 댓글을 바꿔서, 현재 판정과 사용한 검토 강도에 더해 지적을 '열림(새 커밋이 만든 것은 new 표시)'·'지난 검토 뒤 해결됨'·'이전에 놓침' 세 묶음으로 심각도와 함께 보여 주고, 커밋을 더 올리고 다시 검토를 요청해도 이 진행 기록이 남는다고 변경 기록에 적었어요. 다만 '이전에 놓침'은 새 커밋이 아니라 기존 변경에서 재검토가 새로 찾은 지적인데, 변경 기록은 이 지적이 PR 다른 곳에는 댓글로 달리지 않아 총평에만 자세히 적힌다고 밝혔어요. 같은 공지에서 코파일럿이 후속 커밋을 근거로 자기 지적에 '안 고침(Won't Fix)'·'틀림(Incorrect)' 사유를 달아 스스로 해결 처리하되 열어 두라는 답글이 달린 지적은 그대로 두고, 지적마다 제목이 붙으며, 제안을 묶어 커밋할 때는 사람이 단 제안이 섞여 있어도 커밋 제목과 설명을 만들어 주는 것까지 정식으로 열렸어요.

용어 풀이
PR
풀 리퀘스트. 변경을 병합해 달라고 올리는 요청
ruleset
깃허브 저장소 규칙 묶음. 브랜치 보호와 자동 리뷰 조건을 여기서 정한다
운영자 인사이트

코파일럿 리뷰를 PR 필수 검토자로 걸어 둔 팀이라면 병합 전 점검 기준을 '열린 인라인 스레드 0개'에서 총평의 열림·이전에 놓침 목록으로 옮겨야 해요. 이전에 놓친 지적은 스레드로 없고, 코파일럿이 '안 고침'으로 닫은 스레드는 사람이 판단한 것처럼 보일 수 있으니 일부러 두는 지적은 답글로 남겨 열어 두는 편이 안전해요. 재검토는 저절로 돌지 않으니 저장소 규칙(ruleset)의 새 푸시마다 검토를 켜 뒀는지도 함께 확인하세요.

여러 관점으로 보기
  • 같은 날 주간 릴리스 정리 (센트리 캔버스) 같은 날 주간 릴리스에는 깃허브 코파일럿 앱에 센트리 오류 보고서에서 코드 수정까지 가는 센트리 캔버스가 새로 들어갔다는 한 문장만 있고, 별도 공지·문서·요금제 조건은 적혀 있지 않아요. GitHub
  • 코파일럿 앱 캔버스가 무엇인지 공식 문서는 캔버스를 에이전트와 사람이 같이 고치는 공유 작업 화면으로 설명하고 일부 캔버스는 플러그인 설치가 필요하다고 적었지만, 문서에 센트리 캔버스는 아직 없어요. GitHub Docs
  • 센트리 쪽에 이미 있던 연동 센트리 문서에는 Seer 자동 수정 탭에서 코파일럿 클라우드 에이전트를 불러 PR 을 만들게 하는 연동이 따로 있고, 이 연동은 깃허브 액션 분과 AI 크레딧을 쓴다고 적혀 있어요. Sentry Docs

원본 보기 (rss:github-changelog)

기타 ★★★

앤트로픽이 첫 내장 평가자 파트너로 액센츄어를 9월 18일 발표했고, 평가는 액센츄어가 3월에 인수한 AI 회사 패컬티가 이끌어요

앤트로픽이 9월 18일 아모데이의 「최전선 속도를 조절해야 한다」 글에서 약속한 내장 평가자(embedded evaluator)의 첫 파트너로 액센츄어를 발표했어요. 내장 평가는 외부 평가자가 직원에 준하는 접근 권한으로 회사 안에 들어와 모델이 훈련되는 과정을 지켜보고 배포 결정을 따라가며 직원과 직접 대화하는 방식이고, 액센츄어 쪽은 3월 16일 인수를 마친 영국 AI 회사 패컬티(Faculty)가 모델 평가·레드팀·정렬 평가·안전장치 시험을 맡으며 두 회사가 5년간 각각 최소 10억 달러를 이 분야 역량에 쓰겠다고 했어요. 다만 발표문 스스로 평가자가 무엇에 접근하고 어떻게 보고할지에 대한 기준도, 평가 비용을 누가 댈지에 대한 정해진 체계도 아직 없다고 적었고 평가 결과를 공개하겠다는 약속은 없으며, 액센츄어는 지난해 12월부터 직원 3만 명을 클로드로 교육하고 개발자 수만 명에게 클로드 코드를 배포한 앤트로픽의 판매·배포 파트너이기도 한데 양쪽 발표문 어디에도 그 관계는 언급되지 않았어요.

용어 풀이
내장 평가자(embedded evaluator)
AI 회사 안에 직원에 준하는 접근 권한으로 들어가 모델 개발 과정을 지켜보고 평가하는 외부 평가 조직
레드팀
공격자 입장에서 모델의 약점과 오용 가능성을 일부러 찾아보는 시험
정렬 평가
모델이 의도한 목표와 가치대로 행동하는지 확인하는 평가
METR
AI 모델의 위험 능력을 외부에서 평가하는 비영리 연구 조직
운영자 인사이트

9월 16일에 제기된 「내장 평가자가 정말 독립적일까」 논쟁의 첫 실물이 클로드를 파는 회사로 나왔으니, 앤트로픽이 내세운 「AI 붐 이전부터 있던 상장사라 더 독립적」이라는 논리보다 앞으로 나올 세 가지를 보고 판단하면 돼요. 접근·보고 기준이 문서로 공개되는지, 모델 출시 때 평가 보고서가 대중에 나오는지, 그리고 몇 주 안에 발표한다는 다른 평가자에 METR 같은 비영리 기관이 자체 자금으로 들어오는지가 그 기준이에요.

여러 관점으로 보기
  • 비판적 시선 (왜 컨설팅 회사인가) 테크크런치는 이 선택이 많은 AI 관찰자를 놀라게 했고 액센츄어는 딥러닝 연구의 최전선으로 알려진 회사가 아니라면서, 앤트로픽이 기업·정부에 AI 를 배포해 온 실무 경험과 AI 붐 이전부터 있던 대형 상장사라 기능적으로 더 독립적이라는 점을 이유로 들었다고 전했어요. 비판론자들은 아모데이의 구상을 업계 자율 감시로 본다고 적었어요. TechCrunch
  • 액센츄어 쪽 발표 줄리 스위트 회장은 안전에는 깊은 기술 전문성과 AI 가 현실에서 어떻게 쓰이는지에 대한 이해가 함께 필요하다고 했고, 패컬티 창업자이자 액센츄어 CTO 인 마크 워너는 패컬티가 「사고가 아니라 설계로 안전한 AI」를 믿고 세워졌다고 말했어요. 팀 규모·시작 시점·접근 권한·결과 공개는 이 발표문에도 없어요. Accenture Newsroom
  • 이해충돌 배경 (기존 판매 파트너십) 2025년 12월 9일 두 회사는 액센츄어 앤트로픽 비즈니스 그룹을 만들어 액센츄어 직원 약 3만 명을 클로드로 교육하고 개발자 수만 명에게 클로드 코드를 배포하며 액센츄어 안에 클로드 전문 조직을 공동 투자하기로 했어요. 이번 평가 파트너십 발표문은 이 관계를 언급하지 않아요. Anthropic

원본 보기 (hn:anthropic)

기타 ★★

npm 세밀 접근 토큰에 스테이지 전용 쓰기 권한이 생겨서, 자동화가 버전을 올려 두기만 하고 바로 게시는 못 하게 막을 수 있어요

깃허브가 9월 18일 npm 세밀 접근 토큰(granular access token)을 만들 때 고를 수 있는 「읽기·쓰기(스테이지 전용)」 권한을 추가했어요. 이 토큰은 5월 22일 정식 출시된 단계적 게시(staged publishing)의 npm stage publish 로 버전을 올려 두는 것까지만 되고, 2FA 우회 설정을 해 놨더라도 npm publish 는 거부돼서 메인테이너가 2FA 로 승인해야 배포돼요. 다만 dist-tag 이동과 버전 폐기(deprecate) 같은 다른 쓰기 권한은 그대로 남아 있어서 유출되면 latest 태그를 옮기는 식의 피해는 여전히 가능하고, 기존 토큰은 바뀌지 않는 옵트인이며 2027년 1월 2FA 우회 토큰의 직접 게시 폐지 전에 신뢰 게시(trusted publishing)로 못 옮기는 파이프라인을 위한 이행 경로로 소개됐어요.

용어 풀이
2FA
2단계 인증. 비밀번호 외에 일회용 코드 같은 두 번째 확인을 요구하는 로그인 방식.
CI
지속적 통합(Continuous Integration). 코드가 올라올 때마다 자동으로 빌드·테스트·배포를 돌리는 서버.
dist-tag
npm 패키지 버전에 붙이는 이름표. latest 태그가 가리키는 버전이 기본 설치 대상이 된다.
운영자 인사이트

코딩 에이전트가 CI 에서 버전 올리기까지 맡는 파이프라인이라면, 신뢰 게시가 아직 안 되는 CI 에서도 이 토큰으로 「에이전트는 올려 두고 사람이 2FA 로 승인」 구조를 지금 만들 수 있어요. 다만 단계적 게시는 이미 존재하는 패키지에만 되고, 이 토큰으로도 dist-tag 를 옮기고 버전을 폐기할 수 있으니 유출 대응 절차는 그대로 두고 게시 전 사람이 보는 단계 하나를 더한 것으로만 여기세요.

여러 관점으로 보기
  • 이 토큰이 얹힌 기능 단계적 게시는 npm CLI 11.15.0·Node 22.14.0 이상이 필요하고, 이미 레지스트리에 있는 패키지에만 되며, 승인(npm stage approve)에는 2FA 가 필요해요. npm Docs
  • 도입 시점 단계적 게시는 5월 22일 npm CLI 11.15.0 부터 정식 출시됐고, 올린 버전은 메인테이너가 명시적으로 승인해야 설치 가능해져요. GitHub
  • 왜 지금인가 7월 8일 공지에서 2FA 우회 토큰은 2027년 1월 직접 게시를 잃고 비공개 패키지 읽기와 스테이징만 남는다고 예고했고, 이번 토큰은 그 예고의 이행 경로예요. GitHub
  • npm 로드맵 npm 제품 관리자 레오 발터가 9월 17일 올린 로드맵은 목적을 「탈취된 자격 증명이 할 수 있는 일을 줄이는 것」으로 적었고, 새 패키지의 스테이징 생성과 일괄 승인은 올해 남은 일정, 신뢰 게시 제공자 확대는 2027년으로 잡았어요. GitHub Community

원본 보기 (rss:github-changelog)