TL;DR후보 중 정답이 존재하는 것과 그 정답을 골라 전달하는 것은 다르며, 검증기의 정확도가 추론 시 계산 확장의 성과를 결정한다.ORM은 최종 결과를, PRM은 중간 추론 단계를 평가한다. 과정 감독은 더 세밀한 피드백을 주지만 라벨 수집 비용과 잘못된 보상 신호를 함께 다뤄야 한다.자동 과정 라벨링과 약한 검증기의 가중 결합은 검증을 확장하는 방법이며, 그 판단을 작은 모델로 증류하거나 강화 학습에 활용하면 비용 절감과 자기 개선으로 이어진다.Stanford CS329A: Self-Improving AI Agents의 3강은 “여러 후보 중 어떤 답이 맞는지 어떻게 알아낼까?”를 다룬다. 2강의 추론 시 계산 확장을 실제 성과로 연결하는 검증(verification)에 집중한다.강사: Azalia..
전체 글
안녕하세요. 사진과 철학에 관심이 많은 웹 프론트엔드 개발자 오원종입니다. 시간이 지나도 꾸준히 읽힐 수 있는 글을 쓰고 싶습니다. 재미있는 일만 하면서 살고 있는 사람입니다.TL;DR모델을 다시 학습하지 않아도, 답을 여러 번 생성하고 수정·탐색하는 데 계산을 더 쓰면 문제 해결 범위를 넓힐 수 있다.다만 후보 안에 정답이 있다는 사실과 실제로 정답을 골라 전달하는 능력은 다르며, 검증기의 품질이 성능을 좌우한다.병렬 생성·순차 수정·검증을 문제 난이도와 예산에 맞게 조합해야 한다.Stanford CS329A: Self-Improving AI Agents의 두 번째 강의는 “이미 가진 모델에게 더 많은 시도와 검토 기회를 주면 어디까지 좋아질까?”를 다룬다. 반복 샘플링의 법칙 → 검증의 병목 → 계산 예산 배분 → 추론 구조의 자동 설계가 핵심 흐름이다.강사: Azalia Mirhoseini · 강의일: 2025년 9월 26일 · 원본 영상강의와 슬라이드를 한국어로 요약한..
TL;DRLLM은 규모 확장으로 기반 능력을 키우고, Instruction Tuning·RLHF로 지시 수행과 응답 품질을 다듬는다.추론 시 더 많이 생각하고 여러 답을 생성하면 성능을 높일 수 있지만, 정답을 고르는 검증기가 핵심이다.에이전트는 목표·도구·피드백의 순환으로 일을 수행하며, 검증된 경험을 학습에 돌려 자기 개선으로 연결한다. Stanford CS329A: Self-Improving AI Agents의 첫 강의는 “LLM은 어떻게 답변을 잘하는 모델에서 실제 일을 끝내는 에이전트로 발전하는가?”를 큰 흐름으로 설명한다. 강의의 연결고리는 사전 학습의 규모 확장 → 사후 학습 → 추론 시 계산 확장 → 도구와 피드백을 활용하는 에이전트다.강사: Aakanksha Chowdhery, Azali..
원문: https://www.matuzo.at/blog/2026/skip-links-tabindex최근 누군가 링크드인에 스킵 링크(skip link)가 대상 요소에 tabindex 속성이 없어서 자주 망가진다는 글을 올렸습니다. 저는 그 문제가 이미 과거의 일이라고 생각했기 때문에 그 글을 보고 무척 놀랐습니다. 그래서 직접 테스트해 보기로 했습니다.원래 문제그 글의 작성자는 키보드로 스킵 링크에서 Enter 키를 누르면 페이지가 대상 위치로 스크롤되지만 포커스는 링크에 그대로 남는다고 설명했습니다. Tab 키를 누르면 포커스가 대상으로 이동하지 않고 스킵 링크 다음에 있는 포커스 가능한 요소로 이동한다는 것입니다. 그는 이를 “유령 점프(phantom jump)”라고 부릅니다.Jump to conte..
26.11.02 ~ 26.11.0635살 이후로 사람은 꺾인다는 내용의 영상을 보았다.https://youtu.be/-4C0jbblqhM?si=_qWM1ncleUg8jypR회사에서는 35살 이하의 직원을 신입사원, 경력직 등으로 채용하고 싶어하며 평균 혼인 나이는 35세 이하이며 정부에서도 청년들을 위한 혜택을 34세까지로 제한하는 경우가 많다. 워킹홀리데이 기준도 보통 30세, 많아야 35세이다. 우리 사회의 많은 곳에서 35세를 기준으로 다르게 평가한다는 내용의 영상이었다. 나는 올해 한국 나이로 33세인데 이 나이가 얼마 안 남았다는 사실이 슬프기도 하면서 그전까지 나의 삶을 잘 관리해야겠다는 생각을 하게 되었다.35살 이후에는 그 이전에 내가 이루어 놓은 것들을 가지고 살아가야 한다. 나는 어떤 ..
26.10.26 ~ 26.10.30AI 시대의 개발자를 꿈꾸는 학생 개발자에게https://d2.naver.com/helloworld/1975819네이버 D2에서 정상혁 님이 발행한 글이다. 오랜만에 인사이트가 있는 좋은 글을 읽었다. 나도 요즘 평소에 하던 고민들이었는데 경험이 많은 선배 개발자분의 고민과 경험이 담긴 글을 읽으니 생각이 좀 정리가 되었던 것 같다. 나도 언젠가 이렇게 어디에 글을 쓰면 주변에 추천을 할 수 있을 만한 글을 쓸 수 있는 사람이 되고 싶다.이 글에서 와닿았던 부분은사람만이 '책임’을 질 수 있습니다. AI 에이전트가 모든 작업을 다 해 준다고 해도 그 소프트웨어를 사용자가 쓰게 하는 결정은 사람이 내립니다. ...누구나 코드를 만들 수 있게 된 시대에 '개발자’라는 명칭이..
26.10.19 ~ 26.10.22정신없이 살다 보니 지난 2주간 글을 쓰는 걸 놓쳤다. 다시 열심히 써 보아야겠다.시니어 엔지니어처럼 소프트웨어 시스템 설계하기GeekNews 뉴스레터를 통해 Free Code Camp의 3시간짜리 시스템 설계 강의 영상을 알게 되었다. 이러한 고퀄리티 강의 영상을 무료로 볼 수 있다는 점이 참 감사하다고 느껴진다. 동시에, 나는 이러한 시스템 디자인에 대한 어느 정도의 지식과 경험을 갖추고 있는가? 생각해 보면 아직 지식과 경험이 부족한 지점이 많아 불안감을 느끼기도 한다.60분짜리 면접을 기준으로 강사는 5가지 프레임워크에 따라 진행하라고 조언한다.요구사항 확인 : 설계를 시작하기 전에 기능과 제약을 확정데이터 모델 및 API 계약데이터 : 주요 엔티티, 관계, 기본..
26.09.28 ~ 26.10.02더 커뮤니티 시즌 1, 2 정주행 중이다.지난 추석 연휴부터 웨이브의 더 커뮤니티 시리즈를 정주행하고 있다. 지난 추석 때 시즌 1을 몰아서 다 보았고, 이번 주에 시즌 2를 보고 있다. 너무 재미있다. 프로그램을 보면서 유익하다는 생각을 해 본 적이 많지 않은데, 오랜만에 유익한 프로그램을 찾은 것 같아서 좋다.시즌 1은 정치 성향에 대한 주제였다면 시즌 2는 경제에 대한 주제로 조금 다르다. 공통적으로 참가자들이 하나의 커뮤니티를 이루는데, 그 커뮤니티는 마치 작은 나라와 같다. 그 안에서 리더를 뽑고, 생산 활동을 하고, 법을 만들고, 세금을 걷으며, 전쟁을 일으키기도 한다. 이들이 여러 활동들을 하는 걸 보면서 나는 이 나라의 리더들이 정말 답이 없는 문제를 해결..
