LLM Wiki 수집(Ingest)

새 원본을 LLM Wiki에 엮어 넣는 작업이다. 핵심은 색인만 하는 것이 아니라 기존 페이지에 지식을 녹여 넣는 것이다. Karpathy LLM Wiki

단계#

원본이 제시한 예시 흐름 Karpathy LLM Wiki:

1. 사용자가 새 원본을 raw 폴더에 넣고 LLM에게 처리하라고 말한다.
2. LLM이 원본을 읽는다.
3. LLM이 핵심 내용을 사용자와 이야기한다.
4. 위키에 요약 페이지를 쓴다.
5. index를 갱신한다. → index·log 운영
6. 위키 곳곳의 관련 개체·개념 페이지를 갱신한다.
7. log에 항목을 추가한다.

자료 하나가 위키 페이지 10~15개를 건드릴 수 있다. Karpathy LLM Wiki

실제 예시#

에이전트에게 하는 요청과 log에 남는 기록:

(사용자) raw/에 새 글 넣었어. 수집해줘.

(log.md 맨 아래에 추가)
## [2026-04-02] ingest | Article Title

log 접두어 형식은 원본의 예시를 그대로 옮긴 것이다. Karpathy LLM Wiki

웹 글을 raw로 가져오는 방법은 Obsidian 웹 자료 수집 세팅을 본다.

하나씩 vs 한꺼번에#

저자 본인은 하나씩 넣고 계속 관여하는 쪽을 선호한다. 어느 쪽이든 자기 스타일에 맞는 워크플로를 정해 스키마 파일에 적어 두라고 권한다. Karpathy LLM Wiki

언제 쓰고 언제 쓰지 않는가#

• 쓴다: 시간에 걸쳐 지식이 쌓이는 주제에 새 원본이 들어왔을 때. Karpathy LLM Wiki
• 쓰지 않는다: 원본은 수집에서 제외할 기준을 따로 정하지 않는다. 범위 밖 자료를 거르는 기준은 각자 스키마에서 정할 몫이다. Karpathy LLM Wiki

주의#

• 원본 레이어는 변경 불가다. LLM은 읽기만 한다. Karpathy LLM Wiki
• 이미지가 들어간 마크다운(용어 사전)은 LLM이 한 번에 못 읽는다. 텍스트를 먼저 읽고 이미지는 따로 본다. Karpathy LLM Wiki