AI가 인용하는 작가가 되는 법

미리보기

당신이 방금 쓴 기사가 있다고 상상해보자. 첫 문장은 이렇다. “국회가 어제 통과시킨 법안은…” 그리고 500단어쯤 뒤에 결론이 나온다. “이 법안이 시행되면 중소기업 3만 곳이 혜택을 볼 것으로 보인다.” 사람이 읽으면 괜찮다. 끝까지 읽고 결론을 이해한다. 하지만 AI가 읽으면? AI는 첫 문장부터 마지막 문장까지 모든 토큰에 같은 가중치를 두지 않는다. 오히려 앞부분에 나온 정보에 더 높은 중요도를 부여한다. 그래서 당신의 결론이 뒤에 숨어 있으면, AI가 요약할 때 “국회가 법안을 통과시켰다”까지만 기억하고 “중소기업 3만 곳”은 놓칠 확률이 높다. 이것이 이 책의 출발점이다. AI는 사람처럼 글을 읽지 않는다. 단어 단위로 읽지도, 문장의 흐름을 느끼며 읽지도 않는다. AI는 토큰이라는 조각으로 글을 분해하고, 문맥 창이라는 제한된 공간 안에서 앞뒤 관계를 계산한다. 그리고 그 계산 결과가 요약, 검색 노출, 추천 여부를 결정한다. ## 토큰화: AI가 글을 쪼개는 방식 사람은 “사과”라는 단어를 하나의 의미로 인식한다. AI는 다르다. AI는 “사과”를 토큰 하나로 볼 수도 있지만, “사과드립니다”의 “사과”와 “빨간 사과”의 “사과”를 완전히 다른 토큰으로 처리할 수 있다. 토큰은 단어보다 작을 수도, 클 수도 있다.