대부분의 사람들은 Claude 를 검색창처럼 사용합니다. 질문하고, 답변 받고, 탭을 닫죠. 최고의 기능을 잠근 채로 두고 있는 겁니다.
이 글을 저장하세요 :)
Stanford 에서 STORM 이라는 연구 시스템을 만들었습니다. 동료 평가 연구에서 이 시스템은 차선의 방법보다 25% 더 체계적인 기사를 생성했습니다. 오픈 소스이고 무료입니다. 거의 아무도 이와 동일한 아이디어를 Claude 에서 4 개의 프롬프트로 실행할 수 있다는 사실을 모릅니다.
소프트웨어도, GitHub 도, 설정도 필요 없습니다. 그냥 붙여넣기만 하면 됩니다. 지금부터 5 분 후면 며칠을 읽어도 알 수 없었던 주제에 대해 더 많이 알게 될 것입니다.
전체 방법은 다음과 같습니다.
1 단계: STORM 의 실제 개념
STORM 은 Synthesis of Topic Outlines through Retrieval and Multi perspective Question Asking의 약자입니다. Stanford OVAL Lab 에서 2024 년 NAACL 에 발표했습니다.
라이브 버전은 storm.genie.stanford.edu에서 사용해볼 수 있습니다. 무료이고 가입도 필요 없습니다. 주제를 입력하면 출처가 포함된 기사가 작성되는 과정을 실시간으로 볼 수 있습니다.
12 분짜리 워크스루 비디오는 여기에서 확인할 수 있습니다: STORM by Stanford on YouTube. 한 번 보시길 추천합니다.
전체 코드는 github.com/stanford-oval/storm에 있습니다. MIT 라이선스로, 원한다면 노트북에서 직접 실행할 수도 있습니다.
하지만 진짜 중요한 것은 이것입니다. 이 모든 것이 필요하지 않습니다. Stanford 의 방법은 단지 사고 방식일 뿐입니다. Claude 에서 4 개의 복사-붙여넣기 프롬프트로 동일한 사고 방식을 실행할 수 있습니다.
이것이 바로 이 글의 나머지 내용입니다.
2 단계: 하나의 프롬프트가 항상 실패하는 이유
Claude 에게 "X에 대해 알려줘"라고 요청하면 대다수의 관점, 즉 가장 일반적인 프레임과 표면적인 내용만 얻을 수 있습니다.
얻을 수 없는 것은 X 를 매일 다루는 실무자, 해당 분야가 틀렸다고 생각하는 회의론자, 자금의 흐름을 쫓는 경제학자, 이전에 유사한 패턴을 본 역사가, 실제 연구를 읽은 학자의 관점입니다.
이 다섯 목소리는 모두 다른 것들을 봅니다. 이것이 바로 박사 과정 학생이 하는 일입니다. 한 가지 질문만 하지 않습니다. 다섯 가지 질문을 합니다.
Stanford 논문은 이를 숫자로 증명했습니다. 다양한 관점에서 작성된 기사는 일반적인 방식으로 작성된 기사보다 25% 더 체계적이고 10% 더 광범위한 범위를 보여줬습니다. 이것이 전체적인 돌파구입니다. 다양한 관점의 질문은 단일 프롬프트 연구로는 절대 발견할 수 없는 사각지대를 찾아냅니다.
박사 수준의 연구 작업은 인간이 40~60 시간을 읽어야 합니다. 대부분의 사람들은 그 시간을 낼 수 없습니다. STORM 은 이를 압축합니다. 아래 네 가지 프롬프트는 이를 더욱 압축합니다. 총 5 분입니다.
3 단계: 프롬프트 1, 다양한 관점 스캔
이것이 방법의 핵심입니다. 이 내용을 Claude 에 붙여넣으세요. 1 번째 줄의 주제를 바꾸면 됩니다.
1[주제]에 대해 연구해야 합니다.2이 주제에 대한 5 가지 전문가 관점을 시뮬레이션해 주세요:31. 실무자: 이것을 매일 다룹니다.4학계가 놓치는 것은 무엇인가요?5일반적으로 무시되는 현실은 무엇인가요?62. 학자: 이것을 수년간 연구했습니다.7동료 평가된 증거는 실제로 무엇을 말하나요?8증거는 대중의 믿음과 어디에서 모순되나요?93. 회의론자: 주류 관점이 틀렸다고 생각합니다.10가장 강력한 반론은 무엇인가요?11지지자들이 편리하게 무시하는 증거는 무엇인가요?124. 경제학자: 자금의 흐름을 쫓습니다.13현재 서사에서 누가 이익을 얻나요?14어떤 재정적 인센티브가 연구를 형성하나요?155. 역사가: 이전에 유사한 패턴을 본 적이 있습니다.16어떤 역사적 유사점이 있나요?17그것들이 어떻게 진행되었는지에서 무엇을 배울 수 있나요?18각 관점에 대해 다음을 알려주세요:19- 두 문장으로 설명하는 핵심 입장20- 그들의 관점을 지지하는 가장 강력한 증거21- 다른 관점에서는 절대 말해주지 않을, 그들이 나에게 해줄 수 있는 한 가지
돌아오는 결과: 동일한 주제에 대한 매우 다른 다섯 가지 해석입니다. 실무자는 학자가 놓치는 것을 봅니다. 회의론자는 실무자가 가정하는 것에 도전합니다. 경제학자는 학자가 무시하는 인센티브를 드러냅니다. 역사가는 경제학자가 볼 수 없는 패턴을 제공합니다.
이것은 60 초의 작업으로, 하나의 프롬프트로는 절대 찾을 수 없는 것을 찾아냅니다.
4 단계: 프롬프트 2, 모순 지도
이제 Claude 가 5 가지 목소리가 충돌하는 지점을 찾도록 만드세요. 충돌하는 지점이야말로 진정한 이해가 있는 곳입니다.
1위의 5 가지 관점을 바탕으로 모순을 매핑하세요:21. 두 개 이상의 관점이 서로 직접적으로 모순되는3지점은 어디인가요? 충돌하는 구체적인 주장과 함께4각 갈등을 나열하세요.52. 어느 관점이 가장 강력한 증거를 가지고 있나요?6어느 관점이 가장 약한가요? 그 이유는 무엇인가요?73. 대답된다면 가장 큰 모순을 해결할 수 있는8한 가지 질문은 무엇인가요?94. 모든 관점이 동의하는 것은 무엇인가요?10(이것은 아마도 사실일 것입니다. 심지어 반대자들도 확인합니다.)115. 어떤 관점도 다루지 않은 주제는 무엇인가요?12(이것이 전체 분야의 사각지대입니다.13종종 가장 가치 있는 발견입니다.)
돌아오는 결과: 전문가들이 어디에서 동의하지 않고 그 이유가 무엇인지 보여주는 지도입니다. 대부분의 사람들은 이 단계를 건너뜁니다. 이것이 표면적 이해와 진정한 전문성을 구분 짓는 단계입니다.
5 가지 관점이 모두 동의한다면, 아마도 사실일 것입니다. 어떤 관점도 특정 주제를 다루지 않았다면, 방금 전체 분야의 공백을 찾은 것입니다.
5 단계: 프롬프트 3, 종합
이제 Claude 가 모든 것을 하나의 연구 브리핑으로 통합하도록 만드세요.
15 가지 관점과 모순 지도의 모든 내용을2연구 브리핑으로 종합하세요:31. 한 문단 요약: 헤드라인만이 아닌 뉘앙스가 필요하고460 초밖에 없는 CEO에게 브리핑하듯 이 주제를 설명하세요.52. 5 가지 핵심 발견: 지금 알게 된 가장 중요한 사항들을6신뢰도 순으로 나열하세요. 각 항목에 대해 어떤 관점이7지지하고 어떤 관점이 반박하는지 명시하세요.83. 숨겨진 연결: 5 가지 관점을 모두 함께 볼 때만9나타나는, 발견 사이의 비직관적인 연결점 하나.104. 실행 가능한 통찰: 모든 증거를 바탕으로,11[당신의 역할]을 가진 사람이 실제로 무엇을12다르게 해야 할까요? 구체적으로 말씀해 주세요.135. 최전선 질문: 대답된다면 이 주제에 대한 우리의14이해 방식을 완전히 바꿀 한 가지 질문.
돌아오는 결과: 어떤 단일 전문가도 쓸 수 없는 브리핑입니다. 모든 각도를 고려하고, 모순을 명명하며, 신뢰도를 평가하고, 구체적인 행동으로 귀결됩니다. 이것은 박사 과정 학생이 48 시간 안에 만들어낼 결과물입니다. 당신은 90 초 만에 얻었습니다.
6 단계: 프롬프트 4, 동료 검토
STORM 에는 한 가지 알려진 약점이 있습니다. Stanford 연구진도 이를 지적했습니다. 시스템이 자기 비판을 하지 않는다는 것입니다. 출처 편향과 사실 오연결이 스며들 수 있습니다. 이 프롬프트는 Claude 가 자신의 작업을 평가하게 하여 이 문제를 해결합니다.
1이제 자신의 연구 브리핑을 동료 검토하세요:21. 신뢰도 점수: 5 가지 핵심 발견 각각에 대해3신뢰도를 1 에서 10 사이로 평가하고 각 점수를 설명하세요.42. 가장 취약한 연결: 가장 확신이 없는 주장은 무엇인가요?5이를 확인하는 데 필요한 구체적인 정보는 무엇인가요?63. 편향 확인: 종합 과정에서 어떤 관점이7과도하게 대표되었을 가능성이 있나요?8특정 목소리가 지배적이었나요?94. 누락된 관점: 결론을 바꿀 수 있는106 번째 각도를 포함했어야 했나요?115. 종합 평가: Stanford 교수가 이 브리핑을 검토한다면12어떤 점수를 주고 그 이유는 무엇일까요?13무엇을 고치라고 말할까요?
돌아오는 결과: 자신의 연구에 대한 솔직한 평가입니다. 강력한 주장, 약한 주장, 편향, 누락된 각도. 실제 동료 검토는 몇 달이 걸립니다. 당신은 60 초 만에 해냈습니다.
7 단계: 5 분 워크플로우
1 분: 프롬프트 1. 5 가지 전문가 관점을 얻습니다.
2~3 분: 프롬프트 2. 모순 지도를 얻습니다.
3~4 분: 프롬프트 3. 연구 브리핑을 얻습니다.
5 분: 프롬프트 4. 무엇이 신뢰할 수 있고 무엇이 그렇지 않은지 알게 됩니다.
총 시간: 5 분. 결과물: 모순 분석, 종합, 구체적인 행동, 신뢰도 점수가 포함된 다양한 관점의 브리핑.
박사 과정 학생이 이 결과물을 수작업으로 만드는 데는 40~60 시간이 걸립니다. 그들이 느려서가 아닙니다. 5 가지 각도에서 읽고, 모순을 매핑하고, 종합하고, 자기 비판하는 것은 한 인간의 뇌에게는 진정으로 40 시간이 걸리는 일이기 때문입니다.
8 단계: 오늘부터 활용할 수 있는 7 가지 방법
1. 기사나 보고서를 작성하기 전에. 4 개의 프롬프트를 실행하세요. 다른 누구도 생각하지 못한 각도를 다루게 될 것입니다.
2. 중요한 비즈니스 결정을 내리기 전에. 5 가지 관점을 모두 얻으세요. 실무자는 현실에서 통하는 것을 알려줍니다. 회의론자는 무엇이 잘못될 수 있는지 알려줍니다. 경제학자는 누가 이익을 보는지 알려줍니다.
3. 면접 보기 전에. 5 분 안에 5 가지 각도로 회사를 조사하세요. 실무자 관점은 내부자 언어를 제공합니다. 회의론자 관점은 날카로운 질문을 제공합니다. 회의실에 있는 누구보다도 더 준비된 상태로 들어가게 됩니다.
4. 투자하기 전에. 상승 시나리오, 하락 시나리오, 역사적 유사점, 인센티브 지도, 학문적 증거. 5 분 안에. 모순 지도는 실제 위험이 어디에 있는지 보여줍니다.
5. 새로운 기술을 배우기 전에. 5 가지 각도로 분야를 파악하세요. 실무자는 무엇을 먼저 배워야 하는지 알려줍니다. 학자는 이론을 알려줍니다. 회의론자는 무엇이 과장되었는지 알려줍니다. 잡음을 건너뛰게 됩니다.
6. 협상하기 전에. 상대방을 5 가지 관점에서 조사하세요. 그들의 인센티브, 약점, 과거 행동을 이해하세요. 구조적 우위를 가지고 들어가게 됩니다.
7. 발표하기 전에. 주제에 대해 STORM 을 실행하세요. 청중이 반론을 제기하기 전에 슬라이드가 답변할 것입니다. 질의응답이 수월해질 것입니다.
페르소나 블록
당신은 읽는 사람입니다. 어려운 질문을 던집니다. 똑똑해 보이지만 아무것도 말하지 않는 200 자 요약을 원하지 않습니다.
당신은 실제로 빠르게, 출처와 함께, Stanford 대학원생처럼 이해하기를 원합니다. 6 년치 등록금 청구서 없이 말이죠.
이 방법이 바로 그런 사람들을 위한 것입니다.
당신이 그런 사람이라면, 이 글을 저장하세요. 4 개의 프롬프트를 사용하세요. 그 차이를 경험해보세요.
불편한 진실
아무도 큰 소리로 말하지 않는 것이 있습니다.
Stanford 팀은 2024 년에 이것을 발표했습니다. 논문은 동료 평가를 거쳤습니다. 코드는 오픈 소스입니다. 라이브 도구는 무료입니다. 방법은 네 가지 프롬프트입니다. 그리고 거의 아무도 사용하지 않습니다.
우리는 18 개월의 기간 안에 있습니다. AI 로 연구하는 방법을 제대로 배운 사람들은 그렇지 않은 사람들보다 훨씬 더 뛰어난 사고를 할 것입니다. 그들이 더 똑똑해서가 아닙니다. 그들이 다른 모든 사람들이 첫 번째 Google 검색 결과를 읽는 동안 5 가지 관점, 모순 지도, 종합, 동료 검토를 실행하고 있기 때문입니다.
18 개월 후에는 이런 종류의 워크플로우가 모든 도구에 내장될 것입니다. 우위는 사라질 것입니다. 오늘날 그것은 여전히 눈에 띄는 곳에 숨겨진 비밀입니다.
가장 연구해야 할 주제를 선택하세요. Claude 를 엽니다. 프롬프트 1 을 붙여넣으세요.
지금부터 5 분 후면 며칠 동안 읽어도 알 수 없었던 것보다 더 많이 알게 될 것입니다.
프롬프트는 위에 있습니다. Stanford 가 방법을 증명했습니다. 나머지는 당신의 몫입니다.
도움이 되었기를 바랍니다. Nav ❤️
