직업으로서의 프롬프트 엔지니어

실제로 프롬프트 엔지니어링 작업에는 시스템 프롬프트 및 프리샷 예제 작성, 출력 형식 지정, 평가 세트 구축, 실패 및 오용에 대한 스트레스 테스트, 작동 항목 문서화, 실행 후 출력 모니터링 등이 포함됩니다. 협력적입니다. 그 사람은 목표를 정의하는 제품 관리자, 메시지를 애플리케이션에 연결하는 엔지니어, 품질을 판단하는 주제 전문가와 함께 일합니다. 이 제목은 2023년 AI 기업과 스타트업이 언론에 널리 보도되는 높은 보수를 받는 프롬프트 엔지니어 목록을 게시하면서 유명해졌습니다. 그 이후로 세 가지가 바뀌었습니다. 모델은 지침을 훨씬 더 잘 따르므로 필요한 트릭이 더 적습니다. 오픈 소스 DSPy 프레임워크와 같은 자동 프롬프트 최적화 도구는 프로그래밍 방식으로 더 나은 프롬프트를 검색할 수 있습니다. 그리고 작업은 많은 실무자가 컨텍스트 엔지니어링이라고 부르는 작업으로 확대되었습니다. 즉, 어떤 문서, 도구 결과, 메모리 및 대화 기록이 모델의 컨텍스트 창에 어떤 형식으로 들어갈지 결정하는 것입니다. 결과적으로 전담 프롬프트 엔지니어 직함은 상대적으로 드물지만 해당 기술은 AI 엔지니어, 응용 AI 전문가, 대화 디자이너, AI 콘텐츠 전략가, LLM 평가 전문가, 솔루션 엔지니어, 해당 분야에 AI 도구를 형성하는 법률, 의학 또는 교육 분야의 도메인 전문가 등 다른 역할 내에 나타납니다. 두 가지 오해는 바로잡을 가치가 있습니다. 신속한 엔지니어링은 비밀스러운 마법의 문구에 관한 것이 아닙니다. 측정된 결과를 체계적으로 실험하는 것입니다. 또한 기술이 필요하지 않은 직업도 아닙니다. 유능한 실무자는 Python 및 API 호출에 정확한 글쓰기, 도메인 전문 지식, 최소한 기본 코딩을 결합하여 대규모 테스트를 실행할 수 있습니다. 좋은 포트폴리오 프로젝트는 정의된 작업, 테스트 세트, 기본 결과, 이유가 있는 반복, 최종 측정항목 등 단지 영리한 프롬프트가 아닌 프로세스를 보여줍니다. 예를 들어 문서 추출 파이프라인, 엣지 케이스 테스트를 통한 고객 지원 프롬프트, 여러 모델에서 하나의 프롬프트가 어떻게 수행되는지 비교 등이 있습니다.