데이터 빌더 파이프라인 및 시드 데이터 형식

시드 데이터 형식

도구 호출 파이프라인을 사용할 때 시드 데이터 및 참조 문서를 정의하기 위해 다음 형식의 입력 YAML 파일을 만듭니다:

• task.yaml 시드 데이터를 포함합니다.

  작업 YAML 파일에는 다음과 같이 합성 데이터 세트를 생성하기 위한 기초 모델을 훈련하는 데 사용되는 샘플 질문 및 답변 쌍이 포함되어 있습니다:

  task_description: <Description of this task>
  min_func_count: < Integer. Minimum value 1>
  max_func_count: < Integer. Max value 4>
  created_by: <Your organization name>
  fc_spec_loaders:
    - type: fc
      file_path: <Path to API spec YAML file>
  seed_examples:
    - domain: <Your domain name>
      input: <Sample prompt 1>
      output: '<Sample response 1>'
    - domain: <Your domain name>
      input: <Sample prompt 2>
      output: '<Sample response 2>'
  

• api-spec.yaml 를 참조 문서로 사용하세요.

  API 사양 YAML 파일에는 기초 모델이 합성 데이터 세트를 생성하는 데 사용하는 도구를 정의하는 도메인에 대한 API 사양이 포함되어 있습니다.

  <Your domain-name>:
    <function-1-name>:
      description: <function-1-description>
      name: <function-1-name>
      parameters:
          properties:
            <parameter-1-name>:
                description: <parameter-1-description>
                type: <parameter-1-type>
            <parameter-2-name>:
                description: <parameter-2-description>
                type: <parameter-2-type>
          required:
          - <required parameter 1>
          - <required parameter 2>
    <function-2-name>:
      description: <function-2-description>
      name: <function-2-name>
      parameters:
          properties:
            <parameter-1-name>:
              description: <parameter-1-description>
              type: <parameter-1-type>
            <parameter-2-name>:
              description: <parameter-2-description>
              type: <parameter-2-type>
          required:
          - <required parameter 1>
          - <required parameter 2>
  

시드 데이터 형식

관계형 데이터베이스에 저장된 데이터에 대해 수행할 다양한 작업을 설명하는 샘플 일반 텍스트 문, 작업을 실행하는 해당 SQL 쿼리, 데이터가 다음과 같이 구성되고 저장되는 방식을 정의하는 데이터베이스 스키마가 포함된 입력 YAML 파일을 만듭니다:

task_description: <Description of this task>
seed_examples:
   - utterance: <input question 1>
     query: <sample SQL 1>
   - utterance: <input question 2>
     query: <sample SQL 2>
database:
   schema: "<Data Definition Language (DDL) statement of one or more tables. Separate each DDL by a semi-colon>"

시드 데이터 형식

주제를 학습하는 사람이 질문할 수 있는 샘플 질문과 답변( QnA ) 쌍과 지식창고 역할을 하는 콘텐츠가 포함된 근거 문서가 포함된 입력 YAML 파일을 다음과 같이 만듭니다:

domain: <A phrase denoting your use case's domain>
task_description: "<Description of this task>"
seed_examples:
  - answer: <sample answer 1>
    question: <sample question 1>
  - answer: <sample answer 2>
    question: <sample question 2>
include:
  documents:
    <doc-set-1-name>: <name of the knowledge document(s). Specify either one document or wildcard to refer to multiple documents>
    <doc-set-2-name>: <name of the knowledge document(s). Specify either one document or wildcard to refer to multiple documents>

상위 주제: 합성 비정형 데이터 생성