Crawling

인터넷, 블로그, 카페 등에서 부동산 관련 정보를 수집하여 데이터셋을 구축합니다.

1. Crawling from Internet

  1. Crawling

    • crawling을 통하여 데이터 수집
    • 수집한 정보를 정제하여 포맷을 구축합니다.
    • raw text

  2. Preprocessing

    • raw text 정제

  3. 정제된 데이터를 OpenAI API에 보내서

    1. 개념 정리 및 요약
    2. 질문 생성, 질문 증강, 질문 검증으로 나누어 받기

  4. 문제는 csv dataset으로 변화

    1. questions, option1, option2, option3, option4, option5, answer, explanation
    2. 문법적 오류 문제는 누락

References

  1. 대학 학과
  2. 인터넷 카페
  3. 블로그

References youtube

  1. 부동산학개론

  2. 민법 및 민사특별법 중 부동산중개에 관련되는 규정

  3. 공인중개사의 업무 및 부동산 거래 신고에 관한 법령 및 중개실무

  4. 부동산 공법 중 부동산 중개에 관련되는 규정

  5. 부동산 공시에 관한 법령

  6. 부동산 관련 세법

Was this page helpful?