데이터 워크플로우
작동 방식
데이터의 가능한 최고 품질을 보장하기 위해, 우리는 다음 과정을 따릅니다:
- 1. 콘텐츠 획득.
- 우리는 매일 구인 게시판과 회사 웹사이트와 같은 다양한 데이터 출처를 크롤링합니다.
- 2. 정보 추출.
- 다양한 엔티티(조직, 사람, 기술, 작업 등)와 그들의 상호작용은 독점적인 모델을 통해 추출됩니다.
- 3. 엔터티 해상도.
- 조직 엔터티는 추가 강화를 위해 고유한 도메인 이름에 연결됩니다.
- 4. 정규화 및 중복 제거.
- 엔티티는 규칙 기반 접근 방법을 사용하여 정상화한 후, 중복 제거 시스템으로 전송됩니다.
- 5. 품질 보증.
- 여러 데이터 분석가들이 데이터를 최고 품질로 유지하기 위해 매일 데이터를 모니터링하고 검증합니다.
