ExampleValidator TFX 파이프라인 구성 요소
컬렉션을 사용해 정리하기
내 환경설정을 기준으로 콘텐츠를 저장하고 분류하세요.
ExampleValidator 파이프라인 구성 요소는 훈련 및 제공 데이터에 존재하는 문제점을 식별합니다. 데이터에서 다양한 종류의 문제점을 감지할 수 있습니다. 예를 들어 다음을 수행할 수 있습니다.
- 사용자의 기대치를 코드화하는 스키마와 데이터 통계를 비교하여 검증을 수행합니다.
- 훈련 및 제공 데이터를 비교하여 훈련-제공의 편향을 감지합니다.
- 일련의 데이터를 확인하여 데이터 이탈을 감지합니다.
ExampleValidator 파이프라인 구성 요소는 StatisticsGen 파이프라인 구성 요소에 의해 계산된 데이터 통계를 스키마와 비교하여 예제 데이터에 존재하는 문제점을 식별합니다. 추론된 스키마는 입력 데이터가 만족할 것으로 예상되는 속성을 코드화하고 개발자가 이를 수정할 수 있습니다.
- 입력: SchemaGen 구성 요소의 스키마 및 StatisticsGen 구성 요소의 통계
- 출력: 검증 결과
ExampleValidator 및 TensorFlow 데이터 검증
ExampleValidator는 입력 데이터 검증을 위해 TensorFlow Data Validation을 광범위하게 사용합니다.
ExampleValidator 구성 요소 사용하기
ExampleValidator 파이프라인 구성 요소는 일반적으로 배포가 매우 쉽고 사용자 정의가 거의 필요하지 않습니다. 일반적인 코드는 다음과 같습니다.
from tfx import components
...
validate_stats = components.ExampleValidator(
statistics=compute_eval_stats.outputs['statistics'],
schema=infer_schema.outputs['schema']
)
달리 명시되지 않는 한 이 페이지의 콘텐츠에는 Creative Commons Attribution 4.0 라이선스에 따라 라이선스가 부여되며, 코드 샘플에는 Apache 2.0 라이선스에 따라 라이선스가 부여됩니다. 자세한 내용은 Google Developers 사이트 정책을 참조하세요. 자바는 Oracle 및/또는 Oracle 계열사의 등록 상표입니다.
최종 업데이트: 2021-01-15(UTC)
[{
"type": "thumb-down",
"id": "missingTheInformationINeed",
"label":"필요한 정보가 없음"
},{
"type": "thumb-down",
"id": "tooComplicatedTooManySteps",
"label":"너무 복잡함/단계 수가 너무 많음"
},{
"type": "thumb-down",
"id": "outOfDate",
"label":"오래됨"
},{
"type": "thumb-down",
"id": "translationIssue",
"label":"번역 문제"
},{
"type": "thumb-down",
"id": "samplesCodeIssue",
"label":"샘플/코드 문제"
},{
"type": "thumb-down",
"id": "otherDown",
"label":"기타"
}]
[{
"type": "thumb-up",
"id": "easyToUnderstand",
"label":"이해하기 쉬움"
},{
"type": "thumb-up",
"id": "solvedMyProblem",
"label":"문제가 해결됨"
},{
"type": "thumb-up",
"id": "otherUp",
"label":"기타"
}]
{"lastModified": "\ucd5c\uc885 \uc5c5\ub370\uc774\ud2b8: 2021-01-15(UTC)"}
[[["이해하기 쉬움","easyToUnderstand","thumb-up"],["문제가 해결됨","solvedMyProblem","thumb-up"],["기타","otherUp","thumb-up"]],[["필요한 정보가 없음","missingTheInformationINeed","thumb-down"],["너무 복잡함/단계 수가 너무 많음","tooComplicatedTooManySteps","thumb-down"],["오래됨","outOfDate","thumb-down"],["번역 문제","translationIssue","thumb-down"],["샘플/코드 문제","samplesCodeIssue","thumb-down"],["기타","otherDown","thumb-down"]],["최종 업데이트: 2021-01-15(UTC)"],[],[]]