Easygoing

검색과 추천 - (사이드 플젝) 데이터 다운로드 및 전처리 micro app 개발 (2)

데이터 다운로드 및 전처리 micro app 개발 데이터를 효과적으로 처리하기 위해서는 데이터를 다운로드하고, 압축을 해제하며, 필요한 정보를 추출해 저장하는 일련의 과정이 필요합니다. 이러한 과정은 수동으로 처리하기에는 번거롭고, 오류를 피하기도 어렵습니다. 그래서 Python을 사용해 데이터 처리 파이프라인을 자동화하고, logging을 통해 진...

검색과 추천 - (사이드 플젝) 태스크 설정 - 인덱싱 인프라 구축

사이드 프로젝트: 제품 검색 인덱스 인프라 구축 프로젝트 개요 이번 사이드 프로젝트에서는 Amazon Berkeley Objects (ABO) 데이터셋을 사용하여 강력한 제품 검색 인덱스 인프라를 구축할 예정입니다. 주요 초점은 대규모 데이터 인덱싱 처리와 배치 인덱싱 및 실시간 업데이트를 위한 효율적인 파이프라인 생성에 있습니다. 데이터셋 A...