예시 출력:
- 각 단계의 소요 시간(밀리초)
- 상위 단계 시간/전체 시간 대비 비율
- 작업의 계층적 중첩 구조
- 각 단계의 메타데이터(예:
ops_count,ops)
- 계획 단계 (쿼리 계획): 일반적으로 빠릅니다
- 실행 단계 (SQL 실행): 실제 작업이 수행되는 단계입니다
- 전송 단계 (결과를 DataFrame으로): 데이터를 pandas로 변환하는 단계입니다
SQL execution이 병목이라면:
- 데이터 양을 줄일 수 있도록 필터를 더 추가합니다
- CSV 대신 Parquet를 사용합니다
- 적절한 인덱스가 설정되어 있는지 확인합니다(데이터베이스 소스의 경우)
read_csv 또는 read_parquet가 병목이라면:
- Parquet 사용(열 지향, 압축 형식)
- 필요한 컬럼만 읽기
- 가능하면 원본 데이터에서 필터링
to_df가 느리다면:
- 결과 집합(result set)이 너무 클 수 있습니다
- 필터를 더 추가하거나 limit를 설정하세요
- 미리 보려면
head()를 사용하세요