Data Mastery: From Analysis to System De

  • 홈
  • 태그
  • 방명록

2025/05/18 1

Dagster에서 자산 의존성 연결, 꼭 deps만 써야 할까? 29살t

Dagster를 사용하면서 자산(asset) 간의 연결을 어떻게 해야 하는지 고민한 적 있으신가요?저도 처음에는 자산 간 의존성을 연결하려면 @asset(deps=[...])을 반드시 써야 하는 줄 알았습니다. 그런데 알고 보니, Dagster는 훨씬 더 똑똑하게 동작하더라고요. 문제 상황아래처럼 두 개의 자산이 있다고 해보겠습니다:@assetdef table_name() -> str: return "user_events"@assetdef get_dataframe_from_clickhouse(table_name: str) -> pd.DataFrame: ... 이때 저는 get_dataframe_from_clickhouse가 table_name에 의존한다는 걸 Dagster에게 알려주기 위해 이..

시스템 개발 및 관리/Dagster 사용법 2025.05.18
이전
1
다음
더보기
프로필사진

Data Mastery: From Analysis to System De

  • 분류 전체보기 (298) N
    • 파이썬 (35)
      • 클래스와 객체 지향 (12)
      • 데이터프레임 다루기 (16)
      • 기초 프로그래밍 (7)
    • 자료 구조 (6)
    • 시스템 개발 및 관리 (158) N
      • 프로젝트 구조 설정 (17)
      • Git 사용법 (32)
      • DocKer 기본 및 활용 (13)
      • Dagster 사용법 (17) N
      • Unix 명령어 사용 (3)
      • Windows 환경 파일 자동화 (40)
      • Airflow로 워크플로우 자동화하기 (3)
      • MLflow를 활용한 머신러닝 실험 관리 (9)
      • MLOps 핵심 기술: 머신러닝 자동화 (9)
      • 이커머스 효율화: NLP 모델 적용 (10)
      • 자연어 처리 기술을 통한 절차서 검증 (5)
    • 데이터 베이스 (1)
    • 머신러닝 분석 (22)
      • 회귀 분석 (19)
      • 머신러닝 모델 기초부터 구축하기 (3)
    • 프로세스 마이닝 (21)
      • ProDiscovery 사용법 (5)
      • 프로세스 마이닝 개념 (16)
    • 공간 분석 (22)
      • 공간 분석 기초 (5)
      • 전기차 입지 분석 방법 (2)
      • 2024 서울 열린데이터광장 공공데이터 활용 분석 (6)
      • 2022 데이터 분석.활용 공모전(행안부) (9)
    • 분석 보고서 (11)
      • 그로스 해킹 분석 (7)
      • 네이버 리뷰 분석 (2)
      • 카카오톡 대화 분석 (1)
      • 센서 데이터 활용: 장비 이상 진단 및 예측 (1)
    • 통계 이론 (15)
    • ADP (5)

Tag

커피박 프로젝트(서울 행정동 별 카페 매출), 카페 매출 분석(배달 서비스), 호박너구리, Fast_Campus,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2025/05   »
일 월 화 수 목 금 토
1 2 3
4 5 6 7 8 9 10
11 12 13 14 15 16 17
18 19 20 21 22 23 24
25 26 27 28 29 30 31

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

티스토리툴바