모티's Study Blog

1. 개요데이터 파이프라인 자동화는 현대 데이터 엔지니어링에서 매우 중요한 부분입니다. 이번 포스팅에서는 Docker 환경에서 Apache Airflow를 설치하고, MSSQL Server와 연동하여 데이터를 자동으로 적재하는 전체 과정을 상세히 다루어보겠습니다.2. 환경 구성2.1 사전 요구사항Docker Desktop 설치Python 3.xMSSQL Server2.2 프로젝트 구조3. Airflow 설치 및 설정3.1 Docker Compose 파일 작성version: '3'services: airflow: build: . image: apache/airflow:2.7.3 ports: - "8080:8080" volumes: - ./dags:/opt/airfl..

[AI 리포트] AI 기반 경제 뉴스 요약이 포스트는 한국경제TV의 유튜브 콘텐츠 '당신이 잠든 사이에'를 AI 기술로 요약한 경제 뉴스 리포트를 소개합니다.경제 뉴스 요약 리포트 다크 모드 당신이 잠든 사이에 2024-11-13 오늘의 헤드라인 트럼프 행정부 정책과 경제 지표 변화에 따른 시장 동향 주요 포인트 미국 경제 지표와 연준 정책의 영향 뉴욕연은 1년 기대 인플레이션이 2.9%로 4년 만에 ..

[AI 리포트] AI 기반 경제 뉴스 요약이 포스트는 한국경제TV의 유튜브 콘텐츠 '당신이 잠든 사이에'를 AI 기술로 요약한 경제 뉴스 리포트를 소개합니다.경제 뉴스 요약 리포트 다크 모드 당신이 잠든 사이에 2024-11-12 오늘의 헤드라인 트럼프 당선 이후 주식시장과 암호화폐 시장의 변화 주요 포인트 트럼프 당선과 주식시장 변화 트럼프 당선 이후 주식시장은 상승세를 보이고 있음. 다우 지수는 4..

[AI 리포트] AI 기반 경제 뉴스 요약이 포스트는 한국경제TV의 유튜브 콘텐츠 '당신이 잠든 사이에'를 AI 기술로 요약한 경제 뉴스 리포트를 소개합니다.경제 뉴스 요약 리포트 다크 모드 당신이 잠든 사이에 2024-11-11 오늘의 헤드라인 트럼프 당선과 글로벌 경제 변화 주요 포인트 트럼프 당선과 경제 정책 변화 트럼프 당선으로 인해 미국 경제 정책에 변화가 예상됨. 법인세 인하 계획이 기업들에..

이번 글에서는 한국은행 경제통계시스템(ECOS)에서 제공하는 API를 활용하여 금리와 환율 데이터를 수집하는 방법을 상세히 알아보겠습니다.🔑 1. 한국은행 Open API 시스템 접근하기한국은행은 ECOS(Economic Statistics System)를 통해 다양한 경제 통계 데이터를 제공하고 있습니다. API를 사용하기 위해서는 다음 절차가 필요합니다. ECOS 홈페이지에 접속회원가입 및 로그인 ✍️Open API → 인증키 신청 메뉴에서 API 키 발급받기 🔐승인 후 발급받은 인증키 확인 ✅ https://ecos.bok.or.kr ecos.bok.or.kr  🛠️  2. API 호출 준비하기한국은행 API는 REST 방식으로 제공되며, 주요 파라미터는 다음과 같습니다. authKey: 인증..

이번 글에서는 실제로 한국거래소 데이터 포털에 접근하는 방법, API 호출을 설정하는 방법, 파이썬을 사용한 데이터 수집 코드까지 구체적으로 설명해보겠습니다.1. 한국거래소 데이터 포털 접근하기먼저, 한국거래소(KRX)에서 제공하는 데이터 포털에 접근해야 합니다. 한국거래소는 다양한 데이터를 제공하고 있는데, 직접 API를 통해 데이터를 수집하려면 인증이 필요할 수 있습니다. 일반적으로 API 접근이 허용된 경우, 포털에서 API Key를 발급받아야 합니다.http://data.krx.co.kr/contents/MDC/MAIN/main/index.cmd KRX 정보데이터시스템증권·파생상품의 시장정보(Marketdata), 공매도정보, 투자분석정보(SMILE) 등 한국거래소의 정보데이터를 통합하여 제공 서..

[AI 리포트] AI 기반 경제 뉴스 요약이 포스트는 한국경제TV의 유튜브 콘텐츠 '당신이 잠든 사이에'를 AI 기술로 요약한 경제 뉴스 리포트를 소개합니다.경제 뉴스 요약 리포트 다크 모드 당신이 잠든 사이에 2024-11-08 오늘의 헤드라인 트럼프 당선과 FOMC 회의 결과, 글로벌 경제와 시장에 미치는 영향 주요 포인트 트럼프 당선과 경제 정책 변화 트럼프 당선으로 인해 미국의 경제 정책에 변화..

[AI 리포트] AI 기반 경제 뉴스 요약이 포스트는 한국경제TV의 유튜브 콘텐츠 '당신이 잠든 사이에'를 AI 기술로 요약한 경제 뉴스 리포트를 소개합니다.경제 뉴스 요약 리포트 다크 모드 당신이 잠든 사이에 2024-11-07 오늘의 헤드라인 트럼프 당선과 경제 정책 변화로 인한 시장 반응 주요 포인트 트럼프 당선과 시장 반응 트럼프가 47대 대통령에 당선되며 미국 증시가 일제히 급등 중임. 다우지..