본문 바로가기
반응형

전체 글229

SCI 논문을 탐해보자 [ SCI 논문 이란? ] 미국의 ISI에서 1960년에 만든 인용 색인이다. 지금은 Clarivate Analytics가 소유하고 있다. 연구자가 SCI(Science Citation Index)급 논문을 썼다라는 건 아래와 같은 곳에 논문을 게재한 것을 말한다. 그런 논문들은 "Web of Science"에서 검색 할 수 있다. 즉 "Web of Science" 에서만 검색한 논문이 SCI급 논문이다. 그리고 구글 scholar에서 검색했을 때 나오는 논문들이 SCI급인지는 확인이 불가능하다. 그래서 SCI급 논문을 확인하려면 "Web of Science" 에서 검색하는 것이 혼란을 줄인다. URL : https://www.webofknowledge.com 이름 전체 이름 범위 SCIE SCIENCE.. 2020. 12. 27.
AirFlow Manual on Docker (3) [ DAG, Directed Acyclic Graph ] DAG는 유향 비순환 그래프 라고 한다. 수많은 꼭짓점과 간선으로 구성된다. 꼭짓점은 Task이고 간선은 Flow 나 Branch 같이 조건에 의한 흐름으로 볼 수 있다. Airflow는 DAG를 정의해고 DAG 통해서 작업을 실행시켜서 작업(Task)을 진행한다. 그러므로 DAG를 잘 다룰 수 있다면 Airflow를 잘 다룰 수 있다고 보면 된다. [ BashOperator ] from airflow.operators.bash_operator import BashOperator from airflow.models import DAG from datetime import datetime, timedelta args = { 'owner': 'airf.. 2020. 12. 22.
AirFlow Manual on Docker (2) [ Airflow 용어 정리 ] Airflow를 이해하기 위해서는 아래와 같은 용어들을 잘 이해하고 있어야 한다. 그 중에 DAG와 Task 그리고 Operator를 이해하면 거의 다 이해했다고 보면 된다. DAG는 Airflow에서 동작하는 워크플로우라고 보면 된다. DAG 안에는 여러개의 Task가 있고 각각의 Task가 조건에 따라 순서대로 동작된다. Task 안에는 Operator가 있고 Operator에 따라 Bash shell, Python, DB 등으로 명령을 할 수 있다. 용어 내용 DAG : 유향 비순환 그래프 Directed Acyclic Graph. 실행하고 싶은 일(task)들의 실행 순서를 구조화하고 실행 context를 제공 Task Dag 안에 하나의 일(Task)의 단위 Ta.. 2020. 12. 21.
반응형

티스토리툴바