이 포스팅을 다루기 위해 레디스 필요성부터 구현방법까지 작성하고 돌아왔다.드디어, 예전에 포스팅했던 에어플로우 DAG 작성법에 이어 커스텀 레디스 센서에 대해 작성하고자한다.이전 포스팅이 궁긍한 분들은 여기.. [Airflow] 에어플로우 도커 컴포즈로 한방에 올리기이번엔 저번 포스팅에 이어, 실제로 에어플로우를 어떻게 구현하고, 사용하는지에 대해 알아보자! TODO list도커 컴포즈로 Airflow 올리는 이유커스텀 airflow 이미지 만들기도커 컴포즈 yaml 파일 만들9unu.tistory.com TODO ListAirflow Sensoroperator 필요성기본 레디스 센서의 작동 방식 (poke 등)커스텀 센서 구현 방법마무리1. Airflow Sensor operator 필요성기본적으로 A..

저번 포스팅에서 레디스의 필요성에 대해 설명했으니, (아직 못본 분들은 링크..)https://9unu.tistory.com/29 [Redis] 레디스? Nosql? 인메모리? 왜 쓰는건데?직전 포스팅에서 에어플로우 DAG, operator들을 뜯어보면서 sensor 특히, RedisSensor에 대해 설명하기로 했었다.근데 그 전에, Redis가 뭔지 알아야하지 않는가?그래서 레디스가 무엇인지, 왜 사용하는지9unu.tistory.com 이번 포스팅에서는 실제로 어떻게 레디스 MQ를 구현하고, 활용하는지 설명하려한다.TODO List레디스 활용 사례레디스 셋업 (Docker)레디스 자료구조 사용법 (Python)마무리1. 레디스 활용 사례본론에 들어가기전에, 실제 활용 사례를 먼저 풀자면본인은 Redi..

직전 포스팅에서 에어플로우 DAG, operator들을 뜯어보면서 sensor 특히, RedisSensor에 대해 설명하기로 했었다.근데 그 전에, Redis가 뭔지 알아야하지 않는가?그래서 레디스가 무엇인지, 왜 사용하는지에 대해 먼저 포스팅하려한다.TODO List레디스의 필요성레디스 특징 (인메모리)Nosql로서 레디스 (캐싱)MQ로서 레디스직전 포스팅에서 에어플로우 DAG, operator들을 뜯어보면서 sensor 특히, RedisSensor에 대해 설명하기로 했었다.근데 그 전에, Redis가 뭔지 알아야하지 않는가?그래서 레디스가 무엇인지, 왜 사용하는지에 대해 먼저 포스팅하려한다.1. 레디스의 필요성'그래서 레디스를 왜 쓰는걸까?'간단히 답하자면 사용하기 쉽고, 빨라서이지만,(더 들어가면 ..