-
Notifications
You must be signed in to change notification settings - Fork 29
/
Copy pathMakefile
45 lines (30 loc) · 1.05 KB
/
Makefile
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
up:
docker compose up --build -d
down:
docker compose down
run-checkout-attribution-job:
docker exec jobmanager ./bin/flink run --python ./code/checkout_attribution.py
sleep:
sleep 20
####################################################################################################################
# Testing, auto formatting, type checks, & Lint checks
format:
docker exec datagen python -m black -S --line-length 79 .
isort:
docker exec datagen isort .
type:
docker exec datagen mypy --ignore-missing-imports --no-implicit-optional /opt
lint:
docker exec datagen flake8 /opt
ci: isort format type lint
####################################################################################################################
# Run ETL
pyflink:
docker exec -ti jobmanager ./bin/pyflink-shell.sh local
run: down up sleep ci run-checkout-attribution-job
####################################################################################################################
# Monitoring
viz:
open http://localhost:3000
ui:
open http://localhost:8081/