publicdata/j40-cejst-2
1
0
Fork 0
mirror of https://github.com/DOI-DO/j40-cejst-2.git synced 2025-02-22 01:31:25 -08:00
Code Issues Projects Releases Packages Wiki Activity Actions
j40-cejst-2/docs/operations/artifacts.md
Chris Alfano b27a918da7 docs: add outline of how artifacts get built
2024-12-10 15:20:17 -05:00

5.3 KiB
Raw Permalink Blame History

Artifacts

The below sections show how the data/data-pipeline/data_pipeline/data directory evolves as you run each workflow step in sequence:

1. etl-run

2. score-run

  .
  ├── score
  │   ├── csv
+ │   │   └── full
+ │   │       └── usa.csv
  │   ├── downloadable
  │   ├── geojson
  │   ├── shapefile
  │   └── tiles
  └── tribal
      ├── csv
+     ├── geographic_data
+     │   └── usa.json
      ├── geojson
      └── tiles

3. generate-score-post

  .
  ├── score
  │   ├── csv
+ │   │   ├── full
+ │   │   │   ├── usa_counties.csv
  │   │   │   └── usa.csv
+ │   │   └── tiles
+ │   │       ├── tile_indexes.json
  │   │       └── usa.csv
  │   ├── downloadable
+ │   │   ├── beta-codebook.csv
+ │   │   ├── beta-communities.csv
+ │   │   ├── beta-communities-csv.zip
+ │   │   ├── beta-communities.xlsx
+ │   │   ├── beta-communities-xls.zip
+ │   │   └── beta-data-documentation.zip
  │   ├── geojson
+ │   ├── search
+ │   │   └── tracts.json
  │   ├── shapefile
  │   └── tiles
  └── tribal
      ├── csv
      ├── geographic_data
      │   └── usa.json
      ├── geojson
      └── tiles

4. geo-score

  .
  ├── score
  │   ├── csv
  │   │   ├── full
  │   │   │   ├── usa_counties.csv
  │   │   │   └── usa.csv
  │   │   └── tiles
  │   │       ├── tile_indexes.json
  │   │       └── usa.csv
  │   ├── downloadable
  │   │   ├── beta-codebook.csv
  │   │   ├── beta-communities.csv
  │   │   ├── beta-communities-csv.zip
  │   │   ├── beta-communities.xlsx
  │   │   ├── beta-communities-xls.zip
  │   │   ├── beta-data-documentation.zip
+ │   │   └── beta-shapefile-codebook.zip
  │   ├── geojson
+ │   │   ├── usa-high.json
+ │   │   └── usa-low.json
  │   ├── search
  │   │   └── tracts.json
  │   ├── shapefile
+ │   │   ├── usa.cpg
+ │   │   ├── usa.dbf
+ │   │   ├── usa.prj
+ │   │   ├── usa.shp
+ │   │   ├── usa.shx
+ │   │   └── usa.zip
  │   └── tiles
  └── tribal
      ├── csv
      ├── geographic_data
      │   └── usa.json
      ├── geojson
      └── tiles

5. generate-map-tiles

  .
  ├── score
  │   ├── ...
  │   └── tiles
+ │       ├── high
+ │       │   ├── 5
+ │       │   │   └── 0
+ │       │   │       ├── ...
+ │       │   │       └── 17.pbf
+ │           ├── ...
+ │       │   ├── 11
+ │       │   │   ├── 4
+ │       │   │   │   ├── 679.pbf
+ │       │   │   │   ├── ...
+ │       │   │   │   └── 684.pbf
+ │       │   │   ├── ...
+ │       │   │   └── 2047
+ │       │   │       ├── 676.pbf
+ │       │   │       └── 677.pbf
+ │       │   ├── metadata.json
+ │       │   └── usa_high.mbtiles
+ │       └── low
+ │           ├── 0
+ │           │   └── 0
+ │           │       └── 0.pbf
+ │           ├── ...
+ │           ├── 7
+ │           │   ├── ...
+ │           │   ├── 40
+ │           │   │   ├── ...
+ │           │   │   └── 57.pbf
+ │           │   └── 41
+ │           │       └── 57.pbf
+ │           ├── metadata.json
+ │           └── usa_low.mbtiles
  └── tribal
      └── ...

5. etl-run --dataset tribal

  .
  ├── score
  │   └── ...
  └── tribal
      ├── csv
      ├── geographic_data
      │   └── usa.json
      ├── geojson
      └── tiles
+         └── usa.mbtiles

6. generate-map-tiles --generate-tribal-layer

  .
  ├── score
  │   └── ...
  └── tribal
      ├── csv
      ├── geographic_data
      │   └── usa.json
      ├── geojson
      └── tiles
+         ├── 0
+         │   └── 0
+         │       └── 0.pbf
+         ├── 1
+         │   └── 0
+         │       └── 0.pbf
+         ├── 11
+         │   ├── 32
+         │   │   └── 674.pbf
+         │   ├── ...
+         │   └── 642
+         │       ├── 736.pbf
+         │       └── 737.pbf
+         ├── metadata.json
          └── usa.mbtiles