October 19, 2023 Release (2023-10-19.alpha.0)

[vcschapp]

October 19, 2023 pre-release.

---

This discussion was created from the release Preview Release.

[Folyd]

places has a different schema from the docs: https://docs.overturemaps.org/reference/places/place, I think we need to update the docs. Some fields are irrelative to place, such as numFloors, drivingSide, and maritime, etc.

 DESCRIBE SELECT * FROM 'type=place/*.parquet';
┌──────────────────────┬───────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────┬─────────┬─────────┬─────────┬─────────┐
│     column_name      │                                                                                                  column_type                                                                                                  │  null   │   key   │ default │  extra  │
│       varchar        │                                                                                                    varchar                                                                                                    │ varchar │ varchar │ varchar │ varchar │
├──────────────────────┼───────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────┼─────────┼─────────┼─────────┼─────────┤
│ categories           │ STRUCT(main VARCHAR, alternate VARCHAR[])                                                                                                                                                                     │ YES     │         │         │         │
│ level                │ INTEGER                                                                                                                                                                                                       │ YES     │         │         │         │
│ socials              │ VARCHAR[]                                                                                                                                                                                                     │ YES     │         │         │         │
│ subType              │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ numFloors            │ INTEGER                                                                                                                                                                                                       │ YES     │         │         │         │
│ entityId             │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ class                │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ sourceTags           │ MAP(VARCHAR, VARCHAR)                                                                                                                                                                                         │ YES     │         │         │         │
│ localityType         │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ emails               │ VARCHAR[]                                                                                                                                                                                                     │ YES     │         │         │         │
│ drivingSide          │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ adminLevel           │ INTEGER                                                                                                                                                                                                       │ YES     │         │         │         │
│ road                 │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ isoCountryCodeAlpha2 │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ isoSubCountryCode    │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ updateTime           │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ wikidata             │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ confidence           │ DOUBLE                                                                                                                                                                                                        │ YES     │         │         │         │
│ defaultLanguage      │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ brand                │ STRUCT("names" STRUCT(common STRUCT("value" VARCHAR, "language" VARCHAR)[], official STRUCT("value" VARCHAR, "language" VARCHAR)[], alternate STRUCT("value" VARCHAR, "language" VARCHAR)[], short STRUCT("…  │ YES     │         │         │         │
│ addresses            │ STRUCT(freeform VARCHAR, locality VARCHAR, postCode VARCHAR, region VARCHAR, country VARCHAR)[]                                                                                                               │ YES     │         │         │         │
│ names                │ STRUCT(common STRUCT("value" VARCHAR, "language" VARCHAR)[], official STRUCT("value" VARCHAR, "language" VARCHAR)[], alternate STRUCT("value" VARCHAR, "language" VARCHAR)[], short STRUCT("value" VARCHAR,…  │ YES     │         │         │         │
│ isIntermittent       │ BOOLEAN                                                                                                                                                                                                       │ YES     │         │         │         │
│ connectors           │ VARCHAR[]                                                                                                                                                                                                     │ YES     │         │         │         │
│ surface              │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ version              │ INTEGER                                                                                                                                                                                                       │ YES     │         │         │         │
│ phones               │ VARCHAR[]                                                                                                                                                                                                     │ YES     │         │         │         │
│ id                   │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ geometry             │ BLOB                                                                                                                                                                                                          │ YES     │         │         │         │
│ context              │ VARCHAR                                                                                                                                                                                                       │ YES     │         │         │         │
│ height               │ DOUBLE                                                                                                                                                                                                        │ YES     │         │         │         │
│ maritime             │ BOOLEAN                                                                                                                                                                                                       │ YES     │         │         │         │
│ sources              │ STRUCT(property VARCHAR, dataset VARCHAR, recordId VARCHAR, confidence DOUBLE)[]                                                                                                                              │ YES     │         │         │         │
│ websites             │ VARCHAR[]                                                                                                                                                                                                     │ YES     │         │         │         │
│ isSalt               │ BOOLEAN                                                                                                                                                                                                       │ YES     │         │         │         │
│ bbox                 │ STRUCT(minx DOUBLE, maxx DOUBLE, miny DOUBLE, maxy DOUBLE)                                                                                                                                                    │ YES     │         │         │         │
├──────────────────────┴───────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────┴─────────┴─────────┴─────────┴─────────┤
│ 36 rows                                                                                                                                                                                                                                                            6 columns │
└──────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────┘

[jwass]

This was also brought up in OvertureMaps/data#74.

All themes are brought together as a single dataset/table under the same schema, partitioned by theme and type. It's a little different than the earlier release. The current docs mention only the columns relevant to each theme.