Compare commits
2 Commits
v2.1
..
c254463001
| Author | SHA1 | Date | |
|---|---|---|---|
| c254463001 | |||
| c0c9441930 |
@@ -0,0 +1,8 @@
|
||||
*.json
|
||||
*.html
|
||||
*.png
|
||||
__pycache__/
|
||||
*.pyc
|
||||
.pytest_cache/
|
||||
data/
|
||||
*.osm.pbf
|
||||
@@ -0,0 +1,73 @@
|
||||
# Adres Analyse
|
||||
|
||||
Genereert modulaire rapporten voor Nederlandse adressen met bereikbaarheid, voorzieningen en locatie kenmerken.
|
||||
|
||||
## Installatie
|
||||
|
||||
```bash
|
||||
git clone https://git.wouterverduin.nl/wouser/adres-analyse.git
|
||||
cd adres-analyse
|
||||
pip install folium shapely
|
||||
```
|
||||
|
||||
## Gebruik
|
||||
|
||||
```bash
|
||||
python3 rapport.py "Griendvelden 14 Best"
|
||||
```
|
||||
|
||||
Output is markdown formaat naar stdout.
|
||||
|
||||
## Features
|
||||
|
||||
### Huidig (v1.0)
|
||||
- **Geocoding** via PDOK Locatieserver (gratis, geen API key)
|
||||
- **Isochroon bereikbaarheid** (auto, 20 min) via OpenRouteService
|
||||
- Oppervlakte bereikbaar gebied (km²)
|
||||
- Reach factor en geografisch bereik
|
||||
|
||||
### Gepland
|
||||
- Cycling isochroon (fiets)
|
||||
- OV bereikbaarheid
|
||||
- Voorzieningen in de buurt (OSM)
|
||||
- Luchtkwaliteit (RIVM)
|
||||
- Geluidsniveaus
|
||||
- Overstromingsrisico
|
||||
- Demografie (CBS)
|
||||
- Woningwaarde (Kadaster/WOZ)
|
||||
|
||||
## Vereisten
|
||||
|
||||
- **OpenRouteService**: Draaiend op `192.168.1.71:9080` met `driving-car` profiel
|
||||
- **PDOK Locatieserver**: Openbaar, geen setup nodig
|
||||
|
||||
## Configuratie
|
||||
|
||||
Pas aan in `rapport.py`:
|
||||
```python
|
||||
ORS_BASE = "http://192.168.1.71:9080/ors/v2"
|
||||
PDOK_BASE = "https://api.pdok.nl/bzk/locatieserver/search/v3_1"
|
||||
```
|
||||
|
||||
## Voorbeeld output
|
||||
|
||||
```
|
||||
📍 **Adres Analyse Rapport**
|
||||
Gegenereerd: 19-06-2026 18:49
|
||||
|
||||
🔍 Geocoding...
|
||||
**Adres:** Griendvelden 14, 5685JL Best
|
||||
**Coördinaten:** 51.505547, 5.370553
|
||||
|
||||
🚗 **Bereikbaarheid (Auto 20 min)**
|
||||
**Oppervlakte:** 316.8 km²
|
||||
**Reach factor:** 0.091
|
||||
**Bereik:** 51.378°-51.679°N, 5.128°-5.530°E
|
||||
|
||||
---
|
||||
_Onderdeel 1/?: Isochroon bereikbaarheid_
|
||||
```
|
||||
|
||||
## Licentie
|
||||
|
||||
MIT
|
||||
@@ -1,150 +0,0 @@
|
||||
---
|
||||
name: adres-analyse
|
||||
description: Genereer uitgebreide adresrapporten met geocodering, isochronen (bereikbaarheidskaarten), en andere locatie-gerelateerde analyses voor Nederlandse adressen.
|
||||
tags: [geocoding, isochrone, routing, maps, locatie-analyse, pdok, ors]
|
||||
---
|
||||
|
||||
# Adres Analyse
|
||||
|
||||
Genereer modulaire rapporten voor Nederlandse adressen. Elk onderdeel wordt als aparte sectie toegevoegd aan het rapport.
|
||||
|
||||
## Rapport generatie
|
||||
|
||||
**Hoofdscript:** `scripts/rapport.py` (ook geïnstalleerd op `/root/adres-analyse/rapport.py`)
|
||||
|
||||
> ⚠️ **Let op**: de geïnstalleerde versie kan achterlopen op de skill-template. **Hele functies kunnen ontbreken** (bijv. Obsidian-integratie). Voer altijd eerst de sync-check uit:
|
||||
|
||||
**Sync-check (voor elke sessie):**
|
||||
```bash
|
||||
diff ~/.hermes/skills/research/adres-analyse/scripts/rapport.py /root/adres-analyse/rapport.py
|
||||
```
|
||||
|
||||
Als er output is, synchroniseer onmiddellijk:
|
||||
```bash
|
||||
cp ~/.hermes/skills/research/adres-analyse/scripts/rapport.py /root/adres-analyse/rapport.py
|
||||
```
|
||||
|
||||
**Daarna pas uitvoeren:**
|
||||
```bash
|
||||
python3 /root/adres-analyse/rapport.py "Adres Plaats"
|
||||
```
|
||||
|
||||
Output is markdown formaat, direct naar stdout (voor Telegram) én wordt opgeslagen in Obsidian vault (map: huizenjacht).
|
||||
|
||||
## Huidige onderdelen
|
||||
|
||||
### 1. Bereikbaarheid (Isochroon)
|
||||
- **Auto profiel:** `driving-car`, 20 minuten, blauw op de kaart
|
||||
- **Fiets profiel:** `cycling-regular`, 30 minuten, groen op de kaart
|
||||
- **Metrics:** Oppervlakte (km²), reach factor, geografisch bereik
|
||||
- **Data bron:** ORS op `192.168.1.71:9080`
|
||||
|
||||
### 2. Voorzieningen in de buurt
|
||||
- **Bron:** lokale PostGIS database met geselecteerde POI's uit heel Nederland OSM extract
|
||||
- **Docker:** `postgis/postgis` op poort `5433`, database `adresanalyse`
|
||||
- **Import:** `import-osm.sh` downloadt `netherlands-latest.osm.pbf` en `osm-poi-import.py` importeert alleen `shop=supermarket` en `amenity=school`
|
||||
- **Routeverrijking:** ORS Matrix voor `driving-car` en `cycling-regular`
|
||||
- **Output:** top 5 supermarkten en top 5 scholen in rapport + markers op Folium kaart
|
||||
|
||||
### 3. (Toekomstige onderdelen)
|
||||
- OV bereikbaarheid
|
||||
- Luchtkwaliteit
|
||||
- Demografie
|
||||
- Vastgoeddata
|
||||
|
||||
## Workflow (intern)
|
||||
|
||||
### Stap 1: Geocoding (adres → coördinaten)
|
||||
Gebruik **PDOK Locatieserver** (gratis, geen API key nodig):
|
||||
|
||||
```bash
|
||||
curl -s "https://api.pdok.nl/bzk/locatieserver/search/v3_1/free?q={adres}&rows=5&fl=centroide_ll,weergavenaam,postcode,woonplaatsnaam,type,huisnummer"
|
||||
```
|
||||
|
||||
**Parsing:**
|
||||
- Zoek naar `type=adres` voor exacte adres match (niet straat)
|
||||
- `centroide_ll` is in formaat `POINT(lon lat)` → split op spatie, coords[0]=lon, coords[1]=lat
|
||||
- Fallback naar eerste resultaat als geen adres match
|
||||
|
||||
### Stap 2: Isochroon ophalen
|
||||
POST naar ORS:
|
||||
|
||||
```bash
|
||||
curl -s -X POST "http://192.168.1.71:9080/ors/v2/isochrones/driving-car" \
|
||||
-H "Content-Type: application/json" \
|
||||
-d '{
|
||||
"locations": [[lon, lat]],
|
||||
"range": [1200],
|
||||
"attributes": ["area","reachfactor","total_pop"]
|
||||
}'
|
||||
```
|
||||
|
||||
**Parameters:**
|
||||
- `range` in seconden (20 min = 1200)
|
||||
- Response bevat GeoJSON FeatureCollection met polygon geometrie
|
||||
- GeoJSON wordt opgeslagen in `/tmp/isochroon_{timestamp}.geojson`
|
||||
|
||||
### Stap 3: Kaart genereren (optioneel)
|
||||
Gebruik script: `scripts/generate-map.py`
|
||||
|
||||
```bash
|
||||
python3 scripts/generate-map.py "Griendvelden 14, Best" /root/adres-analyse/kaart.html
|
||||
```
|
||||
|
||||
Voor Telegram delivery:
|
||||
1. Open HTML in browser: `browser_navigate` naar `file:///root/adres-analyse/kaart.html`
|
||||
2. Screenshot maken: `browser_vision` met vraag over kaart inhoud
|
||||
3. Screenshot pad gebruiken in MEDIA: directive voor Telegram
|
||||
|
||||
**Vereisten:** `pip install folium shapely`
|
||||
|
||||
## Pitfalls
|
||||
|
||||
1. **Geocoding exactheid**: PDOK zoekt op straatnaam als huisnummer niet exact matcht - altijd checken of `type=adres` in response. Zoek door eerste 5 resultaten voor adres match.
|
||||
|
||||
2. **ORS cycling profielen niet geactiveerd**: Alleen `driving-car` werkt momenteel. Fietsprofielen geven error "RoutingProfile.getGraphhopper() is null". Zie `references/ors-setup.md` voor activatie-instructies.
|
||||
|
||||
3. **Coördinaten volgorde**: PDOK geeft `POINT(lon lat)` (WGS84), maar ORS verwacht `[[lon, lat]]` in array. Let op volgorde bij parsen.
|
||||
|
||||
4. **Oppervlakte conversie**: ORS geeft area in m², niet km². Deel door 1_000_000 voor km² of 10_000 voor hectare.
|
||||
|
||||
5. **Folium installatie**: `pip install folium shapely` nodig voor kaartgeneratie (niet voor basis rapport).
|
||||
|
||||
6. **Telegram media**: HTML-kaarten werken niet direct in Telegram - maak PNG screenshots via browser tools.
|
||||
|
||||
7. **Rapport zonder kaart**: Het rapport.py script genereert alleen tekst. Voor visuele kaart: gebruik apart folium script + browser screenshot workflow.
|
||||
|
||||
8. **Obsidian API**: Vereist dat Obsidian draait met Local REST API plugin ingeschakeld. Token en host staan in script. Bestandsnaam wordt gegenereerd met timestamp om collisions te voorkomen.
|
||||
|
||||
9. **Script drift — skill vs. installed**: Het geïnstalleerde script op `/root/adres-analyse/rapport.py` kan achterlopen op de skill-template (`scripts/rapport.py`). **Dit is niet alleen kleine drift — hele functies kunnen ontbreken** (bijv. `schrijf_naar_obsidian()`, Obsidian-config, token-definities). Altijd eerst `diff` uitvoeren. Als de Obsidian-opslag niet werkt, is dit de eerste plek om te checken. Zie `references/script-drift.md`.
|
||||
|
||||
10. **Token patching via patch tool**: Bij het bewerken van scripts die API tokens bevatten (zoals `OBSIDIAN_TOKEN`) met de `patch` tool, kan de security scan het token maskeren of splitsen. Dit resulteert in een kapotte string concatenatie en 401 Unauthorized errors. **Workaround**: gebruik `read_file` om de exacte regel te zien, schrijf dan het volledige token expliciet met `write_file`, of synchroniseer het hele skill-script. Verifieer altijd na patchen dat het script syntactisch correct is (`python3 -m py_compile script.py`). Zie `references/token-patching.md`.
|
||||
|
||||
## Uitbreiding
|
||||
|
||||
Nieuwe onderdelen toevoegen:
|
||||
1. Voeg functie toe aan `/root/adres-analyse/rapport.py`
|
||||
2. Roep aan in `genereer_rapport()` na geocoding
|
||||
3. Update deze skill met nieuwe sectie onder "Huidige onderdelen"
|
||||
4. Verhoog onderdeel teller in output footer
|
||||
|
||||
## Voorbeeld rapport
|
||||
|
||||
```
|
||||
📍 **Adres Analyse Rapport**
|
||||
Gegenereerd: 19-06-2026 18:42
|
||||
|
||||
🔍 Geocoding...
|
||||
**Adres:** Griendvelden 14, 5685JL Best
|
||||
**Coördinaten:** 51.505547, 5.370553
|
||||
|
||||
🚗 **Bereikbaarheid (Auto 20 min)**
|
||||
**Oppervlakte:** 316.8 km²
|
||||
**Reach factor:** 0.091
|
||||
**Bereik:** 51.378°-51.679°N, 5.128°-5.530°E
|
||||
|
||||
💾 Data opgeslagen: `/tmp/isochroon_20260619_184239.geojson`
|
||||
|
||||
---
|
||||
_Onderdeel 1/?: Isochroon bereikbaarheid_
|
||||
```
|
||||
@@ -0,0 +1,48 @@
|
||||
services:
|
||||
postgis:
|
||||
image: postgis/postgis:16-3.4
|
||||
container_name: adres-analyse-postgis
|
||||
environment:
|
||||
POSTGRES_DB: adresanalyse
|
||||
POSTGRES_USER: adres
|
||||
POSTGRES_PASSWORD: adres
|
||||
TZ: Europe/Amsterdam
|
||||
ports:
|
||||
- "5433:5432"
|
||||
volumes:
|
||||
- ./data/postgis:/var/lib/postgresql/data
|
||||
shm_size: 1g
|
||||
restart: unless-stopped
|
||||
healthcheck:
|
||||
test: ["CMD-SHELL", "pg_isready -U adres -d adresanalyse"]
|
||||
interval: 10s
|
||||
timeout: 5s
|
||||
retries: 10
|
||||
|
||||
osm2pgsql:
|
||||
image: iboates/osm2pgsql:1.11.0
|
||||
container_name: adres-analyse-osm2pgsql
|
||||
profiles: ["import"]
|
||||
depends_on:
|
||||
postgis:
|
||||
condition: service_healthy
|
||||
volumes:
|
||||
- ./data/osm:/data/osm:ro
|
||||
- ./osm2pgsql.style:/data/osm2pgsql.style:ro
|
||||
environment:
|
||||
PGPASSWORD: adres
|
||||
command: >
|
||||
osm2pgsql
|
||||
--create
|
||||
--slim
|
||||
--drop
|
||||
--cache 2000
|
||||
--number-processes 4
|
||||
--hstore
|
||||
--latlong
|
||||
--style /data/osm2pgsql.style
|
||||
-d adresanalyse
|
||||
-U adres
|
||||
-H postgis
|
||||
-P 5432
|
||||
/data/osm/netherlands-latest.osm.pbf
|
||||
@@ -1,9 +1,7 @@
|
||||
#!/usr/bin/env python3
|
||||
"""
|
||||
Genereer interactieve kaart voor adres analyse.
|
||||
Toont in één figuur:
|
||||
- blauw: 20 minuten autorijden (driving-car)
|
||||
- groen: 30 minuten fietsen (cycling-regular)
|
||||
Toont isochronen plus dichtstbijzijnde supermarkten en scholen uit lokale PostGIS OSM-data.
|
||||
"""
|
||||
|
||||
import json
|
||||
@@ -12,6 +10,9 @@ import urllib.parse
|
||||
import urllib.request
|
||||
|
||||
import folium
|
||||
from folium.plugins import MarkerCluster
|
||||
|
||||
from voorzieningen import analyse_voorzieningen, format_afstand, format_duur
|
||||
|
||||
ORS_BASE = "http://192.168.1.71:9080/ors/v2"
|
||||
PDOK_BASE = "https://api.pdok.nl/bzk/locatieserver/search/v3_1"
|
||||
@@ -70,7 +71,7 @@ def polygon_bounds(feature_collection):
|
||||
return bounds
|
||||
|
||||
|
||||
def voeg_isochroon_toe(m, iso, label, kleur, tooltip):
|
||||
def voeg_isochroon_toe(group, iso, label, kleur, tooltip):
|
||||
for feature in iso.get("features", []):
|
||||
coords = feature["geometry"]["coordinates"][0]
|
||||
props = feature.get("properties", {})
|
||||
@@ -89,7 +90,25 @@ def voeg_isochroon_toe(m, iso, label, kleur, tooltip):
|
||||
f"Reach factor: {reach:.3f}"
|
||||
),
|
||||
tooltip=tooltip,
|
||||
).add_to(m)
|
||||
).add_to(group)
|
||||
|
||||
|
||||
def voeg_pois_toe(group, pois, kleur, icon):
|
||||
for poi in pois:
|
||||
popup = (
|
||||
f"<b>{poi.naam}</b><br>"
|
||||
f"Categorie: {poi.categorie}<br>"
|
||||
f"Hemelsbreed: {format_afstand(poi.hemelsbreed_m)}<br>"
|
||||
f"Fiets: {format_afstand(poi.fiets_afstand_m)} / {format_duur(poi.fiets_duur_s)}<br>"
|
||||
f"Auto: {format_afstand(poi.auto_afstand_m)} / {format_duur(poi.auto_duur_s)}<br>"
|
||||
f"Bron: {poi.bron}"
|
||||
)
|
||||
folium.Marker(
|
||||
[poi.lat, poi.lon],
|
||||
popup=popup,
|
||||
tooltip=f"{poi.categorie}: {poi.naam}",
|
||||
icon=folium.Icon(color=kleur, icon=icon, prefix="fa"),
|
||||
).add_to(group)
|
||||
|
||||
|
||||
def genereer_kaart(adres, output_file="/root/adres-analyse/kaart.html"):
|
||||
@@ -98,6 +117,7 @@ def genereer_kaart(adres, output_file="/root/adres-analyse/kaart.html"):
|
||||
|
||||
auto_iso = haal_isochroon(lon, lat, "driving-car", 20)
|
||||
fiets_iso = haal_isochroon(lon, lat, "cycling-regular", 30)
|
||||
voorzieningen = analyse_voorzieningen(lon, lat, limit=5)
|
||||
|
||||
m = folium.Map(location=[lat, lon], zoom_start=11, tiles="OpenStreetMap")
|
||||
|
||||
@@ -108,10 +128,24 @@ def genereer_kaart(adres, output_file="/root/adres-analyse/kaart.html"):
|
||||
icon=folium.Icon(color="red", icon="home"),
|
||||
).add_to(m)
|
||||
|
||||
voeg_isochroon_toe(m, auto_iso, "Auto 20 min", "#2196F3", "Bereikbaar in 20 min (auto)")
|
||||
voeg_isochroon_toe(m, fiets_iso, "Fiets 30 min", "#2E7D32", "Bereikbaar in 30 min (fiets)")
|
||||
auto_group = folium.FeatureGroup(name="Isochroon: 20 min auto", show=True)
|
||||
fiets_group = folium.FeatureGroup(name="Isochroon: 30 min fiets", show=True)
|
||||
super_group = MarkerCluster(name="Supermarkten", show=True)
|
||||
school_group = MarkerCluster(name="Scholen", show=True)
|
||||
|
||||
voeg_isochroon_toe(auto_group, auto_iso, "Auto 20 min", "#2196F3", "Bereikbaar in 20 min (auto)")
|
||||
voeg_isochroon_toe(fiets_group, fiets_iso, "Fiets 30 min", "#2E7D32", "Bereikbaar in 30 min (fiets)")
|
||||
voeg_pois_toe(super_group, voorzieningen["supermarkten"], "orange", "shopping-cart")
|
||||
voeg_pois_toe(school_group, voorzieningen["scholen"], "purple", "graduation-cap")
|
||||
|
||||
auto_group.add_to(m)
|
||||
fiets_group.add_to(m)
|
||||
super_group.add_to(m)
|
||||
school_group.add_to(m)
|
||||
folium.LayerControl(collapsed=False).add_to(m)
|
||||
|
||||
all_bounds = polygon_bounds(auto_iso) + polygon_bounds(fiets_iso)
|
||||
all_bounds += [[p.lat, p.lon] for groep in voorzieningen.values() for p in groep]
|
||||
if all_bounds:
|
||||
m.fit_bounds(all_bounds)
|
||||
|
||||
@@ -120,7 +154,8 @@ def genereer_kaart(adres, output_file="/root/adres-analyse/kaart.html"):
|
||||
<b>📍 Adres Analyse</b><br>
|
||||
{locatie["adres"]}<br>
|
||||
<span style="color:#2196F3">■</span> 20 min autorijden<br>
|
||||
<span style="color:#2E7D32">■</span> 30 min fietsen
|
||||
<span style="color:#2E7D32">■</span> 30 min fietsen<br>
|
||||
🛒 Supermarkten · 🏫 Scholen
|
||||
</div>
|
||||
'''
|
||||
m.get_root().html.add_child(folium.Element(title_html))
|
||||
@@ -129,6 +164,8 @@ def genereer_kaart(adres, output_file="/root/adres-analyse/kaart.html"):
|
||||
print(f"Kaart gegenereerd: {output_file}")
|
||||
print(f"Adres: {locatie['adres']}")
|
||||
print(f"Coördinaten: {lat}, {lon}")
|
||||
print(f"Supermarkten: {len(voorzieningen['supermarkten'])}")
|
||||
print(f"Scholen: {len(voorzieningen['scholen'])}")
|
||||
|
||||
|
||||
if __name__ == "__main__":
|
||||
Executable
+28
@@ -0,0 +1,28 @@
|
||||
#!/usr/bin/env bash
|
||||
set -euo pipefail
|
||||
|
||||
cd "$(dirname "$0")"
|
||||
mkdir -p data/osm data/postgis
|
||||
|
||||
PBF="data/osm/netherlands-latest.osm.pbf"
|
||||
URL="https://download.geofabrik.de/europe/netherlands-latest.osm.pbf"
|
||||
|
||||
if [[ ! -s "$PBF" ]]; then
|
||||
echo "Downloading Netherlands OSM extract..."
|
||||
curl -L --fail --continue-at - -o "$PBF" "$URL"
|
||||
else
|
||||
echo "Using existing $PBF"
|
||||
fi
|
||||
|
||||
echo "Starting PostGIS..."
|
||||
docker compose up -d postgis
|
||||
|
||||
echo "Waiting for PostGIS healthcheck..."
|
||||
until docker compose exec -T postgis pg_isready -U adres -d adresanalyse >/dev/null 2>&1; do
|
||||
sleep 2
|
||||
done
|
||||
|
||||
echo "Importing supermarkets and schools from full Netherlands OSM extract..."
|
||||
python3 osm-poi-import.py "$PBF"
|
||||
|
||||
echo "Done."
|
||||
@@ -0,0 +1,12 @@
|
||||
# OsmType Tag DataType Flags
|
||||
node,way name text linear
|
||||
node,way amenity text polygon
|
||||
node,way shop text polygon
|
||||
node,way brand text linear
|
||||
node,way operator text linear
|
||||
node,way addr:street text linear
|
||||
node,way addr:housenumber text linear
|
||||
node,way addr:postcode text linear
|
||||
node,way addr:city text linear
|
||||
node,way wheelchair text linear
|
||||
node,way opening_hours text linear
|
||||
@@ -2,14 +2,12 @@
|
||||
"""
|
||||
Adres Analyse - Rapport generator
|
||||
Gebruikt PDOK voor geocoding, ORS voor isochronen/routes en PostGIS OSM-data voor voorzieningen.
|
||||
Slaat rapport ook op in Obsidian vault (map: huizenjacht).
|
||||
"""
|
||||
|
||||
import json
|
||||
import sys
|
||||
import urllib.request
|
||||
import urllib.parse
|
||||
import re
|
||||
from datetime import datetime
|
||||
|
||||
from voorzieningen import analyse_voorzieningen, format_voorzieningen_markdown
|
||||
@@ -17,8 +15,6 @@ from voorzieningen import analyse_voorzieningen, format_voorzieningen_markdown
|
||||
# Config
|
||||
ORS_BASE = "http://192.168.1.71:9080/ors/v2"
|
||||
PDOK_BASE = "https://api.pdok.nl/bzk/locatieserver/search/v3_1"
|
||||
OBSIDIAN_BASE = "http://192.168.1.50:27123"
|
||||
OBSIDIAN_TOKEN = "90ec" + "6de948dc8ef7832fda3516fd900c7a3071dd526edf852ade145aa9daf637"
|
||||
|
||||
def geocode_adres(adres):
|
||||
"""Geocode adres naar coördinaten via PDOK Locatieserver"""
|
||||
@@ -84,103 +80,52 @@ def format_oppervlakte(m2):
|
||||
else:
|
||||
return f"{m2:.0f} m²"
|
||||
|
||||
def schrijf_naar_obsidian(rapport_text, adres):
|
||||
"""Schrijf rapport naar Obsidian vault in map huizenjacht"""
|
||||
safe_name = re.sub(r'[^a-zA-Z0-9]+', '-', adres)
|
||||
safe_name = safe_name.strip('-')
|
||||
filename = f"huizenjacht/{safe_name}_{datetime.now().strftime('%Y%m%d_%H%M%S')}.md"
|
||||
|
||||
req = urllib.request.Request(
|
||||
f"{OBSIDIAN_BASE}/vault/{filename}",
|
||||
data=rapport_text.encode('utf-8'),
|
||||
headers={
|
||||
'Authorization': f'Bearer {OBSIDIAN_TOKEN}',
|
||||
'Content-Type': 'text/markdown'
|
||||
},
|
||||
method='POST'
|
||||
)
|
||||
|
||||
with urllib.request.urlopen(req, timeout=10) as resp:
|
||||
if resp.status in [200, 204]:
|
||||
return f"📝 **Opgeslagen in Obsidian:** `huizenjacht/{safe_name}_*.md`"
|
||||
else:
|
||||
return f"⚠️ Obsidian upload mislukt: {resp.status}"
|
||||
|
||||
def print_isochroon_sectie(titel, icoon, iso_data, rapport_lines=None):
|
||||
"""Print isochroon sectie; optioneel ook toevoegen aan rapport_lines voor Obsidian"""
|
||||
text = f"{icoon} **{titel}**"
|
||||
print(text)
|
||||
if rapport_lines is not None:
|
||||
rapport_lines.append(text)
|
||||
def print_isochroon_sectie(titel, icoon, iso_data):
|
||||
print(f"{icoon} **{titel}**")
|
||||
if 'features' in iso_data and iso_data['features']:
|
||||
props = iso_data['features'][0]['properties']
|
||||
area_m2 = props.get('area', 0)
|
||||
reach = props.get('reachfactor', 0)
|
||||
text = f"**Oppervlakte:** {format_oppervlakte(area_m2)}"
|
||||
print(text)
|
||||
if rapport_lines is not None:
|
||||
rapport_lines.append(text)
|
||||
text = f"**Reach factor:** {reach:.3f}"
|
||||
print(text)
|
||||
if rapport_lines is not None:
|
||||
rapport_lines.append(text)
|
||||
print(f"**Oppervlakte:** {format_oppervlakte(area_m2)}")
|
||||
print(f"**Reach factor:** {reach:.3f}")
|
||||
bbox = iso_data.get('bbox', [])
|
||||
if len(bbox) == 4:
|
||||
text = f"**Bereik:** {bbox[1]:.3f}°-{bbox[3]:.3f}°N, {bbox[0]:.3f}°-{bbox[2]:.3f}°E"
|
||||
print(text)
|
||||
if rapport_lines is not None:
|
||||
rapport_lines.append(text)
|
||||
print(f"**Bereik:** {bbox[1]:.3f}°-{bbox[3]:.3f}°N, {bbox[0]:.3f}°-{bbox[2]:.3f}°E")
|
||||
else:
|
||||
text = "❌ Geen isochroon data ontvangen"
|
||||
print(text)
|
||||
if rapport_lines is not None:
|
||||
rapport_lines.append(text)
|
||||
print("❌ Geen isochroon data ontvangen")
|
||||
print()
|
||||
if rapport_lines is not None:
|
||||
rapport_lines.append("")
|
||||
|
||||
def genereer_rapport(adres_input):
|
||||
"""Genereer volledig adres analyse rapport"""
|
||||
rapport_lines = []
|
||||
|
||||
def print_line(text=""):
|
||||
print(text)
|
||||
rapport_lines.append(text)
|
||||
|
||||
print_line(f"📍 **Adres Analyse Rapport**")
|
||||
print_line(f"Gegenereerd: {datetime.now().strftime('%d-%m-%Y %H:%M')}")
|
||||
print_line()
|
||||
|
||||
print_line("🔍 Geocoding...")
|
||||
print(f"📍 **Adres Analyse Rapport**")
|
||||
print(f"Gegenereerd: {datetime.now().strftime('%d-%m-%Y %H:%M')}")
|
||||
print()
|
||||
|
||||
print("🔍 Geocoding...")
|
||||
locatie = geocode_adres(adres_input)
|
||||
print_line(f"**Adres:** {locatie['adres']}")
|
||||
print_line(f"**Coördinaten:** {locatie['lat']:.6f}, {locatie['lon']:.6f}")
|
||||
print_line()
|
||||
|
||||
print(f"**Adres:** {locatie['adres']}")
|
||||
print(f"**Coördinaten:** {locatie['lat']:.6f}, {locatie['lon']:.6f}")
|
||||
print()
|
||||
|
||||
auto_iso = haal_isochroon(locatie['lon'], locatie['lat'], 'driving-car', 20)
|
||||
fiets_iso = haal_isochroon(locatie['lon'], locatie['lat'], 'cycling-regular', 30)
|
||||
print_isochroon_sectie("Bereikbaarheid (Auto 20 min)", "🚗", auto_iso, rapport_lines)
|
||||
print_isochroon_sectie("Bereikbaarheid (Fiets 30 min)", "🚲", fiets_iso, rapport_lines)
|
||||
print_isochroon_sectie("Bereikbaarheid (Auto 20 min)", "🚗", auto_iso)
|
||||
print_isochroon_sectie("Bereikbaarheid (Fiets 30 min)", "🚲", fiets_iso)
|
||||
|
||||
print_line("🏙️ **Voorzieningen dichtbij**")
|
||||
print("🏙️ **Voorzieningen dichtbij**")
|
||||
voorzieningen = analyse_voorzieningen(locatie['lon'], locatie['lat'], limit=5)
|
||||
print_line(format_voorzieningen_markdown("🛒 **Supermarkten**", voorzieningen['supermarkten']))
|
||||
print_line()
|
||||
print_line(format_voorzieningen_markdown("🏫 **Scholen**", voorzieningen['scholen']))
|
||||
print_line()
|
||||
print(format_voorzieningen_markdown("🛒 **Supermarkten**", voorzieningen['supermarkten']))
|
||||
print()
|
||||
print(format_voorzieningen_markdown("🏫 **Scholen**", voorzieningen['scholen']))
|
||||
print()
|
||||
|
||||
output_file = f"/tmp/isochronen_{datetime.now().strftime('%Y%m%d_%H%M%S')}.geojson"
|
||||
with open(output_file, 'w') as f:
|
||||
json.dump({'auto_20_min': auto_iso, 'fiets_30_min': fiets_iso}, f)
|
||||
print_line(f"💾 Isochroondata opgeslagen: `{output_file}`")
|
||||
print_line()
|
||||
print_line("---")
|
||||
print_line("_Onderdelen: geocoding, isochronen, voorzieningen_")
|
||||
|
||||
# Schrijf naar Obsidian
|
||||
print_line()
|
||||
obsidian_result = schrijf_naar_obsidian('\n'.join(rapport_lines), locatie['adres'])
|
||||
print_line(obsidian_result)
|
||||
print(f"💾 Isochroondata opgeslagen: `{output_file}`")
|
||||
print()
|
||||
print("---")
|
||||
print("_Onderdelen: geocoding, isochronen, voorzieningen_")
|
||||
|
||||
if __name__ == '__main__':
|
||||
adres = sys.argv[1] if len(sys.argv) > 1 else "Griendvelden 14 Best"
|
||||
@@ -1,93 +0,0 @@
|
||||
# OpenRouteService (ORS) Setup Guide
|
||||
|
||||
## Huidige status
|
||||
- **Locatie**: `192.168.1.71:9080` (Docker container)
|
||||
- **Versie**: 8.0.0 (build 2024-03-21)
|
||||
- **Actief profiel**: `driving-car` ✅
|
||||
- **Niet actief**: `cycling-regular`, `cycling-electric`, `foot-walking`, `driving-hgv`, `wheelchair` ❌
|
||||
|
||||
## Cycling profiel activeren
|
||||
|
||||
### Stap 1: SSH naar host
|
||||
```bash
|
||||
ssh 192.168.1.71
|
||||
```
|
||||
|
||||
### Stap 2: ORS config aanpassen
|
||||
Locatie: `/path/to/ors/config/ors-config.yml` (pas aan naar jouw setup)
|
||||
|
||||
Voeg toe onder `ors.engine.profiles`:
|
||||
|
||||
```yaml
|
||||
ors:
|
||||
engine:
|
||||
profiles:
|
||||
driving-car:
|
||||
enabled: true
|
||||
cycling-regular:
|
||||
enabled: true
|
||||
graph_path: /home/ors/graphs/cycling-regular
|
||||
cycling-electric:
|
||||
enabled: true
|
||||
graph_path: /home/ors/graphs/cycling-electric
|
||||
```
|
||||
|
||||
### Stap 3: Graph data downloaden
|
||||
ORS heeft pre-built graphs nodig of moet ze bouwen van OSM data:
|
||||
|
||||
```bash
|
||||
# Download Netherlands OSM extract
|
||||
wget https://download.geofabrik.de/europe/netherlands-latest.osm.pbf
|
||||
|
||||
# Bouw graph (kan uren duren)
|
||||
docker exec -it ors-container java -jar ors-engine.jar build
|
||||
```
|
||||
|
||||
### Stap 4: Container herstarten
|
||||
```bash
|
||||
docker restart ors-container
|
||||
```
|
||||
|
||||
### Stap 5: Verifiëren
|
||||
```bash
|
||||
curl -s -X POST "http://192.168.1.71:9080/ors/v2/isochrones/cycling-regular" \
|
||||
-H "Content-Type: application/json" \
|
||||
-d '{
|
||||
"locations": [[5.37055345, 51.50554732]],
|
||||
"range": [1800]
|
||||
}' | head -c 200
|
||||
```
|
||||
|
||||
Verwacht: GeoJSON FeatureCollection (geen error).
|
||||
|
||||
## Troubleshooting
|
||||
|
||||
### Error: "getRouteProfile(int) is null"
|
||||
→ Profiel niet geactiveerd in config of graph ontbreekt.
|
||||
|
||||
### Error: "Parameter 'X' has incorrect value"
|
||||
→ Profielnaam bestaat niet (typo of niet ondersteund).
|
||||
|
||||
### Lange wachttijd na herstart
|
||||
→ ORS bouwt graphs bij eerste start (kan 30+ min duren voor NL).
|
||||
|
||||
## API Endpoints
|
||||
|
||||
### Geocoding (niet beschikbaar op deze instantie)
|
||||
ORS heeft optionele Pelias geocoding, maar die draait niet op 192.168.1.71.
|
||||
Gebruik PDOK Locatieserver als alternatief.
|
||||
|
||||
### Isochrones
|
||||
```
|
||||
POST /ors/v2/isochrones/{profile}
|
||||
```
|
||||
|
||||
### Routing
|
||||
```
|
||||
POST /ors/v2/directions/{profile}
|
||||
```
|
||||
|
||||
### Matrix
|
||||
```
|
||||
POST /ors/v2/matrix/{profile}
|
||||
```
|
||||
@@ -1,35 +0,0 @@
|
||||
# Script Drift: skill-template vs. installed script
|
||||
|
||||
## Probleem
|
||||
Het geïnstalleerde script `/root/adres-analyse/rapport.py` kan achterlopen op de skill-template onder `~/.hermes/skills/research/adres-analyse/scripts/rapport.py`.
|
||||
|
||||
## Gevonden verschillen (2026-06-22)
|
||||
|
||||
| Feature | Skill-template | Geïnstalleerd op `/root/adres-analyse/rapport.py` |
|
||||
|---------|---------------|---------------------------------------------------|
|
||||
| `schrijf_naar_obsidian()` | ✅ Aanwezig | ❌ Ontbreekt volledig |
|
||||
| Obsidian config (`OBSIDIAN_BASE`, `OBSIDIAN_TOKEN`) | ✅ Aanwezig | ❌ Ontbreekt |
|
||||
| `voorzieningen` import | ✅ Aparte module | ✅ Aparte module |
|
||||
| Auto + fiets isochroon | ✅ Beide | ✅ Beide |
|
||||
| Voorzieningen-sectie | ✅ Aanwezig | ✅ Aanwezig |
|
||||
|
||||
## Gevolg
|
||||
Rapporten werden wel in de chat getoond, maar **niet** naar Obsidian geschreven. De gebruiker merkte dit pas op bij expliciete vraag.
|
||||
|
||||
## Fix
|
||||
Kopieer de skill-template naar de geïnstalleerde locatie:
|
||||
|
||||
```bash
|
||||
cp ~/.hermes/skills/research/adres-analyse/scripts/rapport.py /root/adres-analyse/rapport.py
|
||||
```
|
||||
|
||||
**Let op**: als je in plaats daarvan `patch` gebruikt om het script te bewerken, kan de security scan API tokens (zoals `OBSIDIAN_TOKEN`) maskeren. Dit geeft 401 Unauthorized. Zie `references/token-patching.md` voor workarounds.
|
||||
|
||||
Of voer een diff uit om exacte verschillen te zien:
|
||||
|
||||
```bash
|
||||
diff ~/.hermes/skills/research/adres-analyse/scripts/rapport.py /root/adres-analyse/rapport.py
|
||||
```
|
||||
|
||||
## Preventie
|
||||
Bij elke skill-update die `scripts/rapport.py` raakt, ook de geïnstalleerde versie bijwerken.
|
||||
@@ -1,50 +0,0 @@
|
||||
# Token Patching in Python Scripts
|
||||
|
||||
## Context
|
||||
Scripts zoals `rapport.py` bevatten gevoelige waarden (API tokens, passwords). Bij het gebruik van de `patch` tool kan de security scan deze waarden maskeren of fragmenteren.
|
||||
|
||||
## Probleem (2026-06-22)
|
||||
Bij het patchen van `OBSIDIAN_TOKEN` in `/root/adres-analyse/rapport.py` werd het lange token door de security scan opgesplitst in een ongeldige string concatenatie:
|
||||
|
||||
```python
|
||||
# FOUT — resultaat na patch met gemaskerd token:
|
||||
OBSIDIAN_TOKEN = "90ec..." # incompleet, script faalt met 401
|
||||
|
||||
# FOUT — geprobeerde fix met concatenatie die ook faalt:
|
||||
OBSIDIAN_TOKEN="90ec" + "6de948..." # security scan splitst opnieuw
|
||||
```
|
||||
|
||||
Dit leidde tot herhaalde `HTTP Error 401: Unauthorized` omdat het verzonden token niet overeenkwam met het token in de Obsidian plugin.
|
||||
|
||||
## Workarounds
|
||||
|
||||
### Optie 1: write_file voor het volledige script
|
||||
Gebruik `read_file` om het huidige script te bekijken, pas aan in je context, en schrijf terug met `write_file`. Dit vermijdt de security scan op patch-niveau.
|
||||
|
||||
### Optie 2: Token ophalen uit bestaande bron
|
||||
Bouw een klein hulp-script dat het token uit een bekend bestand leest (bijv. het skill-script zelf):
|
||||
|
||||
```python
|
||||
import re
|
||||
|
||||
def lees_token_uit_skill():
|
||||
with open("~/.hermes/skills/research/adres-analyse/scripts/rapport.py") as f:
|
||||
for i, line in enumerate(f, 1):
|
||||
if i == 19 and "OBSIDIAN_TOKEN" in line:
|
||||
return line.split("=")[1].strip().strip('"').strip("'")
|
||||
return None
|
||||
```
|
||||
|
||||
### Optie 3: Synchroniseer het hele skill-script
|
||||
In plaats van patchen, kopieer de skill-template naar de geïnstalleerde locatie:
|
||||
|
||||
```bash
|
||||
cp ~/.hermes/skills/research/adres-analyse/scripts/rapport.py /root/adres-analyse/rapport.py
|
||||
```
|
||||
|
||||
Dit is de meest betrouwbare aanpak als er meerdere verschillen zijn.
|
||||
|
||||
## Preventie
|
||||
- Vermijd het patchen van regels die gevoelige tokens bevatten
|
||||
- Als patch onvermijdelijk is, verifieer altijd met `python3 -m py_compile script.py` en een test-API-call
|
||||
- Overweeg om tokens uit een apart `.env` bestand te laden in plaats van hardcoded in het script
|
||||
@@ -0,0 +1,57 @@
|
||||
CREATE EXTENSION IF NOT EXISTS postgis;
|
||||
CREATE EXTENSION IF NOT EXISTS hstore;
|
||||
|
||||
CREATE OR REPLACE VIEW poi_supermarkten AS
|
||||
SELECT
|
||||
osm_id,
|
||||
COALESCE(NULLIF(name, ''), NULLIF(brand, ''), 'Supermarkt') AS name,
|
||||
'supermarkt'::text AS category,
|
||||
shop,
|
||||
amenity,
|
||||
brand,
|
||||
operator,
|
||||
way AS geom
|
||||
FROM planet_osm_point
|
||||
WHERE shop = 'supermarket'
|
||||
UNION ALL
|
||||
SELECT
|
||||
osm_id,
|
||||
COALESCE(NULLIF(name, ''), NULLIF(brand, ''), 'Supermarkt') AS name,
|
||||
'supermarkt'::text AS category,
|
||||
shop,
|
||||
amenity,
|
||||
brand,
|
||||
operator,
|
||||
ST_PointOnSurface(way) AS geom
|
||||
FROM planet_osm_polygon
|
||||
WHERE shop = 'supermarket';
|
||||
|
||||
CREATE OR REPLACE VIEW poi_scholen AS
|
||||
SELECT
|
||||
osm_id,
|
||||
COALESCE(NULLIF(name, ''), 'School') AS name,
|
||||
'school'::text AS category,
|
||||
shop,
|
||||
amenity,
|
||||
brand,
|
||||
operator,
|
||||
way AS geom
|
||||
FROM planet_osm_point
|
||||
WHERE amenity = 'school'
|
||||
UNION ALL
|
||||
SELECT
|
||||
osm_id,
|
||||
COALESCE(NULLIF(name, ''), 'School') AS name,
|
||||
'school'::text AS category,
|
||||
shop,
|
||||
amenity,
|
||||
brand,
|
||||
operator,
|
||||
ST_PointOnSurface(way) AS geom
|
||||
FROM planet_osm_polygon
|
||||
WHERE amenity = 'school';
|
||||
|
||||
CREATE INDEX IF NOT EXISTS planet_osm_point_way_gix ON planet_osm_point USING GIST (way);
|
||||
CREATE INDEX IF NOT EXISTS planet_osm_polygon_way_gix ON planet_osm_polygon USING GIST (way);
|
||||
ANALYZE planet_osm_point;
|
||||
ANALYZE planet_osm_polygon;
|
||||
@@ -2,6 +2,7 @@
|
||||
"""Voorzieningenanalyse op basis van lokale PostGIS OSM-data + ORS Matrix."""
|
||||
|
||||
import json
|
||||
import math
|
||||
import os
|
||||
import urllib.request
|
||||
from dataclasses import dataclass, asdict
|
||||
@@ -89,6 +90,7 @@ def zoek_voorzieningen(lon, lat, categorie, limit=5, radius_m=10000):
|
||||
AND ST_DWithin(geom::geography, origin.geog, %s)
|
||||
ORDER BY lower(name), hemelsbreed_m ASC
|
||||
"""
|
||||
# DISTINCT ON kiest dichtstbijzijnde per naam; buitenquery sorteert weer op afstand.
|
||||
wrapped = f"SELECT * FROM ({sql}) q ORDER BY hemelsbreed_m ASC LIMIT %s"
|
||||
with psycopg2.connect(DB_DSN) as conn:
|
||||
with conn.cursor(cursor_factory=psycopg2.extras.DictCursor) as cur:
|
||||
@@ -142,3 +144,14 @@ def format_voorzieningen_markdown(titel, pois):
|
||||
f" Auto: {format_afstand(p.auto_afstand_m)} / {format_duur(p.auto_duur_s)}",
|
||||
])
|
||||
return "\n".join(lines)
|
||||
|
||||
|
||||
if __name__ == "__main__":
|
||||
import argparse
|
||||
parser = argparse.ArgumentParser()
|
||||
parser.add_argument("lon", type=float)
|
||||
parser.add_argument("lat", type=float)
|
||||
parser.add_argument("--limit", type=int, default=5)
|
||||
args = parser.parse_args()
|
||||
result = analyse_voorzieningen(args.lon, args.lat, args.limit)
|
||||
print(json.dumps({k: [p.to_dict() for p in v] for k, v in result.items()}, indent=2, ensure_ascii=False))
|
||||
Reference in New Issue
Block a user