Diskussion:Tourpl: Unterschied zwischen den Versionen

Version vom 11. März 2012, 20:02 Uhr

Technologien und Quellen/Daten

Technologien

• Server: Python, SQLite
• Client: JavaScript: OpenLayers, jQuery. Webbrowser getestet unter Firefox 3, Firefox 4, Chrome 13 und IE 8 (später ev. IE 9 und Safari).
• Folgende externe Webservices werden genutzt:
  • Geocoder/Geocoding: Yahoo (eine Alternative wäre Mapquest oder Geonames)
  • Routing: OpenStreetMap-Route-Service (OSRM) [1] (eine Alternative wäre MapQuest)
    • Routing mit OSRM und mit PostGIS und pgrouting (pg_route ist outdated)
    • Dennis Luxen: "Routing with OpenStreetmap data", SOTM Wien, http://sotm-eu.org/talk?74 (PDF) (about OSRM)
    • Comparison of (OSM) routing-engines – Reloaded

Daten

• Die Strassendaten stammen von der OpenStreetMap-Datenbank. Sie sind einen Tag alt (Stand ca. 22h vom Vortag, vgl. EOSMDBOne).
• Bei Widersprüchen zwischen PLZ und Ortsname wird die PLZ verwendet (Näheres dazu siehe Geocoder).

Stand und Weiterentwicklung

Mögliche Premium-Funktionen (MyTourpl, mit Login)

• Anstelle limitiert auf 5 unlimitierte Anzahl Zwischenhalte/Adressen
• Werbefrei
• Priorisierter Betrieb
• Editieren und Selektieren im Kontakt-Stamm
• Kalender-Anbindung (Google, Outlook, Exchange)
• Version für Mobiles/Smartphones, entweder als Mobile Webapp (Android & iOS, Offline) oder als Webapp (HTML5).
• Download für Routenplaner (GPX-Format)
• Kombination mit Mobility Car Sharing [2]

Was gibt es für Alternativen zu tourpl? Keine, die kostenlos ist, wie Tourpl. Und keine, die vor hat, Stau-Informationen zu integrieren. Für grössere Aufgaben in der Logistil, die häufig mit komplexen Touren zu tun habe, ist uns folgende kostenpflichtige Software bekannt

• smartTour - Desktop-Programm (Client) zur kurzfristigen und dynamischen Planung Touren und Reisen [3].
• Portatour [4]
• rexx [5]
• Hermes [6]
• Tourenplanungssystems CATRIN [7]
• "Online Tourenplaner" gb consite GmbH [8]

Aktueller Stand

Die Funktionalität wird zurzeit laufend erweitert - ausser "grosse Erweiterungen", wie z.B. eine Adressverwaltung, die wir gerne über unsere Premium-Services realisieren.

Task List

Erledigtes unten in History einordnen.

Bugs/Errors

• Bei zu kleinen Window-Auflösungen wird die Karte ganz unterhalb (und damit ausserhalb) des Layouts gezeigt. Man hat den Eindruck, dass die Karte weg ist und jede Interaktion wird unmöglich.
• Statt "Data 24.01.2012 CC-By-SA by OpenStreetMap" neu "Daten 24.01.2012 ODbL by OpenStreetMap"
• "Verbessern" (bzw. neu "Schnelle Route", "Tour-Optimieren-Algorithmus (F4)"): Start bleibt nicht erhalten. Vgl. [9]

Features

Verschiedenes (F1):

• Logging: Einfacher Log von Actions wie "Neu erstellen", Löschen, etc.. Format yyyy.mm.dd hh:mm; IP; HashcodeOrNull; Action; UploadFilename (z.B. als CSV, wie bei GeoConverter).
• Eigene HTTP-Fehlerseiten (vgl. [10]) z.B. für 400 Bad Request, 404 Not Found, 500 Internal Server Error, 500 Internal Server Error, 503 Service Unavailable, ev. 502 Bad Gateway.
• "Demo":
  • zeigt eine vordefinierte Adressliste (identisch mit Vorlage?), so dass Erstbesucher sofort "etwas sehen".
  • das kann entweder ein Permalink sein, der nicht gelöscht werden kann, es gibt einen Button "Demo".
  • So oder so "Drucken" entweder löschen oder durch "Demo" ersetzen.
• Vorlage:
  • Neue Reihenfolge: Tourpl, (Abfahrt,) (Dauer,) Name, Vorname, Anrede, Strasse, PLZ, Ort, Telefon, Bemerkungen, (Koordinaten).
  • korrekte Umlaute (UTF-8 BOM!).
• Speichern der IP-Adresse sowie des Upload-Datums (bzw. des Datums des letzten Aufrufs) in der DB. Das kann für Logging und für "Verfalldatum" verwendet werden.
• OpenLayers und Permalink
  • Funktion Permalink: Speichert URL mit Zoomfaktor, lat/lon (Zentrum) und aktive Layers (siehe PostGIS-Terminal)
  • Funktion "Zoom-to-extent" als OpenLayers-Standard-Button "Weltkugel" (vgl. den Button zwischen den Zoom-Pfeilen auf http://openpoimap.ch/ )
  • Initial beim Seitenaufruf von tourpl bbox für CH nehmen
  • BBox für einen "Zoom to full extent" berechnen und hereinzomen.
  • Bei "Drucken" (und anderen Aktionen, wie z.B. "Abbrechen") soll die aktuelle Ansicht erhalten bleiben.
• Hashcode:
  • "Verlässlicher" Hashcode (das letzte Zeichen kann verändert werden und die URL ist immer noch gültig).
  • Warum ist jetzt da "_" drin?

Adressen-Tab + Tour-Tab (F2): Vollständige Adress-Liste für Tour laden, darstellen ("Read Only" ohne Login) und daraus Zwischenhalte selektieren und zur Tour hinzufügen, bzw. entfernen:

• Alle Adressen werden in Adress-Tab dargestellt (Tour = eigener Layer?).
• Alle Adressen werden in Karte dargestellt (Adressen = eigener Layer?) => nicht-selektierte schwarzes Symbol, selektierte Gelb.
• Upload:
  • Im Tourpl-Feld Start ("S") und Ziel ("Z" / "T") festlegen (Adresse erhält in Tour ein "(S)"...).
  • Alle, die beim im Tourpl-Feld "X" haben für die Tour selektieren.
  • Falls Adresse beim Geocodieren nicht erkannt wird => aus Tour entfernen und kennzeichnen.
• Adress-Tab aktiv:
  • Adressen in Liste einzeln selektieren (= in Tour-Tab legen), bzw. deselektieren (= aus Tour-Tab entfernen).
  • Adresse ad-hoc textuell erfassen; Adresse löschen.
  • Adresse ad-hoc in Karte per Mausklick erfassen (= Reverse Geocoding, d.h. suche nächstgelegene Adresse vgl. Yahoo Placefinder).
• Adressen in Karte einzeln selektieren, bzw. deselektieren (Symbol ändert von rot auf gelb).

Interaktives Umordnen (in Karte) (F3): Reihenfolge der Zwischenhalte in der Karte umstellen zur nachträglichen Anpassung der Tour (z.B. Einschränkungen/Abmachungen mit Kunden/Externen, deren Eingabe zu kompliziert wäre):

• OpenLayersKnacknuss-Code einbauen (Code von Michael Weibel)! (vgl. OpenLayers Knacknuss).

Tour-Optimieren-Algorithmus (F4):

• Anstelle Tab „Verbessern“ zwei Tabs „Hin- und Rückfahrt“ und „Einfache Fahrt“. Das wird dann ergänzend bei/unterhalb „Adressen“ links angezeigt als „Schnellste Hin- und Rückfahrt“ und „Schnellste einfache Fahrt“.
• Tab/Button "Verbessern" - Analyse Simulated Annealing: Warum wechselt die Route ständig bei kleiner Anzahl Zwischenstationen?

Ideen

"Upload":

• CSV-Parser/Reader: Zellen mit unsichtbaren Spaces nach letztem Eintrag sollen ignoriert werden.
• Weitere Formate, z.B. Excel (.xlsx) oder Office Calc (.odx)?
• Erläuterungen zum Upload a la Google...: CSV in Google Contats importieren.

"Print":

• Drucken (Druckansicht) (= Print View); Drucken der Karte mit der Route auf eine A4-Seite angepasst (ev. Variante mit und ohne Routenbeschrieb).
• Editieren und Speichern (Druck-)Titel und -Beschreibung

GUI / Statisches Layout:

• Sprachwahl mit zusätzlicher Sprache Französich
• Nahe beieinander liegende Marker?
• Icons statt Weblinks in den Tabs (Vorlage, Upload, Download, etc.)
• Kontakte in Karte mit Lasso selektieren.
• Bei Google Hybrid den Dialog "Kartendaten: Grafiken (c) 2011 Terrametrics <Schließen>" entfernen. Ist möglicherweise nicht im Sinne von Google, doch die Terms of use lassen ev. zu, dass man einen Copyright-Text separat platziert. Hier eine angebliche Lösung des Problems: "Hide the Google Logo in Google Maps" [11].

Verschiedenes/Allgemeines:

• Routenberechnung (OSRM) wählbar: Auto, Velo, Fussgänger.
• Klick auf Icon lässt ein Popup aufklappen.
• Klick auf ein Item in der Liste/Tab (links) klappt ebenfalls ein Popup hoch.
• Anzeigen der zuletzt aufgerufenen Touren, so wie das http://bitly.com/ auch macht (mittels Cookie?).
• Job robuster machen für weniger Ausfallzeiten à la EOSMDBOne
• Werbung verwalten
• Weitere Eingabe von Rahmenbedingungen, so dass z.B. eine Tour nur zwischen bestimmten Zwischenhalten optimiert (?)
• Verfallzeit: Touren (und deren Adressen), die während eine bestimmten Zeit (z.B. 3 Monate?) nicht mehr gebraucht wurden, werden automatisch gelöscht.
• https?
• Feedback: Funktioniert das Kontaktformular? (oder etwas wie http://alternativeto.net/software/uservoice-custumer-feedback-system/?platform=online&license=free z.B. http://idea.informer.com/ , http://userecho.com/pricing/ , http://www.onedesk.com/pricing/ )

Stau-Vermeidung - Gibt es bei der internen Bewertung der Tourenplan-Vorschläge (= Liste von Zwischenhalten, deren Abfolge die schnellste Gesamtzeit ergeben) Routen, bei denen Stau prognostiziert ist, so werden alternative Vorschläge bevorzugt. Geht es nicht anders, soll vermerkt weren, dass entlang der Route mit Stau oder stockendem Verkehr zu rechnen ist (man beachte, dass die eigentliche konkrete Umfahrung nicht mit Tourpl geschieht, sondern z.B. unterwegs mittels Navi erfolgt).

• Eingabe/Anzeige Abfahrtszeit und Datum der geplanten Tour.
• Eingabe/Anzeige Aufenthaltsdauer" (Default für Dauer des Aufenthalt bei jedem Zwischenhalt, z.B. 2h).
• Vermerk in Bemerkungen(?): falls das auf die Fahrt zu dieser Zeit zutrifft: "Ev. Stau oder stockender Verkehr".
• Quelle: Baustellen Stadt Zürich siehe KMZ-Datei ([12]).

Tab Adressen mit Konto/OpenID (MyTourpl) - Verwalten ganzer Kontakte-Stamm in sep. Tab.

• Kontakt editieren und neuer hinzufügen.
• Download ganzer Kontakte-Stamm.
• Kontakte synchronisieren/anbinden (zusätzlich zum CSV-Upload)
• Importieren von Outlook-Kontakten (mit Plugin; funktioniert für Outlook 2007 und 2010; Realisierungsansatz: SmartClient AddIn für Microsoft Outlook).
  • Importieren von MS Exchange-Kontakten
  • Importieren von Google-Kontakten und anderen Social Software (vgl. OpenInviter).

Spezifikation CSV-Input und -Output

Kolonnen/Felder für CSV-Upload/Input (fett obligatorisch):

• Kolonnen-Namen: Name; Vorname; Anrede; Strasse; PLZ; Ort; Land; Telefon; Email; Koordinaten; Tourpl; Bemerkungen.
• Mitzugeben sind mind. die Felder Name; sowie entweder 1. Adresse; PLZ; Ort; (ev. Land) oder 2. Koordinaten.
• Felder/Kolonnen gehen keine verloren, wenn sie wie oben angegeben heissen (Case Insensitive) - ausser die Felder 'Abfahrt' und 'Dauer'.
• Die Felder 'Abfahrt' und Dauer werden beim Druck/Download überschrieben mit neuen Tourenangaben.
• Feld-Delimiter ist Strichpunkt, Komma, oder Tab. Strings-Delimiter ist Anführungszeichen.
• Die Reihenfolge der Kolonnen ist irrelevant.
• Für den mehrmaligen Upload, sollte der Upload/Import zusätzlich imstande sein, wie folgt mit dem Input umzugehen:
  • Die Kolonnen 'Abfahrt' und Dauer: Inhalt wird gelöscht und überschrieben.
  • Die Kolonnen Vorname; Telefon; Email und Bemerkungen werden eingelesen und im Download wieder mitgegeben (aber noch nicht angezeigt).
  • Zeilen, die aus weniger als drei Werte in den Kolonnen haben, werden ignoriert. Das betrifft konkret auch die Wegbeschreibung (vgl. dort) des Outputs.

Kolonnen/Felder für CSV-Download/Druckansicht:

• Alle eingelesenen Kolonnen. Reihenfolge der Kolonnen...
• Kolonnen-Namen: Abfahrt; Dauer; Name; Vorname; Anrede; Adresse; PLZ; Ort; Land; Telefon; Email; Koordinaten; Bemerkungen.
• Der Feld-Delimiter ist Strichpunkt. Strings-Delimiter ist Anführungszeichen (später als Option?).
• Das Feld 'Abfahrt' enthält die Tageszeit-Angabe, wann die Tour weitergeht zum nächsten Zwischenhalt.
• Das Feldformat für Koordinaten ist Lat/Lon.

Beispiel für CSV-Upload/Input:

 Strasse            ;Ort          ;PLZ  ;Land      ;Name
 "Oberseestr. 10"   ;"Rapperswil" ;8640 ;"Schweiz" ;"HSR"
 "Jonastrasse 8"    ;"Wald ZH"    ;8636 ;"Schweiz" ;"Schreinerei"
 "Roosstrasse 53"   ;"Wollerau"   ;8832 ;"Schweiz" ;"Conrad Electronic" 

Beispiel für CSV-Download/Druckansicht mit Wegbeschreibung (man beachte auch neue Reihenfolge der Kolonnen!): (Vorgabe Dauer bei Zwischenhalt ist 01:00h; und Vorgabe Dauer bei "Reise nach..." ist 0:30h).

 X;Abfahrt;Dauer;Name                     ;Strasse         ;Ort         ;PLZ ; Land    ;Vorname; Anrede; Telefon; Email; Bemerkungen; Koordinaten
 X;08:00 ;00:00 ;"Schreinerei"            ;"Jonastrasse 8" ;"Wald ZH"   ;8636;"Schweiz"; ; ; ; ; ;"47.27613,8.91014"
  ;08:00 ;00:35 ;"Reise von Wald ZH nach Rapperswil";;;;;;;;;
 X;08:30 ;01:00 ;"HSR"                    ;"Oberseestr. 10";"Rapperswil";8640:"Schweiz"; ; ; ; ; ;"47.22306,8.81651"
  ;09:30 ;00:33 ;"Reise von Rapperswil nach Wollerau";;;;;;;;;
 X;10:00 ;01:00 ;"Conrad Electronic"      ;Roosstrasse 53" ;"Wollerau"  ;8832;"Schweiz"; ; ; ; ; ;"47.18978,8.72249"
  ;11:00 ;00:31 ;"Reise von Wollerau nach Wald ZH";;;;;;;;;

History

Erste Use Cases (vgl. Tourpl-Tagesrapport):

• UC1 "Tour erstellen": User: Adressliste vorbereiten (CSV-Format) - Upload Adressliste
• UC5 "Neue Tour eröffnen" User: Button "Neu", Neueinstieg über Startseite
  • System: Eröffnet neue Tour: ** tour_id generiert (verkürzte uuid); Längen- und Breitengrade ergänzt durch Yahoo Geocoding; dann in sqlite DB persistieren
  • Umleitung uf tourpl.ch/?id=tour_id (besser direkt im Pfad à la Doodle)
  • Darstellung gemäss Reihenfolge Adressliste mit openlayers in Karte (Markers numerisch und mit Name) und mit JQuery in Liste
• UC3 "Tour optimieren lassen" (Prio 3) User: Wählt "Optimieren". System: Berechnet Liste neu mit TSP-Heuristik und (vorläufig) direkte Distanzen zwischen den 'Posten'.
• UC4 "Tour download" (CVS-Datei): User: Wählt "Download". System: Defaults Start um 08:00 Uhr, Aufenthalt 1h

• Upload:
  • Felder "Anrede", "Email", "Telefon" und "Koordinate" sollten nicht obligatorisch sein, ggf. auch "Land" ("Land" und "Koordinate" ggf. erzeugen).
  • Adresse "Muster, Max, Dorfstrasse 100, 8105, Watt" => Gibt Error wegen "Dorfstrasse 100, 8105, Watt" (AttributeError "no such child: {http://www.opengis.net/kml/2.2}Placemark" in lxml.objectify._lookupChildOrRaise (src/lxml/lxml.objectify.c:5310), line 484)
  • Test mit realistischem Datensatz mit > 50 Adressen (tourpl_stud_test_alle.csv )
  • Permalink ohne "=", d.h. neu mit "no padding" ("=") (Standard "Base32, uppercase" ist ok und lässt das zu). Sonst kann der Link nicht in Mails verschickt werden. => Sorry: Wollte schreiben lowercase (also "Base32, lowercase, no padding")
  • Umlaute auch in ANSI/cp1251 (MS Excel).
  • Berücksichtigen derjenigen Kontakte, die im Tourpl-Feld einen Wert (ein "X") haben (Feldname und Inhalt case insensitive).
  • Falls es kein Tourpl-Feld gibt, so sollen - wie bisher - alle Adressen importiert werden
  • Feldname darf "Adresse" oder neu "Strasse" heissen.
  • Robusterer CSV-Upload (Reader), u.a. mit Leerzeilen, etc..
  • Wenn die CSV-Vorlage in MS Excel (unter Windows) importiert und wieder gespeichert (bzw. als CSV exportiert) wird, gibt es immer noch Fehler beim Upload in Tourpl. Das Problem scheint die Codierung zu sein: Die Vorlage hat Filecodierung UNIX/ANSI und nach Speicherung durch Excel hat es PC/ANSI.

• Löschen:
  • Sicherheitsrückfrage ("Wollen Sie wirklich löschen? Ok (Abbrechen)").
• Tab/Button "Verbessern" (Tour optimieren):
  • BUG: Der neue Algo. (mit < 20 Adressen) verändert den Startpunkt (Test http://www.tourpl.ch/v5yq4esjuvda7iicmd3nktp2ry )
  • mit Sicherheitsrückfrage ("Diese Funktion verändert die Reihenfolge. Fortfahren? (Abbrechen)").
  • mit Warte-Dialog! (graue Fläche über die Karte mit zentrierter Schrift "Bitte warten...").
  • Einbau von Brute Force Algo für Touren mit max. 10 Städten (10! ist wahrscheinlich vernünftige obere Grenze)
  • Alle Tabs/Buttons ausser "Drucken" in Fettschrift, also: | Vorlage | Upload | Download | Drucken | Löschen | Verbessern |

• GUI:
  • Anzeige wahlweise OpenStreetMap oder Google Satellit. => "Google Hybrid" ([13]) ist noch besser - und ohne das komische Feld "Kartendaten: Grafiken (c) 2011 Terrametrics <Schließen>"
  • Die Layernamen sollen anstelle "lines" und "Markers" neu heissen "Tour" und "Adressnummer"
  • Anzeige Name - Ort (statt "Adresse" /Strasse).
  • Nach Umarrangieren und "Verbessern" soll der aktuelle Ausschnitt der Karte erhalten bleiben.

• Statisches Layout:
  • Werbung einbauen, ev. Layout (CSS) anpassen. Banner im Format "Wide Skyscraper" (gem. Standard-Werbeform IAB), d.h. 160 Pixel breit x 600 Pixel hoch, max. 50 kB, Dateiformate GIF, PNG, JPEG. Es kann auch ein animiertes SWF sein.
  • Neues FavIcon einbauen
• Verschiedenes:
  • http://labs.geometa.info/tourpl/ löschen

GUI:

• Der IE Explorer 8 stellt die Karte rechts statt unterhalb der Tabs/Buttons dar.
• Nach visuellem Umordnen der Liste oder in der Karte muss die Gesamtdistanz neu berechnet werden.
• Nicht nur Gesamtdistanz sondern die Gesamtreisezeit anzeigen "(54 min./86.96 km)".
• Bei Exceptions/Fehler einen schönen Dialog anzeigen und zur Startseite zurückkehren.
• Tourpl-Logo als Weblink (wie "Home").
• Wartedialog auch bei Upload anzeigen.
• Weblink der Werbung hinterlegen, so dass man drauf klicken kann und (z.Zt.) in einem neuen Tab sich http://ambienteverde.ch öffnet
• Kleiner Versatz des Balkens oben rechts beim HSR-Logo um ein Pixel beheben (ist ev. mit Icons obsolet).
• Bei Routen die OSRM nicht auflösen kann, Luftlinie nehmen
• Kontext-Menu (= "Right Click") in der Karte mit Funktionen belegen (z.B. ähnlich Google Maps wie "Zoom in, Zoom out, Karte hier zentrieren" => vgl. Code auf Diskussion:OpenPOIMap).
• Jenkins-Build für Tourpl auf geometa.hsr.ch einrichten
• Aufruf von Tourpl mit falscher URL/Hashcode zeigt eine Warnung an (anstelle nichts tun wie aktuell).

Fahrtenzeilen-Ausgabe - Routen verbinden zwei Zwischenhalte einer Tour. Diese Fahrten werden beim Download/Export einer Zeile mit einer Fahrtbeschreibung (Abfahrt, Fahrtdauer und Fahrtziel) ausgegeben (vgl. Beispiel unten):