Geografisches Informationssystem large-datasets

2

Auf der Suche nach der schnellsten Lösung für die Point-in-Polygon-Analyse von 200 Millionen Punkten

Ich habe eine CSV mit 200 Millionen Beobachtungen in folgendem Format: id,x1,y1,x2,y2,day,color 1,"-105.4652334","39.2586939","-105.4321296","39.2236632","Monday","Black" 2,"-105.3224523","39.1323299","-105.4439944","39.3352235","Tuesday","Green" 3,"-104.4233452","39.0234355","-105.4643990","39.1223435","Wednesday","Blue" Für jeden Koordinatensatz (x1 / y1 und x2 / y2) möchte ich den US-amerikanischen Zensus-Trakt oder den Zensus-Block zuweisen, in den er fällt (das TIGER-Shapefile des Zensus-Trakts habe ich hier heruntergeladen: ftp://ftp2.census.gov/ geo / tiger …

35 postgis spatialite point-in-polygon large-datasets optimization

12

Massen-Geocodierung von 20 Millionen US-Adressen

Gibt es kostenlose oder kostengünstige Datenbanken für die USA, in denen gesucht werden kann und die Längen- und Breitengrade enthalten?

34 geocoding large-datasets

3

Messen des Leistungsunterschieds zwischen Zusammenführen und Anhängen in ArcGIS Desktop?

Oft bin ich in einer Situation, in der es mir egal ist, ob mein Tool eine neue Feature-Class produziert oder nicht, aber es ist mir wichtig, wie lange es dauert, alle meine großen Datensätze zu kombinieren. Dauert es länger, eine neue Feature-Class mit dem Zusammenführen-Tool anstelle des Anfügen-Tools zu erstellen, …

12 arcgis-desktop arcgis-10.0 merge performance large-datasets

4

Wie kann man Küsten verallgemeinern?

Ich habe eine große Anzahl von Datenpunkten, die im Wesentlichen die Küste der Welt darstellen. Ich kenne die genaue Auflösung nicht, aber ich würde sagen, es liegt in der Nähe von 5-10 m. Stellen Sie sich eine Reihe von Punkten vor, die eine gezackte Küste darstellen. Bei einer Auflösung von …

12 vector algorithm scale generalization large-datasets

1

Clusterverarbeitungsressourcen für 50 Gb DEM benötigt?

Für "Mietzwecke" muss ich die Computerressourcen angeben, die ich vom Rechenzentrum meiner Universität benötige. Ich habe sehr wenig Ahnung, wonach ich fragen soll. Können Sie unter Berücksichtigung der folgenden Informationen etwas vorschlagen? Dies ist der Computercluster: "Ein 10-Blade-Server mit jedem Blade, bestehend aus 2 Quad Core Intel Xeon 2,33-GHz-CPUs mit …

9 large-datasets hardware-recommendations

4

Große LiDAR-Punktwolke ausdünnen?

Ich habe eine große Punktwolke (LAS-Datei) und versuche diese mit einer komplexen Technik zu verdünnen. Ich weiß, dass es möglich ist, eine Punktwolke mit einfachen Techniken wie dem Extrahieren jedes n- ten Punkts zu verdünnen . Die Punktwolke, mit der ich arbeite, ist jedoch in einigen Bereichen dichter und in …

8 lidar software-recommendations large-datasets las point-cloud

2

Effiziente Rasterabtastung von Milliarden von Polygonen (Begrenzungsrahmen)

Wie kann ein Raster effizient berechnet werden (in Python), wenn ein Satz aus Milliarden von Begrenzungsrahmen besteht (nacheinander aus einer Datei gelesen) und die Rasterwerte für jede Zelle die Anzahl der überlappenden Begrenzungsrahmen angeben? Für ein 4000 * 4000 Raster Ich habe die Erstellung der Numpy-Matrix zeitlich festgelegt: $ python …

8 raster polygon extents large-datasets heat-map

2

Gibt es eine effektive Grenze für die Geoverarbeitungsaufgabe Geocode-Adressen?

Das Problem, mit dem ich konfrontiert bin, hat folgenden Hintergrund: Wir geokodieren ein riesiges Verzeichnis von Datensätzen. Es sind mehr als 100 Millionen Adressen. Ich habe die Adressen in einen so kleinen geografischen Grund aufgeteilt, wie ich es für machbar halte, heißt es. Trotzdem kann ein einzelner Staat mehr als …

8 arcgis-10.0 geoprocessing geocoding large-datasets

9

WMS mit Zugriffskontrolle (ACL) für verschiedene Benutzer? Oder Lösung für Tausende von Punkten auf der Webkarte?

Ich habe eine Reihe von Websites zu Tausenden. Nicht alle Benutzer sehen dieselben Sites auf der Karte - also ACL. Daten werden in einer Nicht-GIS-Datenbank (mssql, ora usw.) gespeichert und jetzt mit einer Standard-SQL-Abfrage abgerufen und mit einer JSP an den Client (OpenLayers) zurückgegeben. Der aktuelle Code ist bereits optimiert, …

8 openlayers-2 wms security large-datasets

4

Abfragen, die sehr große Datenmengen in PostGIS zurückgeben

Ich habe eine PostGIS-Abfrage, die mehrere Millionen Zeilen zurückgibt: SELECT t1.id AS id1, t2.id AS id2, ABS(t1.mean_h - t2.mean_h) AS h_diff, ST_Distance(t1.the_geom, t2.the_geom) AS dist FROM tas_ponds as t1, tas_ponds as t2 WHERE (t1.gid > t2.gid) AND ST_DWithin(t1.the_geom, t2.the_geom, 17000) Beim Einlaufen psqlerhalte ich eine out of memory for query …

8 postgis sql large-datasets

Als «large-datasets» getaggte Fragen