«large-datasets» etiketlenmiş sorular

Aşağıdaki formatta 200 milyon gözlem içeren bir CSV'm var: id,x1,y1,x2,y2,day,color 1,"-105.4652334","39.2586939","-105.4321296","39.2236632","Monday","Black" 2,"-105.3224523","39.1323299","-105.4439944","39.3352235","Tuesday","Green" 3,"-104.4233452","39.0234355","-105.4643990","39.1223435","Wednesday","Blue" Her bir koordinat grubu için (x1 / y1 ve x2 / y2), içine düşen ABD Sayım Yolu veya Sayım Bloğunu atamak istiyorum (Sayım TIGER şekil dosyasını buraya indirdim: ftp://ftp2.census.gov/ coğrafi / kaplan / TIGER2011 / TRACT / …

35 postgis  spatialite  point-in-polygon  large-datasets  optimization 

ABD için aranabilen ve enlem ve boylam bilgileri döndüren ücretsiz veya uygun fiyatlı veri tabanları var mı?

34 geocoding  large-datasets 

Genellikle kendimi, aracımın yeni bir özellik sınıfı üretip üretmediğini umursamadığım bir durumda bulurum, ancak tüm büyük veri kümelerimi birleştirmenin ne kadar sürdüğü umurumda. Birleştirme aracını Ekle aracı yerine kullanarak yeni bir özellik sınıfı oluşturmak daha uzun mı sürüyor yoksa Birleştir ve Ekle özelliği performans açısından temelde aynı mı?

12 arcgis-desktop  arcgis-10.0  merge  performance  large-datasets 

Dünyanın kıyı şeridini temsil eden çok sayıda veri noktam var. Tam çözünürlüğü bilmiyorum ama 5-10m civarında olduğunu söyleyebilirim. Pürüzlü bir sahil şeridini temsil eden bir dizi nokta düşünün. 1m çözünürlükte tüm sahili görüyoruz ve sahili doğru bir şekilde temsil etmek için 50 veri noktasına ihtiyacımız var, ancak 10km çözünürlükte sahil …

12 vector  algorithm  scale  generalization  large-datasets 

"Kiralama amaçları" için Üniversitemdeki bilgi işlem merkezinden ihtiyaç duyduğum bilgi işlem kaynaklarını belirtmem gerekiyor. Ne isteyeceğime dair çok az fikrim var. Aşağıdaki bilgileri dikkate alarak bir şeyler önerebilir misiniz? Bu hesaplama kümesidir: "Toplam 80 CPU ve 160 GB bellek için 16 GB belleğe sahip 2 Dört Çekirdekli Intel Xeon 2.33 …

9 large-datasets  hardware-recommendations