«bulkinsert» etiketlenmiş sorular

Programlı olarak 10 milyonlarca kayıt bir postgres veritabanına eklemek gerekir. Şu anda 1000 "ekleme deyimleri tek bir" sorgu "yürütüyorum. Bunu yapmanın daha iyi bir yolu var mı, bilmediğim bazı toplu ekleme ifadeleri?

242 postgresql  bulkinsert 

Postgres ekleme performansını test ediyorum. Veri türü olarak bir sütun içeren bir tablo var. Üzerinde bir de indeks var. Ben bu sorguyu kullanarak veritabanını doldurdu: insert into aNumber (id) values (564),(43536),(34560) ... Yukarıdaki sorgu ile bir kerede 10.000 satırları çok hızlı bir şekilde 10.000 satır ekledim. Veritabanı 6 milyon satıra …

216 sql  postgresql  bulkinsert  sql-insert 

.csvSQL Server içine bir dosyayı almak için yardım arıyorum BULK INSERTve birkaç temel sorularım var. Sorunlar: CSV dosya verilerinin arasında ,(virgül) olabilir (Örn: açıklama), bu nedenle bu verileri işlerken nasıl içe aktarma yapabilirim? İstemci CSV'yi Excel'den oluşturursa, virgül içeren veriler ""(çift tırnak) içine [aşağıdaki örnekte] eklenir, böylece içe aktarma bunu …

186 sql  sql-server  csv  bulkinsert  bulk 

Her gün bir belge stoğu (güncelleme) alıyorum. Ne yapmak istiyorum zaten mevcut olmayan her öğeyi eklemek. Ayrıca ilk taktığımda ve en son ne zaman bir güncellemede gördüğümü takip etmek istiyorum. Yinelenen belgelere sahip olmak istemiyorum. Daha önce kaydedilmiş, ancak güncellememde olmayan bir belgeyi kaldırmak istemiyorum. Kayıtların% 95'i (tahmini) günden güne …

146 python  mongodb  bulkinsert  mongodb-query 

Verileri toplu olarak yüklüyorum ve tüm tetikleme değişikliklerini, satır bazında olduğundan çok daha ucuza gerçeğin ardından yeniden hesaplayabilirim. PostgreSQL'deki tüm tetikleyicileri geçici olarak nasıl devre dışı bırakabilirim?

132 postgresql  triggers  bulkinsert 

Ekleme komutlarını kullanarak PHP aracılığıyla büyük bir veri kümesini bir MySQL tablosuna geçiriyorum ve her bir değeri bir mil uzunluğundaki dizenin sonuna eklemek dışında bir sorgu aracılığıyla bir seferde yaklaşık 1000 satır eklemenin mümkün olup olmadığını merak ediyorum ve sonra yürütmek. CodeIgniter çerçevesini kullanıyorum, böylece işlevleri de benim için kullanılabilir.

129 php  mysql  codeigniter  insert  bulkinsert