1.000.000 kayıt içeren bir MySQL InnoDB tablom var. Bu çok mu fazla? Veya veritabanları bunu ve daha fazlasını halledebilir mi? Soruyorum çünkü bazı sorguların (örneğin, bir tablodan son satırı alma) 1 milyon satırlık tabloda 100'lü bir satıra göre daha yavaş (saniye) olduğunu fark ettim.
Yanıtlar:
1000000 yazmaçlı bir MySQL InnoDB masam var. Bu çok mu fazla?
Hayır, 1.000.000 satır (AKA kayıtları) bir veritabanı için çok fazla değil.
Soruyorum çünkü bazı sorguların (örneğin, bir tablonun son kaydını alma) 1 milyon yazmaçlı tablodaki 100 ile bire göre daha yavaş (saniye) olduğunu fark ettim.
Bu açıklamada hesaba katılması gereken çok şey var. Olağan şüpheliler:
97.000.000'den fazla kayda ( 30GB veri dosyası ) sahip bir veritabanım var ve sorun yaşamıyorum .
Tablo dizininizi tanımlamayı ve geliştirmeyi unutmayın .
Dolayısıyla, 1.000.000'in çok olmadığı açıktır ! (Ama indekslemezseniz; evet, ÇOK SAYIDIR)
Sorgunuzu incelemek ve sorgu planında herhangi bir sorun olup olmadığını görmek için "açıkla" yı kullanın.
EXPLAIN- yeni başlayanlar olsun ya da olmasın.
EXPLAIN;)
Bunun yaygın bir yanılgı olduğunu düşünüyorum - veritabanı ölçeklenebilirliği söz konusu olduğunda boyut denklemin yalnızca bir parçasıdır. Zor (veya daha zor) olan başka sorunlar da var:
Çalışma kümesi ne kadar büyüktür (yani belleğe ne kadar veri yüklenmesi ve üzerinde aktif olarak çalışılması gerektiği). Yalnızca veri eklerseniz ve onunla hiçbir şey yapmazsanız, aslında çözülmesi kolay bir sorundur.
Hangi düzeyde eşzamanlılık gereklidir? Ekleyen / okuyan tek bir kullanıcı mı var, yoksa aynı anda çalışan binlerce istemcimiz mi var?
Hangi düzeyde vaat / dayanıklılık ve performans tutarlılığı gereklidir? Her taahhüdü yerine getirebileceğimizden emin olmalı mıyız? Ortalama işlem hızlı mı, yoksa tüm işlemlerin güvenilir bir şekilde hızlı olduğundan emin olmak istiyor muyuz (altı sigma kalite kontrolü - http://www.mysqlperformanceblog.com/2010/06/07/performance-optimization- ve altı sigma / ).
ALTER tablo şeması gibi operasyonel sorunlar yapmanız gerekiyor mu? InnoDB'de bu mümkündür, ancak genellikle ön planda geçici bir tablo oluşturması gerektiğinden (tüm bağlantıları engelleyerek) inanılmaz derecede yavaştır.
Bu nedenle, sınırlayıcı iki konunun şöyle olacağını belirteceğim:
1 milyon satırı kastediyorsanız, indekslemenizin nasıl yapıldığına ve donanımınızın yapılandırmasına bağlıdır. Bir milyon satır, bir kurumsal veritabanı için büyük bir miktar değildir, hatta düzgün ekipmanlarla ilgili bir geliştirme veritabanı için bile değildir.
1 milyon sütunu kastediyorsanız (MySQL'de bunun mümkün olduğundan bile emin değilseniz), o zaman evet, bu biraz büyük görünür ve muhtemelen sorunlara neden olur.
Kayıt ol? Kayıt mı demek istiyorsun?
Bugünlerde bir veritabanı için bir milyon kayıt çok önemli değil. Herhangi bir sorunla karşılaşırsanız, bu muhtemelen veritabanı sisteminin kendisi değil, üzerinde çalıştırdığınız donanımdır. Büyük olasılıkla, atacak donanımınız bitmeden önce DB ile ilgili bir sorunla karşılaşmayacaksınız.
Şimdi, belli ki bazı sorgular diğerlerinden daha yavaştır, ancak çok farklı zamanlarda iki çok benzer sorgu çalıştırılırsa, veritabanının yürütme planının ne olduğunu bulmanız ve bunun için optimize etmeniz, yani doğru dizinler, uygun normalleştirme vb. Kullanmanız gerekir.
Bu arada, bir tablodaki "son" kayıt diye bir şey yoktur, mantıksal açıdan bakıldığında, içsel bir sırası yoktur.
SELECT LAST_INSERT_ID()o sorgu yerine ihtiyacın var .
Analitik çalışma için kendi kendine birleştirilmiş birkaç milyar (dizine alınmış) kayda sahip bölümlenmemiş tablolar gördüm. Sonunda şeyi bölümlere ayırdık ama dürüst olmak gerekirse o kadar da fark görmedik.
Bununla birlikte, bu Oracle'daydı ve MySQL'de bu veri hacmini test etmedim. Dizinler senin dostun :)
"Kayıtlar" ile "kayıtları" kastettiğinizi varsayarsak, hayır, çok fazla değildir, MySQL gerçekten iyi ölçeklenir ve sabit diskinizde alanınız kadar kayıt tutabilir.
Açıkçası, arama sorguları daha yavaş olacak. Alanların düzgün bir şekilde dizine eklendiğinden emin olmaktan başka bir yolu yok.
Tablo ne kadar büyük olursa (içindeki daha fazla satırda olduğu gibi), dizin yoksa, genellikle daha yavaş sorgular çalışır. Doğru dizinleri eklediğinizde, sorgu performansınız artmalı veya en azından tablo büyüdükçe azalmamalıdır. Ancak, tablo büyüdükçe sorgunun kendisi daha fazla satır döndürürse, yeniden bozulma görmeye başlarsınız.
1M satır çok fazla olmasa da, DB sunucusunda ne kadar belleğiniz olduğuna da bağlıdır. Tablo sunucu tarafından belleğe alınamayacak kadar büyükse sorgular daha yavaş olacaktır.
Verileri sıralamak için sıralama birleştirme yöntemi kullanıldığından, sağlanan sorguyu kullanmak son derece yavaş olacaktır.
Tasarımı yeniden düşünmenizi tavsiye ederim, böylece onu geri almak için dizinler kullanıyorsunuz veya zaten bu şekilde sıralandığından emin olun, böylece hiçbir sıralama gerekmez.