İki özdeş Ubuntu sunucusu arasındaki büyük performans farkının nedenini nasıl bulabilirim?

Bir veri merkezinin aynı rafında (yük dengeleyicinin arkasında) iki Dell R410 sunucusu çalıştırıyorum . Her ikisi de aynı donanım yapılandırmasına sahiptir, Ubuntu 10.4'ü çalıştırır, aynı paketleri yükler ve aynı Java web sunucularını çalıştırır (başka bir yük yok) ve ikisi arasında önemli bir performans farkı görüyorum.

Performans farkı, her iki sunucunun (Java uygulamasında ağ gecikmeleri olmadan ölçülen) ortalama yanıt sürelerinde en belirgindir: Bunlardan biri diğerinden% 20-30 daha hızlıdır, çok tutarlı bir şekilde.
Daha dstatfazla bağlam anahtarı, IO, takas veya başka bir şey varsa, anladım, ancak fark için bir neden göremiyorum. Aynı iş yüküyle (takas yok, neredeyse hiç IO yok), işlemci kullanımı ve yükü bir sunucuda daha yüksektir.

Bu yüzden fark esas olarak CPU'ya bağlı gibi görünüyor, ancak sysbench(diğer tüm yükler kapalıyken) kullanan basit bir işlemci kıyaslaması bir fark yarattı, ancak sadece% 6 idi. Belki de sadece CPU değil, aynı zamanda bellek performansıdır.

Şimdiye kadar kontrol ettim:

• Tüm bileşenlerde donanım yazılımı revizyonları (aynı)
• BIOS ayarları (kullanarak bir dökümü yaptım dmidecodeve hiçbir fark göstermedi)
• Kıyasladım /proc/cpuinfo, fark yok.
• Çıktılarını karşılaştırdım, cpufreq-infofark yok.
• Java / JVM Parametreleri (her iki sistemde de aynı sürüm ve parametreler)

Ayrıca, RAM'i birkaç ay önce, hiçbir etkisi olmadan tamamen değiştirdim.

Kayboldum. Anlamak için ne yapabilirim, neler oluyor?

GÜNCELLEME : Yay! Her iki sunucu da şimdi eşit olarak çalışıyor. Yorumlarda jim_m_somewhere adında "power CRAP" ayarları yapıldı. "Güç Yönetimi" için BIOS seçenekleri, hızlı sunucuda "Maksimum Performans" ve diğerinde "Etkin Güç Denetleyicisi" (Dell'den varsayılan ayar) üzerindeydi. Açıkçası, iki yıl önce bu ayarı yaptığımı unuttum ve bunu tüm sunucularda yapmadım. Çok yararlı girdiniz için herkese teşekkürler!

Bununla ne kadar ilerlemek istediğinize bağlı olarak iki fikir:

1. Her iki sunucunun disklerini değiştirin ve hız performansının donanımda kalıp kalmadığını veya yazılımla birlikte hareket edip etmediğini görün.

2. /opt/dell/toolkit/bin/syscfg -o complete-bios-config.outBu paketi yüklemek için bir şekilde kandırabiliyorsanız çıktısını karşılaştırın .

Çıktı ve fark için daha fazla olasılık:

• sysctl -a (çekirdek ayarlarının aynı olduğundan emin olun)
• cat / proc / interrupts (Belki başka bir donanım parçası karışıyor?)
• ipmitool sensör listesi (uzun atış, ancak daha düşük seviye farklılıkları, aşırı ısınma, voltaj sorunları vb.)

Kulağa yük dengeleyici gelebilir. "Aynı işyükü" dediğinde bunu nasıl ölçüyorsun?
Tek başına bir test yükü uygulayarak her sunucuyu doğrudan karşılaştırıyor musunuz?
veya Yük dengeleyiciye biraz yük uyguluyor ve her iki sunucudaki sonuçlara mı bakıyorsunuz?

İkincisini (yük dengeleyici aracılığıyla her iki sunucuya yüklenen yükü ölçüyorsanız) yük dengeleyiciniz iş yükünü sunucular arasında tam olarak eşit olarak bölmeyebilir (bir çift sunucu için% 20'lik bir eğim, yük dengeleyiciniz kimin hangi istekleri alacağına karar verir), bu da bir sunucunun daha fazla yük almasına ve dolayısıyla kötü performans göstermesine neden olur.

(Yük dengeleyicisini aracı olarak kullanmadan, her sunucuyu doğrudan karşılaştırıyorsanız ve her bir bileşenin her iki sistem arasında aynı olduğunu (üretici revizyonlarına kadar) doğruladıysanız, kayboldum - Aksi özdeş sunucular arasındaki bu tür bir performans farkı için başka bir ölçülebilir neden düşünemiyorum)

Bazı profilleme araçları gibi profilleme ya sistem deneyin perf veya Java gibi profilleme visualvm .

Perf ile ya çalışan Java sürecini PID ile ya da bir kıyaslama profilini oluşturabilirsiniz. Her iki sisteme de bakın, yavaş sistemin nerede zaman harcadığını görün.

apt-get install linux-tools-common linux-tools

Sonra şöyle bir şey:

perf record -e cpu-cycles -p <pid>

veya

perf record -a -g <benchmark command>

sonra

perf report

Sistemlerin nasıl farklı performans gösterebileceğine dair birkaç fikir:

Çevre: Hava sıcaklığı veya hava akışı farklı mı? Raflardalar mı? Sistemlerin titreşim nedeniyle farklı raf konumlarında farklı performans gösterdiğini gördüm. Her rafta farklı titreşim seviyeleri vardır. Neredeyse hiç G / Ç kullanılmadığını söylemiş olmanız olası değildir. Ancak disklerin bir rafın parçalarındaki titreşim nedeniyle 2MB / sn sıralı yazma işlemlerine kadar yavaşladığını gördüm.

Donanım Hataları: Herhangi bir donanım arızalı olabilir. Neyin yavaş olduğunu görmek için profili kullanın. Kötü bir CPU veya yonga seti, düzgün takılmamış bir soğutucu, titreşime neden olan denge dışı fanlar, başarısız fanlar, hatta kötü bir PSU olabilir. Değiştirmesi kolay şeyleri değiştirmeyi deneyin.

Neden kimse 'sysprof' önermedi ..?

Bunun için tasarlandı.

Ya da ummm ikinci düşünce ... /etc/security/limits.conf içinde bazı sınırlar doldurmayı deneyin

Her ikisini de deneyin.

Hiçbir şey almazsanız .... büyük olasılıkla bir güvenlik sorununuz veya fiziksel bir kusurunuz var.

ayrıca bkz: Linux sunucum "Oluşturulan işlem sayısı" ve "Bağlam anahtarları" inanılmaz derecede hızlı büyüyor