Bir toplu işlemi gerçekleştirmeniz gerektiğinde ORM çerçevesinden vazgeçmeli misiniz?

İşte ortak bir durum:

• ORM çerçevesi kullanan bir uygulamada toplu işlem gerçekleştirmeniz gerekir.
• İlk geçişten sonra, önemli performans sorunları fark ettiniz.

İşte sorum:

• Bu durumda, ham SQL içeren bir çözümü tercih etmelisiniz ?
• Veya ORM çerçevelerinde toplu işlemlerle yaygın olarak ilişkili sorunları azaltmanıza yardımcı olabilecek iyi bilinen tasarım kalıpları var mı?

DÜZENLE:

• ORM çerçevesini tüm uygulamadan kaldırmanız gerekip gerekmediğini sormuyorum.
• Soruyorum: Uygulamanın bu küçük dilimi için ORM çerçevesinden vazgeçmeli misiniz?

ORM'lerin veritabanınıza tamamen erişimi ele alması amaçlanmamıştır. Bunları, kendi başınıza yazmak için çok sıkıcı olan CRUD kodunun% 80'i için kullanın. Saklı yordamları, dinamik SQL'i veya dikkatle optimize edilmesi gereken kalan% 20 için istediğinizi kullanın.

Yüksek performans gerektiren ve milyarlarca kayıt işleyen bir uygulamada ORM (nHibernate) kullanıyorum. Zamanla, en önemli performans sorunlarının yalnızca ORM'den ziyade ORM'yi kullanma şeklimizle ilişkili olduğunu fark ettik.

ORM, zorunlu veritabanı bilginizin yerini almamalıdır. Kodunuzda daha fazla üretkenlik ve esneklik elde etmek için kullandığınız bir araçtır, ancak performansınızı optimize etmek için temel işlemleri bilmeniz gerekir.

Belirli bir ORM belirtmediniz, bu nedenle performansı artırmak için yaptığımız şeyler şunlardır:

• Bir ORM profili oluşturduk. (nhprof kullandık)
• Bir veritabanı profili kullanıyorduk. (SQL Server Profiler kullandık)
• Konuyla ilgili olabildiğince çok makale okuyoruz. (Belgelerde konuyla ilgili tüm bölüme ek olarak nHibernate için birçoğu mevcuttu)
• Performans ve ölçeklenebilirlik hakkında özel kitaplar aldık.
• Kendi optimizasyonlarımızı test etmek için kıyaslama sistemi oluşturduk.
• ve daha da önemlisi, kodumuzu gerçek verilerle büyük verilerle test edebildik. Bu son şey, uygulamamızdaki çoğu sorunu tespit etmemize yardımcı oldu.

Entity Framework ile yapmayı başardık, ancak uygulamamız çok sayıda toplu işlem gerçekleştirdi (bireysel tablolara çok sayıda kayıt yazardık), bu yüzden iyi bir uyum vardı. Sadece uygulamanızdaki özel amaçlı kod miktarını azaltmak için, mümkünse ORM çerçevesini korumanın mümkün olup olmadığını kesinlikle göreceğim. Yazmaları arabelleğe alıp bir grup olarak yürütmek mümkün müdür? İşlem semantiğini kaybedersiniz, ancak toplu işlemlerle devam ediyorsanız, bunu zaten kabul etmiş sayılırsınız.

ORM'ler büyülü bir şey yapmaz. Nesne erişim yöntemlerini SQL'e çevirirler. Yürüttükleri SQL deyimlerinin, elle yazacağınız SQL'den daha yavaş olması gerekmez. Bunu söyledikten sonra, rastlayabileceğiniz birkaç sorun var:

1. İşlemler: Büyük bir toplu işlem, hep birlikte hep aynı şeyi yapan birçok küçük işlemden daha hızlıdır. Bu nedenle, ORM yöntem çağrılarınız ayrıntılı işlemler kullanıyorsa (örneğin Spring Roo varlıklarındaki etkin kayıt stili yöntemleri, varsayılan olarak @Tacacactional olarak açıklanır), toplu işlemler yavaş olur. Başvurunuzdaki durum buysa, işlem mantığınıza bakmalısınız.
2. Önbellekleme: Hazırda Bekletme modunda, birinci düzey önbellek varlık yöneticinizin veritabanına gereksiz gidiş gelişlerden kaçınmasını sağlar. Genel olarak iyi bir şeydir, ancak gereksiz önbellek tıkanmasına neden olan ve uygulama performansının düşmesine neden olan toplu ekler için kötüdür. Sorununuz buysa, ChrisAnnODell tarafından önerilen Batching modeline bakmalısınız. İthalatçılarımızda kullanıyoruz ve toplu ekleri çok hızlandırıyor.

Performansı artırmak için yerel SQL kullanmanın yanlış bir yanı yoktur. Ama önce sizi neyin yavaşlattığını anladığınızdan emin olun.

ORM'yi atlayın. Sadece bu değil, aynı zamanda "normal" sql de bypass. Bir hazırlama tablosuna son derece büyük veri kümeleri eklemek için veritabanınızın bir toplu yardımcı programını kullanın. Ardından, hazırlama faaliyetlerinizi gerçekleştirmek için sql kullanın.

"Blog lezzeti" ORM'niz her durumda çalışmayabilir.

O durumda. Bazen yapmak zorundasın.

Bazı ORM, geliştiricinin nesne modelini atlamasına ve doğrudan veritabanı katmanına gitmesine izin verir.

Nesne Odaklı olarak kapsüllenmiş toplu işlemleri kullanan ORM de vardır.

Umlcat tarafından belirtildiği gibi , toplu işlemleri kullanmanıza izin verecek bazı ORM'ler vardır.

Daha da iyisi, birçok ORM genişletilebilir, bu nedenle zaten desteklenmiyorsa toplu işlemleri çalıştırmak için kendi yönteminizi yazabilirsiniz. Uygulamanızdaki toplu işlem, dışarıda bırakabileceğiniz bir şeyse, ORM'de bir katman olarak eklerdim (bunu yapmak için muhtemelen ham SQL yazmanız gerekir), ancak uygulamada ORM'yi kullanın uyguladınız.

Bu aynı zamanda birim testi ve hata ayıklamayı kolaylaştırır. ORM yöntemleriniz için iyi bir test kapsamına sahip olduğunuzda, bunu uygulamalarınızda kullanmakta özgürsünüz. Aksi takdirde, ham SQL'de hata ayıklama (özellikle işlemler ve birçok JOIN içeren büyük olanlar) bir acı olabilir.

Bir zamanlar neredeyse 100 LOC olan ham SQL çağrısında bir hatayı tespit etmek neredeyse bir günümü aldı ve hata sadece tek bir karakterdi! O zamandan beri, uygulamada ham SQL'den kaçınmaya çalışıyorum ve tüm SQL prosedürlerini ayrı ayrı birim test ettirdim.

Fark ettiğim herhangi bir tasarım paterni yok. Benim tahminim, ORM için bir sebepten dolayı karar vermiş olmanızdır, bu nedenle ORM'den vazgeçmek istediğiniz şey değildir. Bununla birlikte, bu durumlarda her iki çözeltiyi karıştırmak için yer olduğunu düşünüyorum. Bunda bilinçli olarak yaptığınız ve yazılımınızda ORM'nin varsayılan kullanımından neden saptığınızı belgelediğiniz sürece bununla ilgili yanlış bir şey yoktur. Bunun yanında, bazı ORM çerçevelerinin toplu işlemler yapmak için bazı olanakları vardır. NHibernate'in (.NET çerçevesi için ORM) çok daha az yükü olan StatelessSessions'ı geliştirdiğini biliyorum, ancak bu hala aradığınız performans artışı vermeyebilir. Bu durumda, sadece ham SQL kullanın.