Django'nun test veritabanı yalnızca bellekte nasıl çalıştırılır?

Django birim testlerimin çalışması uzun sürüyor, bu yüzden bunu hızlandırmanın yollarını arıyorum. Bir SSD kurmayı düşünüyorum , ancak bunun da dezavantajları olduğunu biliyorum. Elbette, kodumla yapabileceğim şeyler var, ancak yapısal bir düzeltme arıyorum. Veritabanının her seferinde yeniden oluşturulması / güneye taşınması gerektiğinden tek bir test çalıştırmak bile yavaştır. İşte benim fikrim ...

Test veritabanının her zaman oldukça küçük olacağını bildiğim için, neden sistemi tüm test veritabanını her zaman RAM'de tutacak şekilde yapılandıramıyorum? Diske asla dokunmayın. Bunu Django'da nasıl yapılandırırım? Üretimde kullandığım şey bu olduğundan MySQL'i kullanmaya devam etmeyi tercih ederim , ancak SQLite  3 veya başka bir şey bunu kolaylaştırırsa, o yoldan giderim.

SQLite veya MySQL'in tamamen bellekte çalışma seçeneği var mı? Bir RAM diski yapılandırmak ve ardından test veritabanını verilerini orada depolayacak şekilde yapılandırmak mümkün olmalıdır, ancak Django / MySQL'e belirli bir veritabanı için farklı bir veri dizini kullanmasını nasıl söyleyeceğimi bilmiyorum, özellikle de silinmeye devam ettiği için ve her koşuyu yeniden yarattı. (Mac FWIW kullanıyorum.)

Testlerinizi çalıştırdığınızda veritabanı motorunuzu sqlite3 olarak ayarlarsanız, Django bellek içi bir veritabanı kullanacaktır .

settings.pyTestlerimi çalıştırırken motoru sqlite olarak ayarlamak için şu şekilde bir kod kullanıyorum :

if 'test' in sys.argv:
    DATABASE_ENGINE = 'sqlite3'

Veya Django 1.2'de:

if 'test' in sys.argv:
    DATABASES['default'] = {'ENGINE': 'sqlite3'}

Ve son olarak Django 1.3 ve 1.4'te:

if 'test' in sys.argv:
    DATABASES['default'] = {'ENGINE': 'django.db.backends.sqlite3'}

(Arka uca giden tam yol Django 1.3 ile kesinlikle gerekli değildir, ancak ayarı ileriye dönük uyumlu hale getirir.)

Güney göçlerinde sorun yaşamanız durumunda aşağıdaki satırı da ekleyebilirsiniz:

    SOUTH_TESTS_MIGRATE = False

Genellikle testler için ayrı bir ayarlar dosyası oluştururum ve bunu test komutunda kullanırım örn.

python manage.py test --settings=mysite.test_settings myapp

İki faydası vardır:

1. testSys.argv'de kontrol etmek zorunda değilsiniz veya böyle bir sihirli kelime test_settings.py, sadece

   from settings import *
   
   # make tests faster
   SOUTH_TESTS_MIGRATE = False
   DATABASES['default'] = {'ENGINE': 'django.db.backends.sqlite3'}

   Veya test ayarlarını üretim ayarlarından temiz bir şekilde ayırarak ihtiyaçlarınız için daha fazla ince ayar yapabilirsiniz.

2. Diğer bir yararı da, ince hatalardan kaçınarak sqlite3 yerine üretim veritabanı motoru ile test çalıştırabilmenizdir, böylece kullanımı geliştirirken

   python manage.py test --settings=mysite.test_settings myapp

   ve kodu işlemeden önce bir kez çalıştırın

   python manage.py test myapp

   sadece tüm testlerin gerçekten başarılı olduğundan emin olmak için.

MySQL, veritabanı yapılandırmanızda ( settings.py) şu şekilde yapılandırabileceğiniz "MEMORY" adlı bir depolama motorunu destekler :

    'USER': 'root',                      # Not used with sqlite3.
    'PASSWORD': '',                  # Not used with sqlite3.
    'OPTIONS': {
        "init_command": "SET storage_engine=MEMORY",
    }

MEMORY depolama motorunun blob / metin sütunlarını desteklemediğini unutmayın, bu nedenle bunu kullanıyorsanız django.db.models.TextFieldişinize yaramayacaktır.

Ana soruna cevap veremem ama işleri hızlandırmak için yapabileceğin birkaç şey var.

İlk olarak, MySQL veritabanınızın InnoDB'yi kullanacak şekilde ayarlandığından emin olun. Daha sonra her testten önce db'nin durumunu geri almak için işlemleri kullanabilir, bu da benim deneyimime göre çok büyük bir hızlanmaya yol açtı. Settings.py (Django 1.2 sözdizimi) 'nizde bir veritabanı başlatma komutu iletebilirsiniz:

DATABASES = {
    'default': {
            'ENGINE':'django.db.backends.mysql',
            'HOST':'localhost',
            'NAME':'mydb',
            'USER':'whoever',
            'PASSWORD':'whatever',
            'OPTIONS':{"init_command": "SET storage_engine=INNODB" } 
        }
    }

İkinci olarak, her seferinde Güney göçlerini yürütmenize gerek yok. SOUTH_TESTS_MIGRATE = FalseSettings.py dosyanızda ayarlayın ve veritabanı düz syncdb ile oluşturulacak ve bu, tüm geçmiş geçişleri gerçekleştirmekten çok daha hızlı olacaktır.

Çift ince ayar yapabilirsiniz:

• işlem tablolarını kullanın: ilk fikstür durumu, her TestCase'den sonra veritabanı geri dönüşü kullanılarak ayarlanır.
• veritabanı verilerinizi ramdisk'e koyun: veritabanı oluşturma söz konusu olduğunda çok şey kazanacaksınız ve ayrıca testi çalıştırmak daha hızlı olacaktır.

Her iki numarayı da kullanıyorum ve oldukça mutluyum.

Ubuntu'da MySQL için nasıl kurulur:

$ sudo service mysql stop
$ sudo cp -pRL /var/lib/mysql /dev/shm/mysql

$ vim /etc/mysql/my.cnf
# datadir = /dev/shm/mysql
$ sudo service mysql start

Dikkat edin, bu sadece test amaçlıdır, veritabanınızı bellekten yeniden başlattıktan sonra kaybolur!

Başka bir yaklaşım: RAM Disk kullanan bir tempfs'de çalışan başka bir MySQL örneğine sahip olmak. Bu blog gönderisindeki talimatlar: Django'da test için MySQL'i hızlandırma .

Avantajları:

• Üretim sunucunuzun kullandığı veritabanının tamamen aynısını kullanıyorsunuz
• varsayılan mysql yapılandırmanızı değiştirmenize gerek yok

Anurag'ın cevabını genişletmek için aynı test_settings'i oluşturarak ve manage.py'ye aşağıdakileri ekleyerek süreci basitleştirdim

if len(sys.argv) > 1 and sys.argv[1] == "test":
    os.environ.setdefault("DJANGO_SETTINGS_MODULE", "mysite.test_settings")
else:
    os.environ.setdefault("DJANGO_SETTINGS_MODULE", "mysite.settings")

sys zaten içe aktarıldığından ve manage.py yalnızca komut satırı aracılığıyla kullanıldığından, daha temiz görünüyor, bu nedenle ayarları karıştırmaya gerek yok

Aşağıdakileri kendi setting.py

DATABASES['default']['ENGINE'] = 'django.db.backends.sqlite3'