Kerevizde görev durumu nasıl kontrol edilir?

Bir görevin kerevizde çalışıp çalışmadığı nasıl kontrol edilir (özellikle kereviz-django kullanıyorum)?

Belgeleri okudum ve Google'da araştırdım, ancak şöyle bir çağrı göremiyorum:

my_example_task.state() == RUNNING

Benim kullanım durumum, kod dönüştürme için harici (java) bir hizmetim olması. Kodu dönüştürülecek bir belge gönderdiğimde, bu hizmeti çalıştıran görevin çalışıp çalışmadığını kontrol etmek ve çalışmıyorsa (yeniden) başlatmak istiyorum.

Mevcut kararlı sürümleri kullanıyorum - 2.4, sanırım.

Task_id (.delay () ile verilir) döndürür ve daha sonra kereviz örneğine durumu sorun:

x = method.delay(1,2)
print x.task_id

Sorurken, bu task_id kullanarak yeni bir AsyncResult alın:

from celery.result import AsyncResult
res = AsyncResult("your-task-id")
res.ready()

Bir oluşturma AsyncResultgörevi id nesneyi olduğu önerildiği yolu SSS sahip olduğunuz tek şey görev kimliği olduğunda görev statüsü elde etmek.

Ancak Kereviz 3.x itibariyle, dikkat etmezlerse insanları ısırabilecek önemli uyarılar vardır. Gerçekten belirli kullanım senaryosuna bağlıdır.

Varsayılan olarak, Celery bir "çalışma" durumu kaydetmez.

Amacıyla Kereviz bir görev çalıştığını kaydetmesi için, ayarlamanız gerekir task_track_startediçin True. İşte bunu test eden basit bir görev:

@app.task(bind=True)
def test(self):
    print self.AsyncResult(self.request.id).state

Varsayılan değer olan ne zaman task_track_startedolur False, PENDINGgörev başlamış olsa bile durum gösterilir . Eğer ayarlarsanız task_track_startediçin True, o zaman devlet olacaktır STARTED.

Devlet PENDING"bilmiyorum" demektir.

Bir AsyncResultdevlet ile PENDINGdaha Kereviz görevin durumunu bilmiyor daha değil ortalama bir şey yapmıyor. Bunun birçok nedeni olabilir.

Bir kere, AsyncResultgeçersiz görev kimlikleri ile oluşturulabilir. Bu tür "görevler" Kereviz tarafından beklemede sayılacaktır:

>>> task.AsyncResult("invalid").status
'PENDING'

Tamam, yani kimse açıkça geçersiz kimlikleri beslemeyecek AsyncResult. Yeterince adil, ancak aynı zamanda AsyncResultbaşarılı bir şekilde yürütülen ancak Kerevizin unutulmuş bir görevi de dikkate alacak birPENDING etkiye sahiptir . Yine, bazı kullanım durumu senaryolarında bu bir sorun olabilir. Sorunun bir kısmı, Celery'in görevlerin sonuçlarını koruyacak şekilde nasıl yapılandırıldığına bağlıdır, çünkü bu, sonuçların arka ucundaki "mezar taşları" nın kullanılabilirliğine bağlıdır. ( "Mezar taşı" kayıt görevi nasıl bittiğini veri parçaları için Kereviz belgelerinde süreli kullanımıdır.) Kullanılması AsyncResultdurumunda hiç olmaz işi task_ignore_resultolduğunu True. Daha can sıkıcı bir sorun da, Kerevizin varsayılan olarak mezar taşlarının süresinin dolmasıdır. result_expiresayarı varsayılan olarak 24 saate ayarlanmıştır. Bu nedenle, bir görevi başlatırsanız ve kimliği uzun vadeli depolamaya kaydederseniz ve 24 saat sonra onunla bir oluşturursanız AsyncResult, durum olacaktır PENDING.

Tüm "gerçek görevler" PENDINGeyalette başlar. Bu nedenle PENDING, bir göreve başlamak, görevin istendiği ancak hiçbir zaman bundan daha ileriye gitmediği anlamına gelebilir (herhangi bir nedenle). Ya da görevin çalıştığı anlamına gelebilir ama Kereviz durumunu unuttu.

Ah! AsyncResultbenim için çalışmayacak. Başka ne yapabilirim?

Görevleri takip etmektense hedefleri takip etmeyi tercih ederim . Bazı görev bilgilerini saklıyorum ama bu, hedefleri takip etmekten gerçekten ikincil. Hedefler, Kereviz'den bağımsız olarak depoda saklanır. Bir talebin bir hesaplama gerçekleştirmesi gerektiğinde, ulaşılmış bir hedefe bağlı olduğunda, hedefe zaten ulaşılıp ulaşılmadığını kontrol eder, eğer öyleyse, bu önbelleğe alınmış hedefi kullanır, aksi takdirde hedefi etkileyecek görevi başlatır ve HTTP isteğini yapan istemci, bir sonuç için beklemesi gerektiğini belirten bir yanıt.

Yukarıdaki değişken isimleri ve köprüler Celery 4.x içindir. 3.x olarak karşılık gelen değişken ve köprüler şunlardır: CELERY_TRACK_STARTED, CELERY_IGNORE_RESULT, CELERY_TASK_RESULT_EXPIRES.

Her Tasknesnenin, nesneyi içeren bir .requestözelliği vardır AsyncRequest. Buna göre, aşağıdaki satır bir Görev durumunu verir task:

task.AsyncResult(task.request.id).state

Ayrıca özel durumlar oluşturabilir ve bunun değerini düşüren görev yürütmesini güncelleyebilirsiniz. Bu örnek, dokümanlardan alınmıştır:

@app.task(bind=True)
def upload_files(self, filenames):
    for i, file in enumerate(filenames):
        if not self.request.called_directly:
            self.update_state(state='PROGRESS',
                meta={'current': i, 'total': len(filenames)})

http://celery.readthedocs.org/en/latest/userguide/tasks.html#custom-states

Eski soru ama son zamanlarda bu problemle karşılaştım.

Task_id'yi almaya çalışıyorsanız, bunu şu şekilde yapabilirsiniz:

import celery
from celery_app import add
from celery import uuid

task_id = uuid()
result = add.apply_async((2, 2), task_id=task_id)

Artık task_id'nin tam olarak ne olduğunu biliyorsunuz ve artık AsyncResult'u almak için onu kullanabilirsiniz:

# grab the AsyncResult 
result = celery.result.AsyncResult(task_id)

# print the task id
print result.task_id
09dad9cf-c9fa-4aee-933f-ff54dae39bdf

# print the AsyncResult's status
print result.status
SUCCESS

# print the result returned 
print result.result
4

Bu API'yi kereviz SSS'den kullanın

result = app.AsyncResult(task_id)

Bu iyi çalışıyor.

2020'nin cevabı:

#### tasks.py
@celery.task()
def mytask(arg1):
    print(arg1)

#### blueprint.py
@bp.route("/args/arg1=<arg1>")
def sleeper(arg1):
    process = mytask.apply_async(args=(arg1,)) #mytask.delay(arg1)
    state = process.state
    return f"Thanks for your patience, your job {process.task_id} \
             is being processed. Status {state}"

Deneyin:

task.AsyncResult(task.request.id).state

bu, Kereviz Görevi durumunu sağlayacaktır. Kereviz Görevi zaten BAŞARISIZ durumundaysa, bir İstisna oluşturacaktır:

raised unexpected: KeyError('exc_type',)

basit görevler için izleme yapmak için http://flower.readthedocs.io/en/latest/screenshots.html ve http://policystat.github.io/jobtastic/ kullanabiliriz.

ve karmaşık görevler için, diğer birçok modülle ilgilenen bir görev söyleyin. Belirli bir görev birimindeki ilerlemeyi ve mesajı manuel olarak kaydetmenizi öneririz.

Yararlı bilgiler buldum

İşçileri teftiş eden Kereviz Projesi İşçileri Kılavuzu

Benim durumum için, Kereviz çalışıp çalışmadığını kontrol ediyorum.

inspect_workers = task.app.control.inspect()
if inspect_workers.registered() is None:
    state = 'FAILURE'
else:
    state = str(task.state) 

İhtiyaçlarınızı karşılamak için inspect ile oynayabilirsiniz.

• İlk olarak kereviz uygulamanızda ：

vi my_celery_apps / app1.py

app = Celery(worker_name)

• ve sonra, kereviz uygulama modülünüzden görev dosyasına gidin ， uygulamayı içe aktarın.

vi görevler / görev1.py

from my_celery_apps.app1 import app

app.AsyncResult(taskid)

try:
   if task.state.lower() != "success":
        return
except:
    """ do something """

Yukarıdakilerin yanı sıra Programlı yaklaşım Flower Task'ın kullanılması durumu kolayca görülebilir.

Celery Events kullanarak gerçek zamanlı izleme. Flower, Kereviz kümelerini izlemek ve yönetmek için web tabanlı bir araçtır.

1. Görev ilerlemesi ve geçmişi
2. Görev ayrıntılarını gösterme yeteneği (bağımsız değişkenler, başlangıç ​​zamanı, çalışma zamanı ve daha fazlası)
3. Grafikler ve istatistikler

Resmi Belge: Çiçek - Kereviz izleme aracı

Kurulum:

$ pip install flower

Kullanım:

http://localhost:5555

res = method.delay()
    
print(f"id={res.id}, state={res.state}, status={res.status} ")

print(res.get())