APT paketlerini GitHub Actions iş akışında önbelleğe alma

C projem için aşağıdaki Github Eylemleri iş akışını kullanıyorum. İş akışı ~ 40 saniye içinde biter, ancak valgrindpaketin ve bağımlılıklarının yüklenmesi ile bu sürenin yarısından fazlası harcanır .

Önbelleğe almanın iş akışını hızlandırmama yardımcı olabileceğine inanıyorum. Birkaç saniye daha beklemiyorum, ama bu sadece GitHub'ın kaynaklarının anlamsız bir israfı gibi görünüyor.

name: C Workflow

on: [push, pull_request]

jobs:
  build:
    runs-on: ubuntu-latest

    steps:
    - uses: actions/checkout@v1

    - name: make
      run: make

    - name: valgrind
      run: |
        sudo apt-get install -y valgrind
        valgrind -v --leak-check=full --show-leak-kinds=all ./bin

Running sudo apt-get install -y valgrind, aşağıdaki paketleri yükler:

• gdb
• gdbserver
• libbabeltrace1
• libc6-dbg
• libipt1
• valgrind

Eylemler belirli bir dizinin önbelleğe almayı desteklediğini biliyorum (ve bu konuda zaten birkaç cevaplanmış SO sorusu ve makalesi var), ancak apt tarafından yüklenen tüm farklı paketlerin nerede biteceğinden emin değilim. Paketlerin yüklenmesinden etkilenen tek dizin olmadığını varsayıyorum /bin/ya /usr/bin/da değil.

Yüklü sistem paketlerini gelecekteki iş akışı çalışmaları için önbelleğe almanın zarif bir yolu var mı?

Bu cevabın amacı, github eylemleriyle önbelleğe almanın nasıl yapılabileceğini göstermektir. Her zaman önbelleğin nasıl valgrindgösterileceğini göstermek değil, aynı zamanda her şeyin önbelleğe alınamayacağını / önlenmemesi gerektiğini ve bağımlılığın yeniden yüklenmesine karşı bir önbelleğin önbelleğe alınması ve geri yüklenmesinin de dikkate alınması gerektiğini göz önünde bulundurmak gerekir.

Bunu yapmak için actions/cacheeylemden yararlanacaksınız.

Bir adım olarak ekleyin (valgrind'i kullanmadan önce):

- name: Cache valgrind
  uses: actions/cache@v1.0.3
  id: cache-valgrind
  with:
      path: "~/valgrind"
      key: ${{secrets.VALGRIND_VERSION}}

Bir sonraki adım, varsa önbelleğe alınmış sürümü yüklemeye veya depolardan yüklemeye çalışmalıdır:

- name: Install valgrind
  env:
    CACHE_HIT: ${{steps.cache-valgrind.outputs.cache-hit}}
    VALGRIND_VERSION: ${{secrets.VALGRIND_VERSION}}
  run: |
      if [[ "$CACHE_HIT" == 'true' ]]; then
        sudo cp --verbose --force --recursive ~/valgrind/* /
      else
        sudo apt-get install --yes valgrind="$VALGRIND_VERSION"
        mkdir -p ~/valgrind
        sudo dpkg -L valgrind | while IFS= read -r f; do if test -f $f; then echo $f; fi; done | xargs cp --parents --target-directory ~/valgrind/
      fi

açıklama

VALGRIND_VERSIONSırrı çıktı olarak ayarlayın :

apt-cache policy valgrind | grep -oP '(?<=Candidate:\s)(.+)'

bu, yeni bir sürüm yayınlandığında yalnızca sırrın değerini değiştirerek önbelleği geçersiz kılmanızı sağlar.

dpkg -L valgrindkullanılırken yüklenen tüm dosyaları listelemek için kullanılır sudo apt-get install valgrind.

Şimdi bu komutla yapabileceğimiz, tüm bağımlılıkları önbellek klasörünüze kopyalamaktır:

dpkg -L valgrind | while IFS= read -r f; do if test -f $f; then echo $f; fi; done | xargs cp --parents --target-directory ~/valgrind/

ayrıca

Tüm bileşenlerini kopyalamaya ek olarak valgrind, bağımlılıkları da kopyalamak gerekebilir ( libcbu durumda olduğu gibi ), ancak bağımlılık zinciri oradan büyüdüğü için bu yol boyunca devam etmenizi önermiyorum. Kesin olmak gerekirse, nihayet valgrind'in çalışmasına uygun bir ortama sahip olmak için kopyalamak için gereken bağımlılıklar aşağıdaki gibidir:

• libc6
• libgcc1
• gcc-8-baz

Tüm bu bağımlılıkları kopyalamak için yukarıdakiyle aynı sözdizimini kullanabilirsiniz:

for dep in libc6 libgcc1 gcc-8-base; do
    dpkg -L $dep | while IFS= read -r f; do if test -f $f; then echo $f; fi; done | xargs cp --parents --target-directory ~/valgrind/
done

valgrindİlk etapta kurmak için gereken her şey basitçe çalıştırmak olduğunda tüm bu işler gerçekten sorun çıkarmaya değer sudo apt-get install valgrindmi? Amacınız derleme işlemini hızlandırmaksa, önbelleği geri yüklemek (indirmek ve çıkarmak) için gereken süreyi de dikkate almanız gerekir.valgrind .

Ve son olarak önbelleği depolandığı varsayılarak geri yüklemek için şu /tmp/valgrindkomutu kullanabilirsiniz:

cp --force --recursive /tmp/valgrind/* /

Temel olarak önbellekten tüm dosyaları kök bölüme kopyalar.

Yukarıdaki sürece ek olarak, "önbelleğe alma valgrind" bir örnek yüklemek ve kaynağından derleyerek var. Önbellek şimdi yaklaşık 63MB (sıkıştırılmış) boyutundadır ve hala libchangi tür yenilgileri amaçlamak için ayrı olarak yüklenmesi gerekir .

Referanslar:

• https://askubuntu.com/a/408785
• /unix/83593/copy-specific-file-type-keeping-the-folder-structure

valgrindÖnceden yüklenmiş olarak bir liman işçisi görüntüsü oluşturabilir ve iş akışınızı bunun üzerinde çalıştırabilirsiniz.

Şunun Dockerfilegibi bir şeyle bir oluşturun :

FROM ubuntu

RUN apt-get install -y valgrind

Oluşturun ve dockerhub'a itin:

docker build -t natiiix/valgrind .
docker push natiiix/valgrind

Ardından iş akışınız olarak aşağıdakine benzer bir şey kullanın:

name: C Workflow

on: [push, pull_request]

jobs:
  build:
    container: natiiix/valgrind

    steps:
    - uses: actions/checkout@v1

    - name: make
      run: make

    - name: valgrind
      run: valgrind -v --leak-check=full --show-leak-kinds=all ./bin

Tamamen denenmemiş, ama fikri anladınız.