URL kodlamasını çözmek istiyorum, bunu yapmak için herhangi bir yerleşik araç var mı veya bunu sedyapacak bir kod verebilecek biri var mı?

Unix.stackexchange.com ve internette biraz arama yaptım ama URL kodlamasını çözmek için herhangi bir komut satırı aracı bulamadım.

Yapmak istediğim şey sadece bir txtdosyayı düzenlemek.

• %21 olur !
• %23 olur #
• %24 olur $
• %26 olur &
• %27 olur '
• %28 olur (
• %29 olur )

Ve bunun gibi.

Bu Python'u ne istersen yapan bir gömlek buldu:

$ alias urldecode='python -c "import sys, urllib as ul; \
    print ul.unquote_plus(sys.argv[1])"'

$ alias urlencode='python -c "import sys, urllib as ul; \
    print ul.quote_plus(sys.argv[1])"'

Örnek

$ urldecode 'q+werty%3D%2F%3B'
q werty=/;

$ urlencode 'q werty=/;'
q+werty%3D%2F%3B

Referanslar

• Bir komut satırından urlencode ve urldecode

sed

Aşağıdaki komut satırını deneyin:

$ sed 's@+@ @g;s@%@\\x@g' file | xargs -0 printf "%b"

veya aşağıdaki alternatifi kullanarak echo -e:

$ sed -e's/%\([0-9A-F][0-9A-F]\)/\\\\\x\1/g' file | xargs echo -e

^{Not: Yukarıdaki sözdizimi +boşluklara dönüşmeyebilir ve tüm yeni satırları yiyebilir.}

Bunu takma ad olarak tanımlayabilir ve kabuk rc dosyalarınıza ekleyebilirsiniz :

$ alias urldecode='sed "s@+@ @g;s@%@\\\\x@g" | xargs -0 printf "%b"'

Sonra her ihtiyacın olduğunda, sadece git:

$ echo "http%3A%2F%2Fwww" | urldecode
http://www

darbe

Komut dosyası yazarken aşağıdaki sözdizimini kullanabilirsiniz:

input="http%3A%2F%2Fwww"
decoded=$(printf '%b' "${input//%/\\x}")

^{Ancak yukarıdaki sözdizimi pluses ( +) işlevini doğru işlemez , bu nedenle onları boşluklarla değiştirmelisiniz sed.}

Aşağıdakileri urlencode()ve urldecode()işlevleri de kullanabilirsiniz :

urlencode() {
    # urlencode <string>
    local length="${#1}"
    for (( i = 0; i < length; i++ )); do
        local c="${1:i:1}"
        case $c in
            [a-zA-Z0-9.~_-]) printf "$c" ;;
            *) printf '%%%02X' "'$c" ;;
        esac
    done
}

urldecode() {
    # urldecode <string>

    local url_encoded="${1//+/ }"
    printf '%b' "${url_encoded//%/\\x}"
}

Yukarıdaki urldecode()verilerin verilerin ters eğik çizgi içermediğini varsaydığını unutmayın .

Burada benzer Joel's sürüm bulduğu: https://github.com/sixarm/urldecode.sh

bash + xxd

xxdAracı ile Bash işlevi :

urlencode() {
  local length="${#1}"
  for (( i = 0; i < length; i++ )); do
    local c="${1:i:1}"
    case $c in
      [a-zA-Z0-9.~_-]) printf "$c" ;;
    *) printf "$c" | xxd -p -c1 | while read x;do printf "%%%s" "$x";done
  esac
done
}

Bulundu cdown en özü dosyası ayrıca, stackoverflow .

PHP

PHP kullanarak aşağıdaki komutu deneyebilirsiniz:

$ echo oil+and+gas | php -r 'echo urldecode(fgets(STDIN));' // Or: php://stdin
oil and gas

ya da sadece:

php -r 'echo urldecode("oil+and+gas");'

-RÇoklu hat girişi için kullanın .

Perl

Perl'de kullanabilirsiniz URI::Escape.

decoded_url=$(perl -MURI::Escape -e 'print uri_unescape($ARGV[0])' "$encoded_url")

Veya bir dosyayı işlemek için:

perl -i -MURI::Escape -e 'print uri_unescape($ARGV[0])' file

awk

Anon çözümünü deneyin :

awk -niord '{printf RT?$0chr("0x"substr(RT,2)):$0}' RS=%..

^{Not: Parametre -nGNU'ya özgüdür awk.}

Bakınız: Metnin kodunu değiştirmek için awk printf kullanımı .

dosya adlarını çözme

URL kodlamasını dosya adlarından kaldırmanız gerekirse deurlname, renameutils(örneğin deurlname *.*) aracını kullanın .

Ayrıca bakınız:

• Toplu olarak indirirken uri dosya adlarının kodunu çözebilir miyim?
• URI kodlaması dosya adlarından nasıl kaldırılır?

İlgili:

• URL ile kodlanmış dizenin kabuktaki kodu nasıl çözülür? SO'da
• Komut satırında yüzde olarak kodlanmış dizeleri nasıl kodlayabilir ve kodunu çözebilirim? şirketinde Ubuntu

Python standart kütüphanesinde bunun için yerleşik bir işlev vardır. Python 2'de öyle urllib.unquote.

decoded_url=$(python2 -c 'import sys, urllib; print urllib.unquote(sys.argv[1])' "$encoded_url")

Veya bir dosyayı işlemek için:

python2 -c 'import sys, urllib; print urllib.unquote(sys.stdin.read())' <file >file.new &&
mv -f file.new file

Python 3'te öyle urllib.parse.unquote.

decoded_url=$(python3 -c 'import sys, urllib.parse; print(urllib.parse.unquote(sys.argv[1]))' "$encoded_url")

Veya bir dosyayı işlemek için:

python3 -c 'import sys, urllib; print(urllib.parse.unquote(sys.stdin.read()))' <file >file.new &&
mv -f file.new file

Perl'de kullanabilirsiniz URI::Escape.

decoded_url=$(perl -MURI::Escape -e 'print uri_unescape($ARGV[0])' "$encoded_url")

Veya bir dosyayı işlemek için:

perl -i -MURI::Escape -e 'print uri_unescape($ARGV[0])' file

POSIX taşınabilir araçlarına bağlı kalmak istiyorsanız, bu çok garip çünkü tek ciddi aday onaltılık sayıları ayrıştırmayan awk. BusyBox dahil, yaygın awk uygulamalarına sahip örnekler için metni urldecode etmek için awk printf kullanma bölümüne bakın .

Basit fikirli bir sedkomut kullanmak istiyorsanız , aşağıdakileri kullanın:

sed -e 's/%21/!/g' -e 's/%23/#/g' -e 's/%24/$/g' -e 's/%26/\&/g' -e "s/%27/'/g" -e 's/%28/(/g' -e 's/%29/)/g'

Ancak şöyle bir komut dosyası oluşturmak daha uygundur sedscript:

s/%21/!/g
s/%23/#/g
s/%24/$/g
s/%26/\&/g
s/%27/'/g
s/%28/(/g
s/%29/)/g

Sonra sed -f sedscript < old > newistediğiniz gibi çıkacak olan çalıştırın .

Kolaylıkla, komut urlencodedoğrudan kullanılabilir gridsite-clientspaketinden yüklenebilir (tarafından sudo apt-get install gridsite-clientsUbuntu / Debian sisteminde).

ADI

urlencode - dizeleri URL kodlu biçime dönüştürür

ÖZET

urlencode [-m|-d] string [string ...]

AÇIKLAMA

urlencode dizeleri RFC 1738'e göre kodlar.

Başka bir deyişle, karakterler A- Z a- z 0- 9 . _ve -değiştirilmemişlerden geçirilir, ancak diğer tüm karakterler% HH olarak temsil edilir, burada HH iki basamaklı büyük harf onaltılık ASCII gösterimidir. Örneğin, URL http://www.gridpp.ac.uk/olurhttp%3A%2F%2Fwww.gridpp.ac.uk%2F

urlencodeHer karakteri komut satırında verilen tüm dizelerde dönüştürür. Birden çok dize verilirse, dönüştürme işleminden önce boşluk bırakarak birleştirilirler.

SEÇENEKLER

-m
Tam dönüşüm yerine, GridSite "az URL 0-9" olan hafif URL kodlaması yapar. = - _ @ ve / değiştirilmemiş olarak geçirilir. Bu, biraz daha okunabilir insan dizileriyle sonuçlanır, ancak uygulama herhangi bir eğik çizginin gösterdiği dizinleri oluşturmak veya simüle etmek için hazırlanmalıdır.
-d
RFC 1738'e göre kodlama yerine URL kod çözme işlemi yapın.% HH ve% hh dizeleri dönüştürülür ve diğer karakterler +uzaya dönüştürülen istisna dışında değiştirilmemiş şekilde geçirilir .

Kod çözme URL'si örneği:

$ urlencode -d "http%3a%2f%2funix.stackexchange.com%2f"
http://unix.stackexchange.com/

$ urlencode -d "Example: %21, %22, . . . , %29 etc"
Example: !, ", . . . , ) etc

Perl bir liner:

$ perl -pe 's/\%(\w\w)/chr hex $1/ge'

Örnek:

$ echo '%21%22' |  perl -pe 's/\%(\w\w)/chr hex $1/ge'
!"

GNU awk

#!/usr/bin/awk -fn
@include "ord"
BEGIN {
  RS = "%.."
}
{
  printf RT ? $0 chr("0x" substr(RT, 2)) : $0
}

Veya

#!/bin/sh
awk -niord '{printf RT?$0chr("0x"substr(RT,2)):$0}' RS=%..

Yüzde kodlanmış dosya URL'sini bash içindeki yerel dosyaya dönüştür

Bu konudaki en iyi cevap hakkında yorum yapamam , bu yüzden işte benim.

Şahsen bu takma adları URL kodlama ve kod çözme için kullanırım:

alias urlencode='python -c "import urllib, sys; print urllib.quote(  sys.argv[1] if len(sys.argv) > 1 else sys.stdin.read()[0:-1])"'

alias urldecode='python -c "import urllib, sys; print urllib.unquote(sys.argv[1] if len(sys.argv) > 1 else sys.stdin.read()[0:-1])"'

Her iki komut da verileri dönüştürmenize, komut satırı argümanı olarak geçirmenize veya standart girdiden okumanıza olanak tanır , çünkü her iki tek gömlek komut satırı argümanları olup olmadığını kontrol eder (hatta boş olanları) ve bunları işler veya yalnızca standart girişi okur.

2017-05-23 güncellemesi (eğik çizgi kodlaması)

@ Bevor'un yorumuna cevap olarak.

Eğer eğik çizgiyi de kodlamanız gerekiyorsa, sadece teklif fonksiyonuna boş bir ikinci argüman ekleyin, o zaman eğik çizgi de kodlanacaktır.

Yani, son olarak urlencode takma içinde bash şuna benzer:

alias urlencode='python -c "import urllib, sys; print urllib.quote(sys.argv[1] if len(sys.argv) > 1 else sys.stdin.read()[0:-1], \"\")"'

Örnek

$ urlencode "Проба пера/Pen test"
%D0%9F%D1%80%D0%BE%D0%B1%D0%B0%20%D0%BF%D0%B5%D1%80%D0%B0%2FPen%20test

$ echo "Проба пера/Pen test" | urlencode
%D0%9F%D1%80%D0%BE%D0%B1%D0%B0%20%D0%BF%D0%B5%D1%80%D0%B0%2FPen%20test

$ urldecode %D0%9F%D1%80%D0%BE%D0%B1%D0%B0%20%D0%BF%D0%B5%D1%80%D0%B0%2FPen%20test
Проба пера/Pen test

$ echo "%D0%9F%D1%80%D0%BE%D0%B1%D0%B0%20%D0%BF%D0%B5%D1%80%D0%B0%2FPen%20test" | urldecode
Проба пера/Pen test

$ urlencode "Проба пера/Pen test" | urldecode
Проба пера/Pen test

$ echo "Проба пера/Pen test" | urlencode | urldecode
Проба пера/Pen test

Ve başka bir Perl yaklaşımı:

#!/usr/bin/env perl
use URI::Encode;
my $uri     = URI::Encode->new( { encode_reserved => 0 } );
while (<>) {

    print $uri->decode($_)
}

URI::EncodeModülü kurmanız gerekecek . Debian'ımda basitçe koşabilirim

sudo apt-get install liburi-encode-perl

Sonra yukarıdaki betiği içeren bir test dosyasına koştum:

http://foo%21asd%23asd%24%26asd%27asd%28asd%29

Sonuç (betiği farklı kaydetmiştim foo.pl):

$ ./foo.pl
http://foo!asd#asd$&asd'asd(asd)

(Çoğunlukla Posix) kabuğundaki bir cevap:

$ input='%21%22'
$ printf "`printf "%s\n" "$input" | sed -e 's/+/ /g' -e 's/%\(..\)/\\\\x\1/g'`"
!"

Açıklama:

• -e 's/+/ /gher birini +uzayda dönüştürür (url kodlama normunda tanımlandığı gibi)
• -e 's/%\(..\)/\\\\x\1/g'Her bir dönüşüm %XXde \\xXX. \Kurallardan birinin alıntılardan birinin kaldırılacağına dikkat edin .
• İçteki printf, girişi baştan sona geçirmek için oradadır. Başka bir mekanizma ile değiştirebiliriz
• Dış baskı \\xXXdizileri ve görüntüleme sonucunu yorumlar.

Düzenle:

Beri %hep URL'lerindeki yorumlanmıştır gerektiğini, cevabı basitleştirmek mümkündür. Ek olarak xargs, geri tırnak yerine kullanmak daha temiz olduğunu düşünüyorum (@josch sayesinde).

$ input='%21%22+%25'
$ printf "%s\n" "$input" | sed -e 's/+/ /g; s/%/\\x/g' | xargs -0 printf
!" %

Ne yazık ki, (@josch'un farkettiği gibi) bu çözümlerin hiçbiri Posix uyumlu \xdeğildir, çünkü kaçış dizisi Posix'te tanımlanmamıştır.

Kabuk okunur:

$ x='a%20%25%e3%81%82';printf "${x//\%/\\x}"
a %あ

Ekle --veya %bseçenekler olarak tedavi altına gelen bir çizgi ile başlayan argümanlar önlemek için.

Zsh olarak ${x//%/a}ekler asonuna ancak ${x//\%/a}yerini %ile a.

İşte daha önce yazdığım başka bir betiğin ilgili bitleri (sadece youtube.com indirme betiğimden utanmadan çaldığım ) . sedÇalışan bir urldecode oluşturmak için ve kabuk kullanır .

set \! \" \# \$ \% \& \' \( \) \* \ \+ \, \/ \: \; \= \? \@ \[ \]
for c do set "$@" "'$c" "$c"; shift; done
curl -s "$url" | sed 's/\\u0026/\&/g;'"$(
    printf 's/%%%X/\\%s/g;' "$@"
)"

Yemin ederim kapsamlı - ve aslında şüpheliyim - ama youtube'u yeterince idare etti.

İşte tam olarak bunu yapmak için bir BASH işlevidir:

function urldecode() {
        echo -ne $(echo -n "$1" | sed -E "s/%/\\\\x/g")
}

Yakut kullanan başka bir çözüm (kabul edilen python cevabı benim için işe yaramadı)

alias urldecode='ruby -e "require \"cgi\"; puts CGI.unescape(ARGV[0])"'
alias urlencode='ruby -e "require \"cgi\"; puts CGI.escape(ARGV[0])"'

Örnek

$ urldecode 'q+werty%3D%2F%3B'
q werty=/;

$ urlencode 'q werty=/;'
q+werty%3D%2F%3B