Analizować XML, aby uzyskać wartość węzła w skrypcie bash?

19

Chciałbym wiedzieć, w jaki sposób mogę uzyskać wartość węzła za pomocą następujących ścieżek: 

config/global/resources/default_setup/connection/host
config/global/resources/default_setup/connection/username
config/global/resources/default_setup/connection/password
config/global/resources/default_setup/connection/dbname

z następującego pliku XML:

<?xml version="1.0"?>
<config>
    <global>
        <install>
            <date><![CDATA[Tue, 11 Dec 2012 12:31:25 +0000]]></date>
        </install>
        <crypt>
            <key><![CDATA[70e75d7969b900b696785f2f81ecb430]]></key>
        </crypt>
        <disable_local_modules>false</disable_local_modules>
        <resources>
            <db>
                <table_prefix><![CDATA[]]></table_prefix>
            </db>
            <default_setup>
                <connection>
                    <host><![CDATA[localhost]]></host>
                    <username><![CDATA[root]]></username>
                    <password><![CDATA[pass123]]></password>
                    <dbname><![CDATA[testdb]]></dbname>
                    <initStatements><![CDATA[SET NAMES utf8]]></initStatements>
                    <model><![CDATA[mysql4]]></model>
                    <type><![CDATA[pdo_mysql]]></type>
                    <pdoType><![CDATA[]]></pdoType>
                    <active>1</active>
                </connection>
            </default_setup>
        </resources>
        <session_save><![CDATA[files]]></session_save>
    </global>
    <admin>
        <routers>
            <adminhtml>
                <args>
                    <frontName><![CDATA[admin]]></frontName>
                </args>
            </adminhtml>
        </routers>
    </admin>
</config>

Chcę też przypisać tę wartość zmiennej do dalszego wykorzystania. Daj mi znać swój pomysł.

command-line  text-processing  xml  xmllint 
— MagePsycho
źródło
7
Nigdy nie używaj bash do analizowania strukturalnych drzew arbitralnych danych. Użyj prawdziwego parsera XML. Polecam XMLStarlet .
— Chris Down,
— Ciro Santilli 7 改造 中心 法轮功 六四 事件

Odpowiedzi:

19

Za pomocą bashi xmllint(zgodnie z tagami):

xmllint --version  #  xmllint: using libxml version 20703

# Note: Newer versions of libxml / xmllint have a --xpath option which 
# makes it possible to use xpath expressions directly as arguments. 
# --xpath also enables precise output in contrast to the --shell & sed approaches below.
#xmllint --help 2>&1 | grep -i 'xpath'

{
# the given XML is in file.xml
host="$(echo "cat /config/global/resources/default_setup/connection/host/text()" | xmllint --nocdata --shell file.xml | sed '1d;$d')"
username="$(echo "cat /config/global/resources/default_setup/connection/username/text()" | xmllint --nocdata --shell file.xml | sed '1d;$d')"
password="$(echo "cat /config/global/resources/default_setup/connection/password/text()" | xmllint --nocdata --shell file.xml | sed '1d;$d')"
dbname="$(echo "cat /config/global/resources/default_setup/connection/dbname/text()" | xmllint --nocdata --shell file.xml | sed '1d;$d')"
printf '%s\n' "host: $host" "username: $username" "password: $password" "dbname: $dbname"
}

# output
# host: localhost
# username: root
# password: pass123
# dbname: testdb

W przypadku gdy istnieje tylko ciąg XML i należy unikać korzystania z pliku tymczasowego, deskryptory plików są najlepszym rozwiązaniem xmllint(który podano tutaj /dev/fd/3jako argument pliku):

set +H
{
xmlstr='<?xml version="1.0"?>
<config>
    <global>
        <install>
            <date><![CDATA[Tue, 11 Dec 2012 12:31:25 +0000]]></date>
        </install>
        <crypt>
            <key><![CDATA[70e75d7969b900b696785f2f81ecb430]]></key>
        </crypt>
        <disable_local_modules>false</disable_local_modules>
        <resources>
            <db>
                <table_prefix><![CDATA[]]></table_prefix>
            </db>
            <default_setup>
                <connection>
                    <host><![CDATA[localhost]]></host>
                    <username><![CDATA[root]]></username>
                    <password><![CDATA[pass123]]></password>
                    <dbname><![CDATA[testdb]]></dbname>
                    <initStatements><![CDATA[SET NAMES utf8]]></initStatements>
                    <model><![CDATA[mysql4]]></model>
                    <type><![CDATA[pdo_mysql]]></type>
                    <pdoType><![CDATA[]]></pdoType>
                    <active>1</active>
                </connection>
            </default_setup>
        </resources>
        <session_save><![CDATA[files]]></session_save>
    </global>
    <admin>
        <routers>
            <adminhtml>
                <args>
                    <frontName><![CDATA[admin]]></frontName>
                </args>
            </adminhtml>
        </routers>
    </admin>
</config>
'

# exec issue
#exec 3<&- 3<<<"$xmlstr"
#exec 3<&- 3< <(printf '%s' "$xmlstr")
exec 3<&- 3<<EOF
$(printf '%s' "$xmlstr")
EOF

{ read -r host; read -r username; read -r password; read -r dbname; } < <(
       echo "cat /config/global/resources/default_setup/connection/*[self::host or self::username or self::password or self::dbname]/text()" | 
          xmllint --nocdata --shell /dev/fd/3 | 
          sed -e '1d;$d' -e '/^ *--* *$/d'
       )

printf '%s\n' "host: $host" "username: $username" "password: $password" "dbname: $dbname"

exec 3<&-
}
set -H


# output
# host: localhost
# username: root
# password: pass123
# dbname: testdb
— paoul
źródło
1
Strona podręcznika
— Jason Pyeron
6

Chociaż jest już wiele odpowiedzi, włączę się xml2.

$ xml2 < test.xml
/config/global/install/date=Tue, 11 Dec 2012 12:31:25 +0000
/config/global/crypt/key=70e75d7969b900b696785f2f81ecb430
/config/global/disable_local_modules=false
/config/global/resources/db/table_prefix
/config/global/resources/default_setup/connection/host=localhost
/config/global/resources/default_setup/connection/username=root
/config/global/resources/default_setup/connection/password=pass123
/config/global/resources/default_setup/connection/dbname=testdb
/config/global/resources/default_setup/connection/initStatements=SET NAMES utf8
/config/global/resources/default_setup/connection/model=mysql4
/config/global/resources/default_setup/connection/type=pdo_mysql
/config/global/resources/default_setup/connection/pdoType
/config/global/resources/default_setup/connection/active=1
/config/global/session_save=files
/config/admin/routers/adminhtml/args/frontName=admin

Przy odrobinie magii możesz nawet ustawić je bezpośrednio jako zmienne:

$ eval $(xml2 < test.xml | tr '/, ' '___' | grep =)
$ echo $_config_global_resources_default_setup_connection_host          
localhost
— bahamat
źródło
3

Następujące działania działają po uruchomieniu danych testowych:

{ read -r host; read -r username; read -r password; read -r dbname; } \
  < <(xmlstarlet sel -t -m /config/global/resources/default_setup/connection \
      -v ./host -n \
      -v ./username -n \
      -v ./password -n \
      -v ./dbname -n)

Stawia to zawartość do zmiennych host, username, passwordi dbname.

— Charles Duffy
źródło
xmlstarlet: nie znaleziono polecenia, więc to polecenie nie jest dla mnie przydatne :(
— MagePsycho
@MagePsycho bashnie ma wbudowanej obsługi parsowania XML. Musisz mieć takie narzędzie (xmlstarlet, xsltproc, nowoczesny Python itp.), Albo nie możesz poprawnie parsować XML.
— Charles Duffy
@CharlesDuffy czy istnieje sposób, aby uzyskać wartość, używając wzorca wyrażenia regularnego, czy też?
— MagePsycho
5
@MagePsycho możesz po prostu zainstalować xmlstarlet. W każdym razie nigdy nie należy używać wyrażeń regularnych do analizowania kodu HTML (X) .
— terdon
1
@MagePsycho miałem zamieścić ten sam link, który już zrobił terdon. W skrócie: Nie.
— Charles Duffy
3

Czysta bashfunkcja, tylko na niefortunny przypadek, gdy nie możesz zainstalować niczego odpowiedniego. To może i prawdopodobnie zawiedzie w przypadku bardziej skomplikowanego XML:

function xmlpath()
{
  local expr="${1//\// }"
  local path=()
  local chunk tag data

  while IFS='' read -r -d '<' chunk; do
    IFS='>' read -r tag data <<< "$chunk"

    case "$tag" in
      '?'*) ;;
      '!–-'*) ;;
      '![CDATA['*) data="${tag:8:${#tag}-10}" ;;
      ?*'/') ;;
      '/'?*) unset path[${#path[@]}-1] ;;
      ?*) path+=("$tag") ;;
    esac

    [[ "${path[@]}" == "$expr" ]] && echo "$data"
  done
}

Stosowanie:

bash-4.1$ xmlpath 'config/global/resources/default_setup/connection/host' < MagePsycho.xml
localhost

Znane problemy:

  • powolny
  • wyszukuje tylko według nazw znaczników
  • brak dekodowania encji znakowych
— człowiek w pracy
źródło
2

Korzystanie z xmllint i opcji --xpath jest bardzo łatwe. Możesz po prostu to zrobić:

XML_FILE=/path/to/file.xml

HOST=$(xmllint --xpath 'string(/config/global/resources/default_setup/connection/host)' $XML_FILE
USERNAME=$(xmllint --xpath 'string(/config/global/resources/default_setup/connection/username)' $XML_FILE
PASSWORD=$(xmllint --xpath 'string(/config/global/resources/default_setup/connection/password)' $XML_FILE 
DBNAME=$(xmllint --xpath 'string(/config/global/resources/default_setup/connection/dbname)' $XML_FILE

Jeśli potrzebujesz dostać się do atrybutu elementu, to także łatwe przy użyciu XPath. Wyobraź sobie, że masz plik:

<?xml version="1.0" encoding="UTF-8" standalone="yes"?>
<addon id="screensaver.turnoff"
       name="Turn Off"
       version="0.10.0"
       provider-name="Dag Wieërs">
  ..snip..
</addon>

Potrzebne instrukcje powłoki to:

VERSION=$(xmllint --xpath 'string(/addon/@version)' $ADDON_XML)
AUTHOR=$(xmllint --xpath 'string(/addon/@provider-name)' $ADDON_XML)
— Dag Wieers
źródło
0

Możesz skorzystać z kodowania interfejsu wiersza poleceń php w skryptach bash, aby obsłużyć kilka złożonych skryptów, które faktycznie obejmują wiele wierszy kodowania. Najpierw spróbuj wykonać rozwiązanie za pomocą skryptów PHP, a następnie przekaż parametry za pomocą trybu CLI. W ten sposób można uzyskać kontrolę nad doskonałymi zastosowaniami parserów XML.

Środowisko wydaje się, że możesz używać PHP w trybie klienta poprzez dostęp ssh / shell.

php -f yourxmlparser.php

Teraz rób wszystkie rzeczy w swoim pliku php. Skorzystaj z parametrów wiersza poleceń, które można pobrać.

Możesz nawet przypisać te zwracane wartości do środowiska Shell, aby kontynuować resztę skryptów powłoki.

Innym sposobem jest użycie opcji | grep w celu dopasowania wymaganej wartości do pliku xml, jeśli jesteś pewien struktury pliku xml, która nie zmienia się z czasem.

— Bimal Poudel
źródło
0

Ten komentarz używa tylko poleceń i metod sh / bash! /test.xml to plik typu XML na pierwsze pytanie ...

#!/bin/sh

cat /test.xml | while read line;do
[ "$(echo "$line" | grep "<host>")" ]&& echo "host: $(echo $line |  cut -f3 -d'[' | cut -f1 -d']')"
[ "$(echo "$line" | grep "<username>")" ]&& echo "username: $(echo $line |  cut -f3 -d'[' | cut -f1 -d']')"
[ "$(echo "$line" | grep "<password>")" ]&& echo "password: $(echo $line |  cut -f3 -d'[' | cut -f1 -d']')"
[ "$(echo "$line" | grep "<dbname")" ]&& echo "dbname: $(echo $line |  cut -f3 -d'[' | cut -f1 -d']')"
done

wynik:

host: localhost
username: root
password: pass123
dbname: testdb

jeśli chcesz zapisać te wartości do pliku, użyj tej metody:

#!/bin/sh

cat /test.xml | while read line;do
[ "$(echo "$line" | grep "<host>")" ]&& echo "$line" |  cut -f3 -d'[' | cut -f1 -d']' > /config/global/resources/default_setup/connection/host
[ "$(echo "$line" | grep "<username>")" ]&& echo "$line" |  cut -f3 -d'[' | cut -f1 -d']' > /config/global/resources/default_setup/connection/username
[ "$(echo "$line" | grep "<password>")" ]&& echo "$line" |  cut -f3 -d'[' | cut -f1 -d']' > /config/global/resources/default_setup/connection/password
[ "$(echo "$line" | grep "<dbname")" ]&& echo "$line" |  cut -f3 -d'[' | cut -f1 -d']' > /config/global/resources/default_setup/connection/dbname
done

ta metoda nadpisze lokalne pliki używane tylko do uzyskania wartości (dane zostaną utracone z plików wyjściowych)

— KuLuSz
źródło
Korzystając z naszej strony potwierdzasz, że przeczytałeś(-aś) i rozumiesz nasze zasady używania plików cookie i zasady ochrony prywatności.
Licensed under cc by-sa 3.0 with attribution required.