Jak wyodrębnić dane z pliku JSON

Mam bin szukający rozwiązania dla mojego pytania, ale nie znalazłem ani lepiej powiedział, że nie dostałem go z tym, co znalazłem. Porozmawiajmy więc o tym, o czym jest mój problem. Korzystam z oprogramowania Smart Home Control na Raspberry Pi i jak się dowiedziałem w ten weekend za pomocą pilota, mogę przechwycić dane z mojego czujnika temperatury zewnętrznej. Wyjście pilight-receive wygląda następująco:

{
        "message": {
                "id": 4095,
                "temperature": 409.5
        },
        "origin": "receiver",
        "protocol": "alecto_wsd17",
        "uuid": "0000-b8-27-eb-0f3db7",
        "repeats": 3
}
{
        "message": {
                "id": 1490,
                "temperature": 25.1,
                "humidity": 40.0,
                "battery": 1
        },
        "origin": "receiver",
        "protocol": "alecto_ws1700",
        "uuid": "0000-b8-27-eb-0f3db7",
        "repeats": 3
}
{
        "message": {
                "id": 2039,
                "temperature": 409.5
        },
        "origin": "receiver",
        "protocol": "alecto_wsd17",
        "uuid": "0000-b8-27-eb-0f3db7",
        "repeats": 4
}

Teraz moje pytanie do ciebie: jak do cholery mogę wyodrębnić temperaturę i wilgotność, z których identyfikator wynosi 1490. I jak poleciłbyś mi to sprawdzać często? Za pomocą zadania cron, które jest uruchamiane co 10 minut, tworzy dane wyjściowe polecenia pilight-receive, wyodrębnia dane wyjściowe i przekazuje je do interfejsu API Smart Home Control.

Ktoś ma pomysł - wielkie dzięki

Możesz użyć jqdo przetwarzania plików Json w powłoce.

Na przykład zapisałem twój przykładowy plik json jako, raul.jsona następnie uruchomiłem:

$ jq .message.temperature raul.json 
409.5
25.1
409.5
$ jq .message.humidity raul.json 
null
40
null

jq jest dostępny w pakiecie dla większości dystrybucji Linuksa.

Prawdopodobnie jest na to sposób jqsam w sobie, ale najprostszym sposobem na uzyskanie obu pożądanych wartości w jednym wierszu jest użycie xargs. Na przykład:

$ jq 'select(.message.id == 1490) | .message.temperature, .message.humidity' raul.json | xargs
25.1 40

lub, jeśli chcesz zapętlić każdą .message.idinstancję, możemy dodać .message.iddo wyniku i użyć, xargs -n 3ponieważ wiemy, że będą trzy pola (identyfikator, temperatura, wilgotność):

jq '.message.id, .message.temperature, .message.humidity' raul.json | xargs -n 3
4095 409.5 null
1490 25.1 40
2039 409.5 null

Następnie możesz przetworzyć dane wyjściowe za pomocą awk lub cokolwiek innego.

Wreszcie zarówno Python, jak i Perl mają doskonałe biblioteki do analizowania i manipulowania danymi JSON. Podobnie jak kilka innych języków, w tym php i java.

jqjest zdecydowanie najbardziej eleganckim rozwiązaniem. Z awktobą możesz pisać

awk -v id=1490 '
    $1 == "\"id\":" && $2 == id"," {matched = 1}
    $1 == "}," {matched = 0}
    matched && $1 ~ /temperature|humidity/ {sub(/,/,"", $2); print $2}
' file

Dla tych, którzy nie rozumieją zaawansowanego awktak dobrze, jak chcieliby (na przykład ludzie tacy jak ja) i nie mają jqwcześniej zainstalowanego systemu, łatwym rozwiązaniem byłoby połączenie kilku natywnych poleceń razem:

grep -A2 '"id": 1490,' stats.json | sed '/1490/d;s/"//g;s/,//;s/\s*//'

Jeśli próbujesz tylko uzyskać wartości, łatwiej jest po prostu użyć grepzamiast awklub sed:

grep -A2 '"id": 1490,' stats.json | grep -o "[0-9]*\.[0-9]*"

Wyjaśniając, wydaje mi się to najprostszym sposobem.

• grep -A2Chwyta linię szukasz w JSON wraz z następującymi 2 linie, które zawierają temperatury i wilgotności.
• Rura grep -opo prostu drukuje tylko cyfry oddzielone znakiem .(co nigdy nie nastąpi w pierwszym 1490wierszu, więc pozostały Ci dwie wartości - temperatura i wilgotność. Bardzo proste. jqMoim zdaniem nawet prostsze niż użycie .

Moim wybranym narzędziem do przetwarzania JSON w wierszu poleceń jest jq. Jednak jeśli nie masz zainstalowanego jq, możesz zrobić całkiem nieźle z Perlem:

# perl -MJSON -e '$/ = undef; my $data = <>; for my $hash (new JSON->incr_parse($data)) { my $msg = $hash->{message}; print "$msg->{temperature} $msg->{humidity}\n" if $msg->{id} == 1490 }' < data.json
25.1 40

Twój wynik to zestaw fragmentów JSON, a nie pełny JSON. Jeśli / raz zmienisz układ wyjściowy na integralny JSON, np. W ten sposób (zakładając, że twój wyjściowy jest w file.json):

echo "[ $(cat file.json | sed -E 's/^}$/},/; $d') }]"

wtedy łatwo jest osiągnąć to, co chcesz za pomocą jtcnarzędzia (dostępne na stronie : https://github.com/ldn-softdev/jtc ):

bash $ echo "[ $(cat file.json | sed -E 's/^}$/},/; $d') }]" | jtc -x "[id]:<1490>d [-1]" -y[temperature] -y[humidity] -l
"temperature": 25.1
"humidity": 40.0
bash $ 

w powyższym przykładzie upuść, -ljeśli nie chcesz drukowanych etykiet