Jak wybrać najszybsze dublowanie z wiersza poleceń?

Chcę zaktualizować mój sources.listplik najszybszym serwerem z wiersza polecenia w nowej instalacji serwera Ubuntu. Wiem, że jest to banalnie łatwe z GUI, ale wydaje się, że nie ma prostego sposobu, aby to zrobić z wiersza poleceń?

Pakket netselect-apt

    dapper (net): Wybierz najszybsze lustro Debiana z netselect 
    [wszechświat]
    0.3.ds1-5: wszystkie
    hardy (net): Wybierz najszybsze lustro Debiana z netselect 
    [wszechświat]
    0.3.ds1-11: wszystkie

Pakket apt-spy

    dapper (admin): zapisuje plik sources.list na podstawie testów przepustowości 
    [wszechświat]
    3.1-14: amd64 i386 powerpc

Wygląda na to, że nie jest uwzględniony w nowszym Ubuntu z powodu problemów z bezpieczeństwem: patrz: Raport o błędzie

Ale .. Zwykle po prostu używam polecenia ping, aby sprawdzić szybkość połączenia z jakąś lokalizacją. Ilość chmielu i opóźnienie.

Nie trzeba robić żadnych poszukiwania już - jak ajmitch został wyjaśniony , można użyć deb mirror, aby mieć najlepsze lusterko automatycznie zbierane dla Ciebie.

apt-get obsługuje teraz metodę „lustrzaną”, która automatycznie wybierze dobre lustro na podstawie twojej lokalizacji. Stawianie:

deb mirror://mirrors.ubuntu.com/mirrors.txt precise main restricted universe multiverse
deb mirror://mirrors.ubuntu.com/mirrors.txt precise-updates main restricted universe multiverse
deb mirror://mirrors.ubuntu.com/mirrors.txt precise-backports main restricted universe multiverse
deb mirror://mirrors.ubuntu.com/mirrors.txt precise-security main restricted universe multiverse

u góry w /etc/apt/sources.listpliku powinno być wszystko, co jest potrzebne, aby automatycznie wybrać dla ciebie lustro na podstawie położenia geograficznego.

Użytkownicy świadomi (10.04), Maverick (10.10), Natty (11.04) i Oneiric (11.10) mogą zastąpić preciseodpowiednią nazwę.

Oto jeden ze sposobów, który zawsze będzie działał, wykorzystując stare dobre netselecti trochę grepmagii:

Hack „znajdź najlepszy serwer” uzależnionego od terminalu!

• Pobierz i dpkg -i netselectdla swojej architektury ze strony Debiana. (około 125 KB, brak zależności)

• Znajdź najszybsze serwery lustrzane Ubuntu z Twojej lokalizacji, albo aktualne, albo co najwyżej sześć godzin temu (wyjaśnię to poniżej, przepraszam, że nie dzieli się ładnie w Markdown)

  sudo netselect -v -s10 -t20 `wget -q -O- https://launchpad.net/ubuntu/+archivemirrors | grep -P -B8 "statusUP | statusSIX" | grep -o -P "(f | ht) tp: // [^ \"] * "'
  

• netselect:

  1. -v sprawia, że ​​jest trochę gadatliwy - chcesz zobaczyć kropki postępu i wiadomości informujące, że różne lustra mapujące na ten sam adres IP zostały scalone :)
  2. -sN kontroluje liczbę kopii lustrzanych na końcu (np. 10 najlepszych kopii)
  3. -tN określa, jak długo każde lustro jest testowane pod względem prędkości (domyślnie jest to 10; im wyższa liczba, tym dłużej trwa, ale bardziej wiarygodne wyniki).

• To jest backquotes (nie wklejaj, tylko dla wyjaśnienia)

  wget -q -O- https://launchpad.net/ubuntu/+archivemirrors
  | grep -P -B8 „status (UP | SIX)”
  | grep -o -P "(f | ht) tp: // [^ \"] * "
  

  1. wgetpobiera najnowszy status kopii lustrzanej z https://launchpad.net/ubuntu/+archivemirrors .
  2. Pierwszy grepwyodrębnia lustra, które są aktualne lub sześć godzin za nimi, wraz z 8 liniami poprzedniego kontekstu, który zawiera rzeczywiste adresy URL ftp / http
  3. Drugi grepwyodrębnia te adresy URL ftp / http

• Oto przykładowy wynik z Kalifornii, USA:

  60 ftp://mirrors.se.eu.kernel.org/ubuntu/
  70 http://ubuntu.alex-vichev.info/
  77 http://ftp.citylink.co.nz/ubuntu/
  279 http://ubuntu.mirrors.tds.net/pub/ubuntu/
  294 http://mirror.umd.edu/ubuntu/
  332 http://mirrors.rit.edu/ubuntu/
  364 ftp://pf.archive.ubuntu.com/ubuntu/
  378 http://mirror.csclub.uwaterloo.ca/ubuntu/
  399 ftp://ubuntu.mirror.frontiernet.net/ubuntu/
  455 http://ubuntu.mirror.root.lu/ubuntu/
  

  • „Rangi” są dowolną miarą; niższy jest zwykle lepszy.
  • Jeśli zastanawiasz się, dlaczego serwer lustrzany kernel.org Szwecja-UE i serwer lustrzany NZ znajdują się w pierwszej trójce z Kalifornii , to ja też ;-) Prawda jest taka, że netselectnie zawsze wybiera się najbardziej odpowiedni adres URL do wyświetlenia, gdy wiele kopii lustrzanych mapowanych na pojedynczy adres IP; numer 3 jest również znany jako nz.archive.ubuntu.com!

Oneliner, który wybiera najlepszy (według prędkości pobierania) serwer lustrzany na podstawie mirrors.ubuntu.com dla twojego adresu IP.

curl -s http://mirrors.ubuntu.com/mirrors.txt | xargs -n1 -I {} sh -c 'echo `curl -r 0-102400 -s -w %{speed_download} -o /dev/null {}/ls-lR.gz` {}' |sort -g -r |head -1| awk '{ print $2  }'

Oto napisany przeze mnie skrypt w języku Python , który wyszukuje kopie lustrzane o najniższym opóźnieniu TCP.

Skrypt zapewnia również dane o przepustowości i stanie pobrane ze startera i automatycznie wygeneruje nowy sources.listplik lub przy użyciu kopii lustrzanej wybranej z listy.

Przykład użycia, który umożliwia wybranie jednego z 5 amerykańskich serwerów lustrzanych o najniższym opóźnieniu względem komputera:

$ apt-select --country US -t 5 --choose

Opracowałem prosty skrypt nodejs oparty na pingach, który testuje serwery wymienione na mirrors.ubuntu.com/mirrors.txt i zwraca najszybszy:

sudo npm install -g ffum
ffum

Daj mi znać, jeśli uznasz to za przydatne lub masz jakieś sugestie (=

Wiem, że to nie odpowiada bezpośrednio na pytanie OP, ale w wersji Ubuntu na pulpicie / GUI znajduje się przycisk, który znajdzie dla ciebie najlepsze lustro. Wydawało się, że działa całkiem dobrze, więc przyjrzałem się temu krótko, ale nie miałem czasu na śledzenie.

Powodem, dla którego o tym wspomniałem, jest to, że myślę, że przekształcenie go w narzędzie wiersza poleceń byłoby całkiem proste i użyteczne.

Jeśli ktoś jest zainteresowany, test wydaje się znajdować w:

/usr/lib/python3/dist-packages/softwareproperties/MirrorTest.py

Znów, to o tyle, o ile mi się udało, ale pomyślałem, że zostawię to tutaj na wypadek, gdyby ktoś tego chciał. Pewnie go odzyskam, kiedy będę miał trochę więcej czasu.

Polecenie, które znajduje szybkie lustra

Na Ubuntu 18.04 uzyskałem dobre wyniki, uruchamiając

 python /usr/lib/python3/dist-packages/softwareproperties/MirrorTest.py

To wypisuje listę serwerów lustrzanych uporządkowanych według „czasu” (nie wyjaśniono), a następnie użyłem jednego z serwerów lustrzanych, które uzyskały najwyższą pozycję.

Więcej szczegółów

Dla mnie użyteczne było przetestowanie kilku najlepszych wyników uzyskanych przez to polecenie, ustawiając je jako moje lustro, /etc/apt/sources.lista następnie wykonując

time sudo apt update

aby zobaczyć, ile czasu zajęło pobranie listy pakietów z tego serwera lustrzanego. Testowałem trzy najlepsze sugestie i wszystkie były szybkie, ale jedna z nich była dwa razy szybsza niż pozostałe dwie w time sudo apt updateteście.

Oto przykładowy wynik z python /usr/lib/python3/dist-packages/softwareproperties/MirrorTest.py:

mirror: es-mirrors.evowise.com - time: 0.183778047562
mirror: it-mirrors.evowise.com - time: 0.18604683876
mirror: la-mirrors.evowise.com - time: 0.192630052567
mirror: ny-mirrors.evowise.com - time: 0.208723068237
mirror: mirrors.accretive-networks.net - time: 0.385910987854
mirror: mirror.team-cymru.org - time: 0.46785402298
mirror: mirrors.psu.ac.th - time: 1.64231991768
and the winner is: es-mirrors.evowise.com

W wierszu polecenia można użyć narzędzia Python o nazwie apt-smart

Przykład użycia, który pozwala wyświetlić listę kopii lustrzanych w twoim kraju (automatycznie wykrywa):

$ apt-smart -l

Za pomocą -l, lub --list-mirrorsotrzymasz (przykład danych wyjściowych z serwera Travis CI US):

---------------------------------------------------------------------------------------------------------
| Rank | Mirror URL                            | Available? | Updating? | Last updated    | Bandwidth   |
---------------------------------------------------------------------------------------------------------
|    1 | http://mirrors.gigenet.com/ubuntua... | Yes        | No        | Up to date      | 1.73 MB/s   |
|    2 | http://mirror.genesisadaptive.com/... | Yes        | No        | Up to date      | 1.68 MB/s   |
|    3 | http://ubuntu.mirrors.tds.net/pub/... | Yes        | No        | Up to date      | 1.4 MB/s    |
|    4 | http://repos.forethought.net/ubuntu   | Yes        | No        | Up to date      | 1.35 MB/s   |
|    5 | http://repo.miserver.it.umich.edu/... | Yes        | No        | Up to date      | 937.62 KB/s |
...
|   75 | http://mirror.cc.vt.edu/pub2/ubuntu   | Yes        | No        | 1 day behind    | 659.67 KB/s |
|   76 | http://mirror.atlantic.net/ubuntu     | Yes        | No        | 2 days behind   | 351.26 KB/s |
|   77 | http://mirror.lstn.net/ubuntu         | Yes        | No        | 4 days behind   | 806.81 KB/s |
|   78 | http://mirrors.usinternet.com/ubun... | Yes        | No        | 4 weeks behind  | 514.31 KB/s |
|   79 | http://mirrors.arpnetworks.com/Ubuntu | Yes        | No        | 19 weeks behind | 418.94 KB/s |
|   80 | http://mirrors.ocf.berkeley.edu/ub... | Yes        | Yes       | Up to date      | 446.07 KB/s |
---------------------------------------------------------------------------------------------------------
Full URLs which are too long to be shown in above table:
1: http://mirrors.gigenet.com/ubuntuarchive
2: http://mirror.genesisadaptive.com/ubuntu
3: http://ubuntu.mirrors.tds.net/pub/ubuntu
5: http://repo.miserver.it.umich.edu/ubuntu
...
78: http://mirrors.usinternet.com/ubuntu/archive
80: http://mirrors.ocf.berkeley.edu/ubuntu

Oczywiście, apt-smartmożesz również zmienić swój source.list, jeśli chcesz:

$ apt-smart -a

Za pomocą -alub, --auto-change-mirroraby odkryć dostępne kopie, uszereguj je według prędkości połączenia i statusu aktualizacji oraz zaktualizuj /etc/apt/sources.list, aby użyć najlepszego dostępnego kopii.

Za pomocą -club, --change-mirror MIRROR_URLaby zaktualizować /etc/apt/sources.list, aby użyć podanego MIRROR_URL.

W porównaniu z innymi narzędziami:

• apt-smart automatycznie znajdzie miejsce, w którym się znajdujesz, więc nie musisz określać kraju podczas podróży zagranicznej.
• apt-smartwykonuje rzeczywiste pobieranie HTTP z każdego serwera lustrzanego, aby uzyskać dokładniejsze wyniki (przepustowość i status) i obsługuje proxy HTTP, zamiast używać pingniedokładnych danych startera i polegać na nich.
• apt-smart jest utrzymywany, podczas gdy większość innych narzędzi pozostawia problemy przez długi czas nierozwiązane.

Możesz łatwo zainstalować apt-smartza pośrednictwem pip, aby uzyskać szczegółowe polecenia i sposoby instalacji kopiuj i wklej, zobacz Projekt Readme .

Używam następujących do automatycznego wyboru serwerów lustrzanych (i wyłączam deb-src)

sudo sed -i -e 's%http://archive.ubuntu.com/ubuntu%mirror://mirrors.ubuntu.com/mirrors.txt%' -e 's/^deb-src/#deb-src/' /etc/apt/sources.list

Jeśli chcesz to zrobić, możesz zaimplementować takie narzędzie jako prosty skrypt bash, taki jak poniżej. Może to być przydatne, jeśli chcesz korzystać z narzędzia bez potrzeby pip / nodejs.

#!/bin/bash
if [ -z "$1" ]
then
    echo Usage:  sudo $0 http://mirrors.ubuntu.com/mirrors.txt
    echo OR consider one of...
    for mirror in `wget http://mirrors.ubuntu.com/mirrors.txt -O - 2> /dev/null`
    do 
        (
            host=`echo $mirror |sed s,.*//,,|sed s,/.*,,`
            echo -e `ping $host -c1 | grep time=|sed s,.*time=,,`:'  \t\t'$mirror
        ) &
        done
    wait
    exit 1
fi

OLD_SOURCE=`cat /etc/apt/sources.list | grep ^deb\ | head -n1 | cut -d\  -f2`

[ -e  /etc/apt/sources.list.orig ] || cp /etc/apt/sources.list /etc/apt/sources.list.orig

cp /etc/apt/sources.list /etc/apt/sources.list.tmp
sed "s,$OLD_SOURCE,$1," < /etc/apt/sources.list.tmp > /etc/apt/sources.list

Inne odpowiedzi, w tym odpowiedź zaakceptowana, nie są już ważne (dla Ubuntu 11.04 i nowszych), ponieważ zalecały pakiety Debiana takie jak netselect-apti, apt-spyktóre nie działają z Ubuntu.

Istnieją dwie różne robocze odpowiedzi na to pytanie poniżej:

1. Użyj apt-get „s mirror:metody

   Ta metoda pyta serwer Ubuntu o listę serwerów lustrzanych w pobliżu na podstawie twojego adresu IP i wybiera jedno z nich. Najłatwiejsza alternatywa, z niewielkim minusem, że czasami najbliższe lustro może nie być najszybsze.

2. Foo z wiersza poleceń za pomocą netselect
   Pokazuje, jak korzystać z narzędzia netselect , aby znaleźć najszybsze ostatnio aktualizowane serwery - pod względem sieci, a nie geograficznie. Służy seddo zastępowania serwerów lustrzanych sources.list.

Służy seddo zastępowania serwerów lustrzanychsources.list

Ponieważ niektóre źródła używają folderów dodawania jako części ich ścieżki, lepszym rozwiązaniem może być użycie alternatywnej składni separatora.

sudo sed -i 's%us.archive.ubuntu.com%mirrors.gigenet.com/ubuntuarchive/%' /etc/apt/sources.list

Najłatwiejszym i najskuteczniejszym sposobem na uzyskanie najszybszego kopii lustrzanej jest użycie apt apt mirror://, patrz

https://mvogt.wordpress.com/2011/03/21/the-apt-mirror-method/