Jak pobrać cały zestaw danych ASTER GDEMv2?

22

W październiku 2011 r. NASA opublikowała nowy globalny zestaw danych ASTER GDEM (30 m) i chciałem go zdobyć. Jedynym problemem jest to, że pobieranie trwa wieczność i nie mam ochoty rysować małych pudełeczek dla całego świata.

Czy jest jakieś miejsce, z którego mogę pobrać całość?

Ragi Yaser Burhum
źródło
2
+1 za „Nie mam ochoty rysować małych pudełeczek dla całego świata”. Ich proces pobierania brzmi koszmarnie. Czym do cholery jest granulka? : p
blah238,
2
Uwielbiam systemy zorientowane na klienta, które zostały zaprojektowane przez pracowników technicznych.
Stephen Lead
5
Podobało mi się, jak ma samouczek na temat pobierania danych echo.nasa.gov/reference/reverbastergdem_tutorial.htm Mimo wszystko, co jest nie tak z dobrą listą plików, które mogę zeskrobać i pobrać. Lub przynajmniej na jednej stronie FTP. Lub jeśli to jest problem, po prostu rzuć to jako torrent!
Ragi Yaser Burhum,
NASA zamknęła Reverb. Muszę również pobrać wszystkie kafelki Aster GDEM v2 dla całego zasięgu ziemi. Ale nie mogę znaleźć żadnego sposobu. Czy są jakieś inne możliwe sposoby? Znam również podejście oparte na kodowaniu w Pythonie.
Soubhik Karmakar
Jeśli masz nowe pytanie, zadaj je, klikając przycisk Zadaj pytanie . Dołącz link do tego pytania, jeśli pomaga to w zapewnieniu kontekstu. - Z recenzji
BERA

Odpowiedzi:

6

Nie dyskontuj starej poczty ślimakowej (zaktualizowanej do 2016 r., Dodano wyróżnienie):

Nie jest pobierana żadna opłata za masową dostawę danych 3DEP , ale będziesz musiał podać dyski twarde potrzebne do przechowywania danych i wysyłki, abyśmy mogli odesłać je z powrotem do ciebie. Dane są również dostępne w kilku różnych formatach (ArcGrid, Gridfloat lub IMG) [...]

Oferujemy również cyfrowe modele wysokościowe (OPR) Original Product Resolution (OPR). OPR DEM są zachowane w oryginalnych odstępach między słupkami (rozdzielczość pozioma) i systemach odniesienia przestrzennego, w których zostały one uzyskane przez USGS. [...] W tej chwili dane OPR obejmują tylko DEM-y ze źródła ifsar na Alasce oraz DEM-y o wysokiej rozdzielczości włączone do 3DEP od kwietnia 2014 r. [...]

Proszę zanotować:

• Nie możemy przetworzyć żądania, jeśli nie dysponujemy prawidłową liczbą napędów, wymienionym numerem identyfikacyjnym zlecenia i numerem konta wysyłki zwrotnej lub przedpłaconymi etykietami wysyłkowymi. [...]

• Czasy zawracania będą zależeć od naszego obecnego obciążenia pracą w momencie składania zamówienia, ale w większości przypadków otrzymasz dane w ciągu 1-2 tygodni.

Dostępne rozdzielczości danych to 2, 1, 1/3 i 1/9 sekundy łukowej oraz 1 metr (jeśli są dostępne). Aby zamówić wszystko oprócz 1m, przydziel około ~ 2 TB miejsca na dysku. (Podano „Zmienne” dla produktu o długości 1 m.)

Adres kontaktowy to [email protected] (zastępczy [email protected])

USGS / NGTOC
1400 Independence Rd.
MS 960
Rolla, MO 65401
Telefon: 1-800-252-4547, 573-308-3949


Kilka lat temu zebrałem razem Backdoora do amerykańskich danych o bezproblemowych wzniesieniach w USA, które mogą, ale nie muszą być nadal istotne. Krótko mówiąc:

http://extract.cr.usgs.gov/Website/distreq/RequestSummary.jsp?AL=71.0,56.0,-140.0,-150.0&PL=NAK01HZ

gdzie jest to region zainteresowania na północ, południe i wschód, zachód w stopniach dziesiętnych.

AL=71.0,56.0,-140.0,-150.0

i jest to zestaw danych do wyboru, w tym przypadku „National Elevation Dataset Alaska (NED) 2 Arc Second”

PL=NAK01HZ

Najwyraźniej dystrybucja produktów Aster przez Japan Space Systems zakończyła się w marcu 2016 r.

Aktualizacja: Najprostszą drogą jest prawdopodobnie ominięcie amerykańskiej witryny, którą można pobrać z Japan Space Systems : http://gdem.ersdac.jspacesystems.or.jp/index.jsp

Wyboru można dokonać na stronie wyszukiwania , klikając kafelki, rysując wielokąt na ekranie, przesyłając plik kształtu i wprowadzając współrzędne. Maksymalny wybór kafelków to 1000. Pierwsze 100 kafelków można pobrać od razu (w zależności od liczby innych użytkowników, którzy to robią; maksymalnie 16), a pozostałe są w kolejce do przetworzenia, gdy są wolne zasoby systemowe. Masz 72 godziny na pobranie z kolejki, zanim zostanie wyczyszczona.

Rejestracja jest bezpłatna, choć brakuje niektórych funkcji, które uznaliśmy za oczywiste, takich jak „ta nazwa użytkownika jest już zajęta” i „zapomniałeś hasła?”. Sugeruję użycie twojego adresu e-mail jako nazwy użytkownika.

(Podziękowania dla Bena Discoe za wskazówkę: http://vterrain.org/Elevation/global.html )


matowe wilkie
źródło
1
@RagiYaserBurhum, dzięki za zaznaczenie. Które części odpowiedzi były dla Ciebie poprawne? (a dostałeś cały zestaw danych?)
Matt Wilkie
To nie wydaje się działać na obszarach poza USA, chyba że istnieje opcja, której mi brakuje?
Simbamangu
@Simbamangu, zobacz aktualizację, przejdź do Japonii.
matt wilkie
1000 USD za dysk 250 GB to „niesamowicie dobra cena”?
Ahmed Fasih
@AhmedFasih, to dobra cena za dane i wygodę, w 2011 roku. Nośnik dysku jest prawie nieistotny. Z drugiej strony, jeśli robisz to dla siebie, a twój czas jest wolny, to zdecydowanie staraj się; po to jest skrypt. ;-)
matt wilkie
18

Moje sugestie to użycie pogłosu na stronie http://reverb.echo.nasa.gov/reverb/ . Najpierw zarejestruj się, jeśli jeszcze tego nie zrobiłeś. W polu wyszukiwania wpisz ASTER GDEM i wybierz Zestaw danych --- uwaga, jeśli chcesz konkretnego obszaru, jest to punkt, w którym wybierasz zakres pól w oknie mapy po lewej stronie (bardzo przydatna funkcja!).

ASTER GDEM Global Digital Elevation Model V002

Wybierz „Wyszukaj granulki”

Teraz zaczyna się żmudna część, w której na świecie znajduje się ponad 22 000 kafelków ASTER GDEM, jednak na stronie znajduje się tylko 400 na stronie, na której znajduje się przycisk „Dodaj wszystko na stronie”, ale nie ma opcji Dodaj wszystko (tj. Ponad 50 stron do przejścia + czas ładowania).

Naciśnij opcję Wyświetl elementy w koszyku (Koszyk), naciśnij przycisk „WSZYSTKO”, aby wyświetlić nową wiadomość „Wszystkie elementy na stronie wybrane. Wybierz Wszystkie n pozycji w koszyku ”. Kliknij ten link. Na dole strony wybierz „Zamówienie wybrane” (bezpośrednie pobieranie nie jest dostępne).

Postępuj zgodnie z odpowiednimi krokami, w tym szczegółami zamówienia (za darmo, bez obaw), a na następnej stronie wybierz przycisk „Opcja zamówienia - Nieustawione i wymagane”, aby podać przyczynę pobrania (pamiętaj, aby użyć funkcji „Zastosuj do wszystkich funkcji”).

Następnie otrzymasz wiadomość e-mail zatytułowaną CM SHARED ze wskazówkami dotyczącymi ściągnięcia ftp na wybrane dane. Z mojego ograniczonego doświadczenia wynika, że ​​zwykle zajmuje to około jednego dnia roboczego. Zasadniczo katalog ftp i pull do połączenia będzie wyglądał następująco:

ftp://e4ftl01.cr.usgs.gov # Ftp Server
PullDir/0302595257dmDDFH  # Pull Directory Example

Zapewnia to naprawdę szybkie pobieranie (w przeciwieństwie do niektórych innych stron ftp Global Land Cover Facility), szczególnie pochodzących z Europy (5 Mb / s).

Przepraszam za długą odpowiedź na dość prostą procedurę, ale kiedy to piszę, tak naprawdę sam pobieram dane ASTER GDEMv2 dla całego ciągłego USA. Uwaga: ASTER GDEMv2 nie jest wypełniony pustką (chociaż wprowadzono ulepszenia), w przeciwieństwie do innych, takich jak SRTM V4.1 z http://srtm.csi.cgiar.org/ w rozdzielczości 90m.

BJEBN
źródło
4

Postępowałem zgodnie z instrukcjami NASA: http://www.echo.nasa.gov/reference/astergdem_tutorial.htm

a sztuką jest wyszukiwanie według granule ID (blok danych), np.% N00% i czekanie na wiadomość e-mail z potwierdzeniem (próbowałem innych metod, ale były one zbyt bolesne).

Gijs
źródło
Reverb pozwala dodać do 2000 przedmiotów na koszyk, co daje 7 i trochę zamówień, ale sztuczka polega na tym, aby dowiedzieć się, jak szukać 2000 na raz. Próbowałem% N% reklamy zwróciło cały zestaw granulek 14926, ale nie mogę jeszcze znaleźć sposobu, aby
podzielić
3

Walczyłem z tym też w Reverb . Ale NASA mówi:

Jeśli potrzebujesz zamówić więcej niż 2000 granulek, skontaktuj się z naszym zespołem pomocy technicznej ([email protected]).

Skontaktowałem się z nimi i po krótkiej przerwie wysłali mi 12 linków do pobrania!

Daniel Gerber
źródło
Właśnie to zrobiłem: wysłałem im e-mail z moją nazwą użytkownika i adresem URL zapytania (zrobiłem zapytanie obejmujące całą ziemię, w wyniku czego otrzymałem 22 702 granulek). Otrzymaliśmy dwanaście wiadomości e-mail, z których każda zawiera adresy URL, które pozwalają pobrać 2000 granulek w jednym pliku ZIP (wydawało się to niewiarygodne), a także katalog zawierający pliki ZIP i XML 2000 granulek.
Ahmed Fasih
I wget -l 1 -r -nc $URLdla każdego URLrobi lewę!
Ahmed Fasih
1

Wygląda na to, że po zlokalizowaniu zestawu danych dostępna jest teraz opcja „Pobierz wszystkie granulki” (wyszukaj ASTER GDEM w pogłosie, http://reverb.echo.nasa.gov/reverb , jak wspomniano powyżej).

wprowadź opis zdjęcia tutaj

Tom Pingel
źródło
0

Global Mapper przetworzył i zoptymalizował dane jako płytki XYZ Global Mapper grid (GMG). Ładują się bardzo szybko w globalnym programie do mapowania, a ponieważ standardowa warstwa kafli może zostać zeskrobana, a następnie wsadowo przekonwertowana do dowolnego formatu pochodnego. Pobrałem poziom powiększenia 13 dla świata. Partia przekonwertowała to na siatkowe płytki geotiff 512x512, a następnie utworzyła katalog map. Napisałem narzędzie do zakodowania elewacji w płytkach RGB PNG za pomocą Mapzen Terrarium Spec. Moja ulotka i mapy warstw otwartych zwracają wykres wysokości elewacji i profilu terenu oraz reprezentację trójwymiarową 3D

GeospatialInformationTech
źródło