Nigdy więcej miejsca na dysku: jak mogę znaleźć, co zajmuje miejsce?

Wystąpił problem na jednym z moich serwerów z 16.04: nie ma już miejsca na dysku.

Nie mam pojęcia, co zajmuje przestrzeń. Czy istnieje polecenie, aby wyświetlić bieżące rozmiary katalogów, więc mogę przejść i skończyć w katalogu, zajmując całe miejsce?

Jak zawsze w Linuksie, jest więcej niż jeden sposób na wykonanie zadania. Jeśli jednak musisz to zrobić z interfejsu CLI, jest to moja preferowana metoda:

Zaczynam od uruchomienia jako root lub sudo:

du -cha --max-depth=1 / | grep -E "M|G"

Grep ma na celu ograniczenie zwracanych linii do tych, które zwracają wartości z zakresu Megabajtów lub Gigabajtów. Jeśli twoje dyski są wystarczająco duże, możesz również dodać, |Taby uwzględnić kwoty terabajtów. Mogą pojawić się błędy na /proc, /sysi / lub /devponieważ nie są to prawdziwe pliki na dysku. Jednak powinien nadal zapewniać prawidłowe dane wyjściowe dla pozostałych katalogów w katalogu głównym. Po znalezieniu największych możesz uruchomić komendę w tym katalogu, aby zawęzić winowajcę. Na przykład, jeśli /varbył największy, możesz to zrobić w następujący sposób:

du -cha --max-depth=1 /var | grep -E "M|G"

To powinno doprowadzić cię do problemu dzieci!

Dodatkowe uwagi

Podczas gdy powyższe polecenie z pewnością załatwi sprawę, miałem trochę konstruktywnej krytyki w komentarzach poniżej, które wskazały pewne rzeczy, które możesz również uwzględnić.

1. Podane grepprzeze mnie może powodować sporadyczne zwracanie wartości „K”, jeśli nazwa katalogu lub pliku ma wielką literę G lub M. Jeśli absolutnie nie chcesz, aby którykolwiek z katalogów o wartości K pojawiał się, chciałbyś go zwiększyć twoja gra regularna, aby być bardziej kreatywnym i złożonym. na przykładgrep -E "^[0-9\.]*[MG]"

2. Jeśli wiesz, który dysk jest problemem i ma na nim inne zamontowane dyski, których nie chcesz tracić czasu, w tym na wyszukiwanie, możesz dodać -xflagę do dupolecenia. Opis strony flagi tej flagi:

     -x, --one-file-system
         skip directories on different file systems
   

3. Możesz posortować dane wyjściowe dupolecenia, aby najwyższa wartość była na dole. Wystarczy dołączyć to na końcu polecenia:| sort -h

Możesz ncdudo tego użyć . Pracuje bardzo dobrze.

sudo apt install ncdu

Używam tego polecenia

sudo du -aBM -d 1 . | sort -nr | head -20

Czasami muszę go uruchomić z /katalogu, ponieważ umieściłem coś w dziwnym miejscu.

Istnieje już wiele dobrych odpowiedzi na temat sposobów znajdowania katalogów zajmujących większość miejsca. Jeśli masz powody, by sądzić, że kilka dużych plików jest głównym problemem, a nie wiele małych, możesz użyć czegoś takiego find / -size +10M.

Nie znam Ubuntu i nie mogę sprawdzić mojej odpowiedzi, ale opublikuję tutaj moją odpowiedź na podstawie mojego doświadczenia jako administrator unixa dawno temu.

1. Dowiedz się, który system plików zabraknie miejsca

   df -h
   

   wyświetli cały system plików, ich rozmiar i ilość wolnego miejsca. Marnujesz czas tylko, jeśli zbadasz systemy plików, które mają wystarczającą ilość miejsca. Załóżmy, że pełny system plików to / myfilesystem. sprawdź wyjście df, jeśli istnieją systemy plików zamontowane w podkatalogach / myfilesystems. Jeśli tak, należy dostosować następujące sygnały do ​​tej sytuacji.

2. Dowiedz się, ile miejsca zajmują pliki tego systemu plików

   du -sh /myfilesystem
   

   Opcji -x można użyć, aby zagwarantować, że brane są pod uwagę tylko pliki należące do tego systemu plików. Niektóre warianty Uniksa (np. Solaris) nie znają opcji -x dla du. Następnie musisz użyć kilku obejść, aby znaleźć du swojego systemu plików.

3. Teraz sprawdź, czy wielkość widocznych plików jest w przybliżeniu wielkości używanego miejsca wyświetlanego przez df. Jeśli tak, możesz zacząć szukać dużych plików / katalogów w systemie plików / myfilesystem do oczyszczenia.

4. znaleźć największe podkatalogi w katalogu /.../dir

   du -sk /.../dir/*|sort -n
   

   opcja -k zmusza du do wyprowadzenia sie w kilobajtach bez żadnej jednostki. Może to być domyślne w niektórych systemach. Następnie możesz pominąć tę opcję. Największe pliki / podkatalogi zostaną pokazane na dole danych wyjściowych.

5. Jeśli znalazłeś duży plik / katalog, którego już nie potrzebujesz, możesz go usunąć w odpowiedni sposób. Nie przejmuj się małymi katalogami na górze danych wyjściowych. Nie rozwiąże problemu, jeśli je usuniesz. Jeśli nadal nie masz wystarczającej ilości miejsca, możesz powtórzyć krok 4 w podkatalogach larges, które są wyświetlane na dole listy.

Ale co się stanie, jeśli wynik du nie będzie w przybliżeniu dostępnej przestrzeni wyświetlanej przez df?

Jeśli wynik wyjściowy jest większy, oznacza to, że brakuje Ci podkatalogu, w którym zamontowany jest inny system plików. Jeśli wyjście du jest znacznie mniejsze, niektóre pliki nie są wyświetlane w żadnym katalogu, który sprawdza. Przyczyny jego zjawisk mogą być różne.

6. niektóre procesy używają pliku, który został już usunięty. Dlatego te pliki zostały usunięte z katalogu i du ich nie widzi. Ale w systemie plików ich bloki są nadal w użyciu, dopóki proces nie zamknie plików. Możesz spróbować znaleźć odpowiednie procesy (np. Z lsof) i zmusić je do zamknięcia tych plików (np. Przez zatrzymanie aplikacji lub zabicie procesów). Lub po prostu uruchom ponownie komputer.

7. w katalogach znajdują się pliki, które nie są już widoczne, ponieważ w jednym z ich katalogów nadrzędnych jest zamontowany inny system plików. Więc jeśli masz plik / myfilesysem / subdir / bigfile i teraz zamontujesz inny system plików na / myfilesystem / subdir, to nie możesz już zobaczyć tego pliku i

   du -shx /myfilesystem 
   

   zgłosi wartość, która nie zawiera rozmiaru / myfilesystem / subdir / bigfile. Jedynym sposobem sprawdzenia, czy takie pliki istnieją, jest odmontowanie / myfilesystem / subir i sprawdzenie za pomocą

   ls -la /myfilesystem/subdir 
   

   jeśli zawiera pliki.

8. Mogą istnieć specjalne typy systemów plików, które używają / rezerwują miejsce na dysku, który nie jest widoczny dla polecenia ls. Potrzebujesz specjalnych narzędzi, aby to wyświetlić.

Oprócz tego systematycznego korzystania z komendy du istnieje jeszcze kilka innych. Możesz więc użyć polecenia find, aby znaleźć pliki, które są większe niż pewna podana przez ciebie wartość, możesz wyszukać pliki, które są większe niż pewna podana przez ciebie wartość lub które zostały nowo utworzone lub mają specjalną nazwę (np. * .Log, core, * .trc). Ale zawsze powinieneś zrobić df, jak opisano w 1, aby pracować na odpowiednim systemie plików

Jeśli nie chcesz używać polecenia, oto aplikacja: Filelight

Umożliwia szybką wizualizację wykorzystania miejsca na dysku w dowolnym folderze.

Spróbuj sudo apt-get autoremoveusunąć nieużywane pliki, jeśli jeszcze tego nie zrobiłeś

Często tego używam

du -sh /*/

Jeśli znajdę jakieś duże foldery, przełączę się na nie i przeprowadzę dalsze dochodzenie

cd big_dir
du -sh */

W razie potrzeby możesz także ustawić sortowanie automatycznie za pomocą

du -s /*/ | sort -n

Naprawdę nie odpowiedź - ale uzupełnienie.

Masz mało miejsca i nie możesz zainstalować ncdu z odpowiedzi @erman.

Jakieś sugestie

• sudo apt clean allaby usunąć pakiety, które już pobrałeś. BEZPIECZNY
• sudo rm -f /var/log/*gzwyczyść pliki dziennika starsze niż tydzień lub dwa - nie usunie nowszych / bieżących dzienników. NAJBARDZIEJ BEZPIECZNY
• sudo lsof | grep deletedwyświetla listę wszystkich otwartych plików, ale filtruje do tych, które zostały usunięte z dysku. FAIRLY SAFE
• sudo rm /tmp/*usuń niektóre pliki tymczasowe - jeśli coś ich używa, możesz zakłócić proces. NIE NAPRAWDĘ TAKIE BEZPIECZNE

Że można zwrócić takie wiersze:

server456 ~ $ lsof | grep deleted
init          1          root    9r      REG              253,0  10406312       3104 /var/lib/sss/mc/initgro                        ups (deleted)
salt-mini  4532          root    0r      REG              253,0        17     393614 /tmp/sh-thd-1492991421                         (deleted)

Nie można wiele zrobić z linią początkową, ale druga linia sugeruje, że solnik ma otwarty plik, który został usunięty, a bloki dysku zostaną zwrócone, gdy wszystkie uchwyty plików zostaną zamknięte przez ponowne uruchomienie usługi.

Innymi typowymi podejrzanymi tutaj są syslog / rsyslog / syslog-ng, kałamarnica, apache lub dowolny proces uruchamiany przez serwer, który jest „ciężki”.

Uważam za szczególnie cenny wynik działania narzędzi takich jak Filelight, ale tak jak w twoim przypadku, na serwerach zwykle nie ma zainstalowanego GUI, ale dupolecenie jest zawsze dostępne.

Zwykle robię to:

• zapisz duwynik w pliku ( du / > du_output.txt);
• skopiuj plik na mój komputer;
• służy DuFSdo „montowania” danych duwyjściowych w katalogu tymczasowym; DuFSużywa FUSE do stworzenia wirtualnego systemu plików (= żadne pliki nie są tworzone, wszystkie są fałszywe) zgodnie z danymi duwyjściowymi;
• uruchom Filelight lub inne narzędzie GUI w tym katalogu tymczasowym.

Zastrzeżenie: Napisałem dufs- właśnie dlatego, że często muszę dowiedzieć się, co wiedzie miejsca na dysku na maszynach bezgłowych.

Podobne do @TopHat, ale filtruje niektóre pliki, jeśli mają w nazwie M, G lub T. Nie sądzę, aby rozmiar w pierwszej kolumnie był pomijany, ale nie będzie pasował do nazwy pliku, chyba że nazwiesz pliki w sposób kreatywny.

du -chad 1 . | grep -E '[0-9]M[[:blank:]]|[0-9]G[[:blank:]]|[0-9]T[[:blank:]]'

Wyjaśniono tutaj przełączniki wiersza poleceń , ponieważ nie wiedziałem, co zrobił c lub a.