Ostatnio eksperymentowałem z cURL i odkryłem, że wiele jest z nim możliwe. Zbudowałem mały skrypt indeksujący muzyczną stronę, na której odtwarzane są piosenki online. Podczas mojego eksperymentu odkryłem, że można również zaindeksować źródło utworu ... (strona nie umożliwia pobierania).
Chcę tylko wiedzieć ... Czy indeksowanie stron jest w pełni PRAWNE? I oznacza użyciu http and port '80',
Na rynku dostępne są utracone menedżery pobierania, które można pobierać z prawie wszystkich witryn. Wszystkie są prawidłowe i zgodne z prawem.
php
curl
screen-scraping
web-crawler
Chetan Sharma
źródło
źródło
Odpowiedzi:
Odpowiedź na twoje pytanie brzmi: tak. Jedynym możliwym wyjątkiem jest kryptografia w twoim kraju, jeśli cURL został zbudowany z obsługą protokołu SSL statycznie połączony lub eksportujesz z USA do jednego z kilku krajów uważanych za wrogie.
Zasadniczo zgarnianie publicznie widocznych stron internetowych jest również legalne. Jeśli pobierzesz jedną kopię ze wszystkich stron, które można zobaczyć w przeglądarce, nie będziesz mieć żadnych problemów. Jeśli zaczniesz powodować problemy dla innych zastosowań, może to zostać uznane za atak typu „odmowa usługi”. Konieczne może być również sprawdzenie warunków witryny, ale ponieważ już ją pobrałeś, aby ją wyświetlić, nie ma dużej różnicy (w najlepszym razie subtelna technika).
Jednak pobieranie muzyki to tylko to. Nie ma znaczenia, czy korzystasz z Limewire, uTorrent, Megaupload, Flashget czy cURL, nadal pobierasz muzykę. Jest to legalne, jeśli artysta / wytwórnia twierdzi, że tak, jeśli posiadasz licencję lub ogólnie, jeśli masz do tego prawo.
CURL jest więc całkowicie legalny. Ale jak wszystko inne, to, co z tym zrobisz, może nie być.
źródło
IMDB.com wyraźnie zabrania korzystania ze skrobaków takich jak ten w ich witrynie w ramach warunków świadczenia usług.
źródło
Nie mogę komentować odpowiedzi, ponieważ nie mam tutaj przedstawiciela, ale kilka odpowiedzi stwierdziło, że może to być niezgodne z prawem w zależności od warunków korzystania ze stron internetowych. Jest to subtelna technika, ale jeśli tak jest, to nadal jest legalne, ale możesz zostać pozwany cywilnie za naruszenie umowy lub naruszenia praw autorskich (chociaż naruszenia praw autorskich mogą być również nielegalne kryminalnie). Ale ogólnie rzecz biorąc, tylko dlatego, że TOS witryny internetowej mówi, że nie możesz nic zrobić, nie oznacza to, że mają one prawną władzę zakazującą ci tego.
źródło
Ogólnie rzecz biorąc, bardziej liczy się to, co z nim zrobisz, niż sposób jego uzyskania. IE, możesz skopiować płytę CD, ale co zrobiłeś z tą płytą? Czy sprzedałeś go komuś (nielegalnie), czy po prostu położyłeś go na półce na starej płycie CD, żebyś miał niezarysowaną kopię (legalną)? Podobnie, nawet jeśli posiadasz muzykę wprost, nadal masz prawo kopiować ją tylko na własny użytek, nawet na użytek innych osób.
Oto pytanie Zasadniczo, jeśli chodzi o Internet, jeśli jest „publikowany” przez osobę mającą prawa do publikowania go, i nie ma żadnych postanowień, że korzystanie z niego nie jest darmowe (IE a TOS), wówczas zwykle uważa się to za uczciwą grę używać go w sposób niekomercyjny. Ale co, jeśli treść nie jest nawet częścią „widocznej” części strony internetowej i wymaga skrobania źródła i przeglądania folderów w celu uzyskania / uzyskania dostępu. Chociaż może być w sieci „publicznej” i dostępny za pomocą niezabezpieczonych środków. To prawie jak twierdzenie, że możesz okraść czyjś dom, ponieważ zostawili otwarte drzwi, co jest nieco rozciągniętą analogią, ale do pewnego stopnia aktualne. Jeśli na stronie nie ma linków, można argumentować, że treść nie została „opublikowana”
Ale to chyba dużo gadania o niczym, jeśli nie robisz nic szalonego lub próbujesz zarobić na pracy innych, wtedy zwykle nikogo to nie obchodzi, jeśli zdobędziesz złom.
źródło