Znak nowego wiersza CSV widoczny w błędzie pola bez cudzysłowu

następujący kod działał do dzisiaj, kiedy zaimportowałem z komputera z systemem Windows i otrzymałem ten błąd:

znak nowej linii widoczny w niecytowanym polu - czy musisz otworzyć plik w trybie uniwersalnej nowej linii?

import csv

class CSV:


    def __init__(self, file=None):
        self.file = file

    def read_file(self):
        data = []
        file_read = csv.reader(self.file)
        for row in file_read:
            data.append(row)
        return data

    def get_row_count(self):
        return len(self.read_file())

    def get_column_count(self):
        new_data = self.read_file()
        return len(new_data[0])

    def get_data(self, rows=1):
        data = self.read_file()

        return data[:rows]

Jak mogę rozwiązać ten problem?

def upload_configurator(request, id=None):
    """
    A view that allows the user to configurator the uploaded CSV.
    """
    upload = Upload.objects.get(id=id)
    csvobject = CSV(upload.filepath)

    upload.num_records = csvobject.get_row_count()
    upload.num_columns = csvobject.get_column_count()
    upload.save()

    form = ConfiguratorForm()

    row_count = csvobject.get_row_count()
    colum_count = csvobject.get_column_count()
    first_row = csvobject.get_data(rows=1)
    first_two_rows = csvobject.get_data(rows=5)

Dobrze będzie zobaczyć sam plik csv, ale może to zadziałać, spróbuj, zamień:

file_read = csv.reader(self.file)

z:

file_read = csv.reader(self.file, dialect=csv.excel_tab)

Lub otwórz plik za pomocą universal newline modei przekaż go csv.reader, na przykład:

reader = csv.reader(open(self.file, 'rU'), dialect=csv.excel_tab)

Lub użyj w splitlines()ten sposób:

def read_file(self):
    with open(self.file, 'r') as f:
        data = [row for row in csv.reader(f.read().splitlines())]
    return data

Zdaję sobie sprawę, że to stary post, ale napotkałem ten sam problem i nie widzę poprawnej odpowiedzi, więc spróbuję

Błąd Pythona:

_csv.Error: new-line character seen in unquoted field

Spowodowane próbą odczytania plików CSV dla komputerów Macintosh (sformatowanych przed systemem OS X). Są to pliki tekstowe, które używają CR na końcu wiersza. W przypadku korzystania z MS Office należy wybrać opcję zwykły CSV format lub CSV (MS-DOS) . Nie używaj CSV (Macintosh) jako typu „zapisz jako”.

Moją preferowaną wersją EOL byłaby LF (Unix / Linux / Apple), ale nie sądzę, aby MS Office zapewniał opcję zapisywania w tym formacie.

W systemie Mac OS X zapisz plik CSV w formacie „Windows z przecinkami (.csv)”.

Jeśli tak się stanie na komputerze Mac (tak jak mnie):

1. Zapisz plik jako CSV (MS-DOS Comma-Separated)

2. Uruchom następujący skrypt

   with open(csv_filename, 'rU') as csvfile:
       csvreader = csv.reader(csvfile)
       for row in csvreader:
           print ', '.join(row)

Spróbuj dos2unixnajpierw uruchomić w systemie Windows zaimportowane pliki

To jest błąd, z którym się spotkałem. Zapisałem plik .csv w MAC OSX.

Podczas zapisywania zapisz go jako „Windows Comma Separated Values ​​(.csv)”, co rozwiązało problem.

To działało dla mnie na OSX.

# allow variable to opened as files
from io import StringIO

# library to map other strange (accented) characters back into UTF-8
from unidecode import unidecode

# cleanse input file with Windows formating to plain UTF-8 string
with open(filename, 'rb') as fID:
    uncleansedBytes = fID.read()
    # decode the file using the correct encoding scheme
    # (probably this old windows one) 
    uncleansedText = uncleansedBytes.decode('Windows-1252')

    # replace carriage-returns with new-lines
    cleansedText = uncleansedText.replace('\r', '\n')

    # map any other non UTF-8 characters into UTF-8
    asciiText = unidecode(cleansedText)

# read each line of the csv file and store as an array of dicts, 
# use first line as field names for each dict. 
reader = csv.DictReader(StringIO(cleansedText))
for line_entry in reader:
    # do something with your read data 

Wiem, że odpowiedź trwa od dłuższego czasu, ale nie rozwiązuje mojego problemu. Używam DictReader i StringIO do odczytu csv z powodu innych komplikacji. Udało mi się rozwiązać problem w prostszy sposób, wyraźnie zastępując ograniczniki:

with urllib.request.urlopen(q) as response:
    raw_data = response.read()
    encoding = response.info().get_content_charset('utf8') 
    data = raw_data.decode(encoding)
    if '\r\n' not in data:
        # proably a windows delimited thing...try to update it
        data = data.replace('\r', '\r\n')

Może nie być rozsądne w przypadku ogromnych plików CSV, ale działało dobrze w moim przypadku użycia.

Alternatywne i szybkie rozwiązanie: napotkałem ten sam błąd. Ponownie otworzyłem "dziwny" plik csv w GNUMERIC na mojej maszynie lubuntu i wyeksportowałem go jako plik csv. To rozwiązało problem.