UnicodeDecodeError: 'ASCII Codec' kann Byte 0xef in Position 1 nicht dekodieren

Dies ist zu tun mit der Kodierung des Terminals nicht auf UTF-8 eingestellt. Hier ist mein terminal

$ echo $LANG
en_GB.UTF-8
$ python
Python 2.7.3 (default, Apr 20 2012, 22:39:59) 
[GCC 4.6.3] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> s = '(\xef\xbd\xa1\xef\xbd\xa5\xcf\x89\xef\xbd\xa5\xef\xbd\xa1)\xef\xbe\x89'
>>> s1 = s.decode('utf-8')
>>> print s1
(｡･ω･｡)ﾉ
>>> 

Auf mein terminal das Beispiel funktioniert mit den oben genannten, aber wenn ich loszuwerden, die LANG Einstellung, dann funktioniert es nicht

$ unset LANG
$ python
Python 2.7.3 (default, Apr 20 2012, 22:39:59) 
[GCC 4.6.3] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> s = '(\xef\xbd\xa1\xef\xbd\xa5\xcf\x89\xef\xbd\xa5\xef\xbd\xa1)\xef\xbe\x89'
>>> s1 = s.decode('utf-8')
>>> print s1
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
UnicodeEncodeError: 'ascii' codec can't encode characters in position 1-5: ordinal not in range(128)
>>> 

Konsultieren Sie die Dokumentation für Ihre linux-Variante zu entdecken, wie man dies dauerhaft ändern.

InformationsquelleAutor der Antwort Nick Craig-Wood

Mein +1 zu mata ' s Kommentar bei https://stackoverflow.com/a/10561979/1346705 und der Nick Craig-Wood-demonstration. Sie haben dekodiert die Zeichenfolge richtig. Das problem ist mit der print Befehl konvertiert die Unicode-Zeichenfolge an die Konsole Codierung und die Konsole ist nicht in der Lage, die Anzeige der Zeichenfolge. Versuchen Sie, schreiben Sie die Zeichenfolge in eine Datei und schau dir das Ergebnis mit ein paar anständige editor, der Unicode unterstützt:

import codecs

s = '(\xef\xbd\xa1\xef\xbd\xa5\xcf\x89\xef\xbd\xa5\xef\xbd\xa1)\xef\xbe\x89'
s1 = s.decode('utf-8')
f = codecs.open('out.txt', 'w', encoding='utf-8')
f.write(s1)
f.close()

Dann werden Sie sehen (｡･ω･｡)ﾉ.

InformationsquelleAutor der Antwort pepr

Keine Probleme mit meinem terminal. Die oben genannten Antworten halfen mir auf der Suche in die richtigen Richtungen, aber es funktionierte nicht für mich, bis ich Hinzugefügt 'ignore':

fix_encoding = lambda s: s.decode('utf8', 'ignore')

Wie in dem Kommentar unten, dies kann zu unerwünschten Resultaten führen. OTOH, es kann auch einfach nur den trick tun gut genug, um die Dinge zu arbeiten, und Sie kümmern sich nicht um den Verlust einiger Charaktere.

InformationsquelleAutor der Antwort guaka

Es sieht aus wie die Zeichenfolge codiert utf-8, also was genau ist das problem? Oder was versuchst du hier zu tun..?

Python 2.7.3 (default, Apr 20 2012, 22:39:59) 
[GCC 4.6.3] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> s = '(\xef\xbd\xa1\xef\xbd\xa5\xcf\x89\xef\xbd\xa5\xef\xbd\xa1)\xef\xbe\x89'
>>> s1 = s.decode('utf-8')
>>> print s1
(｡･ω･｡)ﾉ
>>> s2 = u'(｡･ω･｡)ﾉ'
>>> s2 == s1
True
>>> s2
u'(\uff61\uff65\u03c9\uff65\uff61)\uff89'

InformationsquelleAutor der Antwort wim

In meinem Fall, es wurde verursacht durch meine Unicode-Datei gespeichert, die mit einem "BOM". Um dieses Problem zu lösen, habe ich geknackt öffnen Sie die Datei mit BBEdit und hat eine "Speichern unter..." auswählen für die Codierung von "Unicode (UTF-8)" und nicht das, was er kam mit war der "Unicode (UTF-8 mit BOM)"

InformationsquelleAutor der Antwort user336828

Es ist in Ordnung, verwenden Sie den folgenden code in die oben in Ihrem Skript als Andrei Krasutski vorgeschlagen.

import sys
reload(sys)
sys.setdefaultencoding('utf-8')

Aber ich schlage vor, Sie auch hinzufügen # -*- coding: utf-8 -* Linie an ganz oben im script.

Weglassen, wirft er folgende Fehlermeldung in meinem Fall, wenn ich versuche, führen basic.py.

$ python basic.py
  File "01_basic.py", line 14
SyntaxError: Non-ASCII character '\xd9' in file basic.py on line 14, but no encoding declared; see http://python.org/dev/peps/pep-0263/ for details

Der folgende code ist der code vorhanden in basic.py die wirft obige Fehlermeldung.

code mit Fehler

from pylatex import Document, Section, Subsection, Command, Package
from pylatex.utils import italic, NoEscape

import sys
reload(sys)
sys.setdefaultencoding('utf-8')

def fill_document(doc):
    with doc.create(Section('ِش سثؤفهخى')):
        doc.append('إخع ساخعمي شمصشغس سحثشن فاث فقعفا')
        doc.append(italic('فشمهؤ ؤخىفثىفس شقث شمسخ ىهؤث'))

        with doc.create(Subsection('آثص ٍعلاسثؤفهخى')):
            doc.append('بشةخعس ؤقشئغ ؤاشقشؤفثقس: $&#{}')


if __name__ == '__main__':
    # Basic document
    doc = Document('basic')
    fill_document(doc)

Dann habe ich # -*- coding: utf-8 -*- Linie am oberen und ausgeführt. Es arbeitete.

code ohne Fehler

# -*- coding: utf-8 -*-
from pylatex import Document, Section, Subsection, Command, Package
from pylatex.utils import italic, NoEscape

import sys
reload(sys)
sys.setdefaultencoding('utf-8')

def fill_document(doc):
    with doc.create(Section('ِش سثؤفهخى')):
        doc.append('إخع ساخعمي شمصشغس سحثشن فاث فقعفا')
        doc.append(italic('فشمهؤ ؤخىفثىفس شقث شمسخ ىهؤث'))

        with doc.create(Subsection('آثص ٍعلاسثؤفهخى')):
            doc.append('بشةخعس ؤقشئغ ؤاشقشؤفثقس: $&#{}')


if __name__ == '__main__':
    # Basic document
    doc = Document('basic')
    fill_document(doc)

Dank.

InformationsquelleAutor der Antwort Rishikesh Agrawani

Dies ist die beste Antwort:
https://stackoverflow.com/a/4027726/2159089

in linux:

export PYTHONIOENCODING=utf-8

so sys.stdout.encoding ist OK.

InformationsquelleAutor der Antwort football

Einfach konvertieren Sie den text explizit auf string mit str(). Arbeitete für mich.

InformationsquelleAutor der Antwort Supratim Samantray