entfernen von ungültigen XML-Zeichen aus einem string in java

Hi
ich möchte zum entfernen aller ungültigen XML-Zeichen aus einem string.
ich möchte einen regulären Ausdruck zu verwenden, die mit der Zeichenfolge.replace-Methode.

wie

line.replace(regExp,"");

was ist die richtige regExp zu verwenden ?

ungültige XML-Zeichen ist alles, was nicht diesem :

[#x1-#xD7FF] | [#xE000-#xFFFD] | [#x10000-#x10FFFF]

Dank.

InformationsquelleAutor der Frage yossi | 2010-11-21

Java regex unterstützt, die zusätzliche Zeichenso können Sie angeben, denen hohe Reichweiten mit zwei UTF-16-codierten Zeichen.

Hier ist das Muster für das entfernen von Zeichen, die illegal in XML 1.0:

//XML 1.0
//#x9 | #xA | #xD | [#x20-#xD7FF] | [#xE000-#xFFFD] | [#x10000-#x10FFFF]
String xml10pattern = "[^"
                    + "\u0009\r\n"
                    + "\u0020-\uD7FF"
                    + "\uE000-\uFFFD"
                    + "\ud800\udc00-\udbff\udfff"
                    + "]";

Meisten Menschen wollen, dass die XML-version 1.0.

Hier ist das Muster für das entfernen von Zeichen, die illegal in XML-1.1:

//XML 1.1
//[#x1-#xD7FF] | [#xE000-#xFFFD] | [#x10000-#x10FFFF]
String xml11pattern = "[^"
                    + "\u0001-\uD7FF"
                    + "\uE000-\uFFFD"
                    + "\ud800\udc00-\udbff\udfff"
                    + "]+";

Müssen Sie - String.replaceAll(...) und nicht String.replace(...).

String illegal = "Hello, World!\0";
String legal = illegal.replaceAll(pattern, "");

InformationsquelleAutor der Antwort McDowell

Sollten wir Ersatzzeichen? sonst '(aktuelle >= 0x10000) && (aktuelle <= 0x10FFFF) " wird niemals wahr sein.

Auch getestet, dass die regex-Weg scheint langsamer als die folgende Schleife.

if (null == text || text.isEmpty()) {
    return text;
}
final int len = text.length();
char current = 0;
int codePoint = 0;
StringBuilder sb = new StringBuilder();
for (int i = 0; i < len; i++) {
    current = text.charAt(i);
    boolean surrogate = false;
    if (Character.isHighSurrogate(current)
            && i + 1 < len && Character.isLowSurrogate(text.charAt(i + 1))) {
        surrogate = true;
        codePoint = text.codePointAt(i++);
    } else {
        codePoint = current;
    }
    if ((codePoint == 0x9) || (codePoint == 0xA) || (codePoint == 0xD)
            || ((codePoint >= 0x20) && (codePoint <= 0xD7FF))
            || ((codePoint >= 0xE000) && (codePoint <= 0xFFFD))
            || ((codePoint >= 0x10000) && (codePoint <= 0x10FFFF))) {
        sb.append(current);
        if (surrogate) {
            sb.append(text.charAt(i));
        }
    }
}

InformationsquelleAutor der Antwort Jun

Jun-Lösung, vereinfacht. Mit StringBuffer#appendCodePoint(int)ich brauche keine char current oder String#charAt(int). Ich kann sagen, ein ersatzpaar mit der überprüfung, ob codePoint größer ist als 0xFFFF.

(Es ist nicht erforderlich, i++, da ein niedriges Surrogat würde nicht den filter passieren. Aber dann würde man re-verwenden Sie den code für die verschiedenen code-Punkte und es würde fehlschlagen. Ich bevorzuge Programmierung zu hacken.)

StringBuilder sb = new StringBuilder();
for (int i = 0; i < text.length(); i++) {
    int codePoint = text.codePointAt(i);
    if (codePoint > 0xFFFF) {
        i++;
    }
    if ((codePoint == 0x9) || (codePoint == 0xA) || (codePoint == 0xD)
            || ((codePoint >= 0x20) && (codePoint <= 0xD7FF))
            || ((codePoint >= 0xE000) && (codePoint <= 0xFFFD))
            || ((codePoint >= 0x10000) && (codePoint <= 0x10FFFF))) {
        sb.appendCodePoint(codePoint);
    }
}

InformationsquelleAutor der Antwort Vlasec

Vom Daneben McLaren ' s Weblog

  /**
   * This method ensures that the output String has only
   * valid XML unicode characters as specified by the
   * XML 1.0 standard. For reference, please see
   * <a href="http://www.w3.org/TR/2000/REC-xml-20001006#NT-Char">the
   * standard</a>. This method will return an empty
   * String if the input is null or empty.
   *
   * @param in The String whose non-valid characters we want to remove.
   * @return The in String, stripped of non-valid characters.
   */
  public static String stripNonValidXMLCharacters(String in) {
      StringBuffer out = new StringBuffer(); //Used to hold the output.
      char current; //Used to reference the current character.

      if (in == null || ("".equals(in))) return ""; //vacancy test.
      for (int i = 0; i < in.length(); i++) {
          current = in.charAt(i); //NOTE: No IndexOutOfBoundsException caught here; it should not happen.
          if ((current == 0x9) ||
              (current == 0xA) ||
              (current == 0xD) ||
              ((current >= 0x20) && (current <= 0xD7FF)) ||
              ((current >= 0xE000) && (current <= 0xFFFD)) ||
              ((current >= 0x10000) && (current <= 0x10FFFF)))
              out.append(current);
      }
      return out.toString();
  }

InformationsquelleAutor der Antwort Renaud

Alle diese Antworten, die bisher nur ersetzen Sie das Zeichen selbst. Aber manchmal ist ein XML-Dokument wird mit ungültigen XML-entity-Sequenzen resultiert in Fehler. Zum Beispiel, wenn Sie  in Ihrer xml -, java-xml-parser werfen Illegal character entity: expansion character (code 0x2 at ....

Hier ist ein einfaches java-Programm ersetzen kann, dass diese ungültig Person-Sequenzen.

  public final Pattern XML_ENTITY_PATTERN = Pattern.compile("\\&\\#(?:x([0-9a-fA-F]+)|([0-9]+))\\;");

  /**
   * Remove problematic xml entities from the xml string so that you can parse it with java DOM /SAX libraries.
   */
  String getCleanedXml(String xmlString) {
    Matcher m = XML_ENTITY_PATTERN.matcher(xmlString);
    Set<String> replaceSet = new HashSet<>();
    while (m.find()) {
      String group = m.group(1);
      int val;
      if (group != null) {
        val = Integer.parseInt(group, 16);
        if (isInvalidXmlChar(val)) {
          replaceSet.add("&#x" + group + ";");
        }
      } else if ((group = m.group(2)) != null) {
        val = Integer.parseInt(group);
        if (isInvalidXmlChar(val)) {
          replaceSet.add("&#" + group + ";");
        }
      }
    }
    String cleanedXmlString = xmlString;
    for (String replacer : replaceSet) {
      cleanedXmlString = cleanedXmlString.replaceAll(replacer, "");
    }
    return cleanedXmlString;
  }

  private boolean isInvalidXmlChar(int val) {
    if (val == 0x9 || val == 0xA || val == 0xD ||
            val >= 0x20 && val <= 0xD7FF ||
            val >= 0x10000 && val <= 0x10FFFF) {
      return false;
    }
    return true;
  }

InformationsquelleAutor der Antwort Nicholas DiPiazza

Vom Beste Art und Weise zum codieren von text-Daten für XML-Daten in Java?

String xmlEscapeText(String t) {
   StringBuilder sb = new StringBuilder();
   for(int i = 0; i < t.length(); i++){
      char c = t.charAt(i);
      switch(c){
      case '<': sb.append("&lt;"); break;
      case '>': sb.append("&gt;"); break;
      case '\"': sb.append("&quot;"); break;
      case '&': sb.append("&amp;"); break;
      case '\'': sb.append("&apos;"); break;
      default:
         if(c>0x7e) {
            sb.append("&#"+((int)c)+";");
         }else
            sb.append(c);
      }
   }
   return sb.toString();
}

InformationsquelleAutor der Antwort Roger F. Gay

0

Wenn Sie wollen, um text zu speichern Elemente mit den Verbotenen Zeichen in XML-form, die Sie verwenden können, XPL, statt. Das dev-kit ermöglicht den gleichzeitigen XPL zu XML und XML-Verarbeitung, was bedeutet, keine Zeit Kosten, um die übersetzung aus dem XPL-XML. Oder, wenn Sie nicht brauchen die volle Leistung von XML (namespaces) können Sie nur verwenden, XPL.

Web-Seite: HLL XPL

InformationsquelleAutor der Antwort Roger F. Gay

String xmlData = xmlData.codePoints().filter(c -> isValidXMLChar(c)).collect(StringBuilder::new,
                StringBuilder::appendCodePoint, StringBuilder::append).toString();

private boolean isValidXMLChar(int c) {
    if((c == 0x9) ||
       (c == 0xA) ||
       (c == 0xD) ||
       ((c >= 0x20) && (c <= 0xD7FF)) ||
       ((c >= 0xE000) && (c <= 0xFFFD)) ||
       ((c >= 0x10000) && (c <= 0x10FFFF)))
    {
        return true;
    }
    return false;
}

InformationsquelleAutor der Antwort Hans Schreuder

-2

Ich glaube, dass der folgende Artikel kann Ihnen dabei helfen.

http://commons.apache.org/lang/api-2.1/org/apache/commons/lang/StringEscapeUtils.html
http://www.javapractices.com/topic/TopicAction.do?Id=96

Kurz, versuchen, Sie zu nutzen StringEscapeUtils aus dem Jakarta-Projekt.

InformationsquelleAutor der Antwort AlexR

Schreibe einen Kommentar

Du musst angemeldet sein, um einen Kommentar abzugeben.