Comment puis-je parcourir les points de code Unicode d'une chaîne Java?

Donc, je sais String#codePointAt(int), mais il est indexé par le chardécalage, pas par le décalage du point de code.

Je pense essayer quelque chose comme:

• utilisation String#charAt(int)pour obtenir charun index
• tester si le charest dans la gamme des substituts élevés
  • si c'est le cas, utilisez String#codePointAt(int)pour obtenir le point de code et incrémentez l'index de 2
  • sinon, utilisez la charvaleur donnée comme point de code et incrémentez l'index de 1

Mais mes inquiétudes sont

• Je ne sais pas si les points de code qui sont naturellement dans la plage des substituts élevés seront stockés sous forme de deux charvaleurs ou une
• cela semble être un moyen extrêmement coûteux d'itérer les personnages
• quelqu'un a dû trouver quelque chose de mieux.

Oui, Java utilise un encodage UTF-16-esque pour les représentations internes des chaînes et, oui, il encode les caractères en dehors du plan multilingue de base ( BMP ) en utilisant le schéma de substitution.

Si vous savez que vous aurez affaire à des caractères en dehors du BMP, voici la manière canonique d'itérer sur les caractères d'une chaîne Java:

final int length = s.length();
for (int offset = 0; offset < length; ) {
   final int codepoint = s.codePointAt(offset);

   // do something with the codepoint

   offset += Character.charCount(codepoint);
}

Java 8 ajouté CharSequence#codePointsqui renvoie un IntStreamcontenant les points de code. Vous pouvez utiliser le flux directement pour les parcourir:

string.codePoints().forEach(c -> ...);

ou avec une boucle for en collectant le flux dans un tableau:

for(int c : string.codePoints().toArray()){
    ...
}

Ces moyens sont probablement plus chers que la solution de Jonathan Feinbergs , mais ils sont plus rapides à lire / écrire et la différence de performances sera généralement insignifiante.

L'itération sur les points de code est déposée en tant que demande de fonctionnalité chez Sun.

Voir Sun Bug Entry

Il existe également un exemple sur la façon d'itérer sur des String CodePoints.

Je pensais que j'ajouterais une méthode de contournement qui fonctionne avec les boucles foreach ( ref ), plus vous pouvez la convertir en la nouvelle chaîne # codePoints de java 8 facilement en méthode de java 8 lorsque vous passez à java 8:

Vous pouvez l'utiliser avec foreach comme ceci:

 for(int codePoint : codePoints(myString)) {
   ....
 }

Voici le mthod d'aide:

public static Iterable<Integer> codePoints(final String string) {
  return new Iterable<Integer>() {
    public Iterator<Integer> iterator() {
      return new Iterator<Integer>() {
        int nextIndex = 0;
        public boolean hasNext() {
          return nextIndex < string.length();
        }
        public Integer next() {
          int result = string.codePointAt(nextIndex);
          nextIndex += Character.charCount(result);
          return result;
        }
        public void remove() {
          throw new UnsupportedOperationException();
        }
      };
    }
  };
}

Ou bien si vous souhaitez simplement convertir une chaîne en un tableau d'int (qui peut utiliser plus de RAM que l'approche ci-dessus):

 public static List<Integer> stringToCodePoints(String in) {
    if( in == null)
      throw new NullPointerException("got null");
    List<Integer> out = new ArrayList<Integer>();
    final int length = in.length();
    for (int offset = 0; offset < length; ) {
      final int codepoint = in.codePointAt(offset);
      out.add(codepoint);
      offset += Character.charCount(codepoint);
    }
    return out;
  }

Utilise heureusement "codePoints" gère en toute sécurité la paire de substitution de UTF-16 (représentation de chaîne interne de Java).