UTF-8 bajt [] na String

Załóżmy, że właśnie użyłem a BufferedInputStreamdo odczytania bajtów pliku tekstowego zakodowanego w UTF-8 do tablicy bajtów. Wiem, że mogę użyć poniższej procedury do konwersji bajtów na ciąg, ale czy istnieje bardziej wydajny / mądrzejszy sposób na zrobienie tego niż tylko iteracja po bajtach i konwersja każdego z nich?

public String openFileToString(byte[] _bytes)
{
    String file_string = "";

    for(int i = 0; i < _bytes.length; i++)
    {
        file_string += (char)_bytes[i];
    }

    return file_string;    
}

Spójrz na konstruktor String

String str = new String(bytes, StandardCharsets.UTF_8);

A jeśli czujesz się leniwy, możesz skorzystać z biblioteki Apache Commons IO do bezpośredniej konwersji InputStream na String:

String str = IOUtils.toString(inputStream, StandardCharsets.UTF_8);

Klasa Java String ma wbudowany konstruktor do konwersji tablicy bajtów na ciąg znaków.

byte[] byteArray = new byte[] {87, 79, 87, 46, 46, 46};

String value = new String(byteArray, "UTF-8");

Aby przekonwertować dane utf-8, nie można zakładać zgodności 1-1 między bajtami i znakami. Spróbuj tego:

String file_string = new String(bytes, "UTF-8");

(Bah. Widzę, że wolę naciskać przycisk Opublikuj swoją odpowiedź).

Aby odczytać cały plik jako ciąg znaków, wykonaj coś takiego:

public String openFileToString(String fileName) throws IOException
{
    InputStream is = new BufferedInputStream(new FileInputStream(fileName));

    try {
        InputStreamReader rdr = new InputStreamReader(is, "UTF-8");
        StringBuilder contents = new StringBuilder();
        char[] buff = new char[4096];
        int len = rdr.read(buff);
        while (len >= 0) {
            contents.append(buff, 0, len);
        }
        return buff.toString();
    } finally {
        try {
            is.close();
        } catch (Exception e) {
            // log error in closing the file
        }
    }
}

Możesz do tego użyć String(byte[] bytes) konstruktora. Zobacz ten link, aby uzyskać szczegółowe informacje. EDYCJA Musisz także wziąć pod uwagę domyślny zestaw znaków swojej płyty zgodnie z dokumentacją java:

Konstruuje nowy ciąg, dekodując określoną tablicę bajtów przy użyciu domyślnego zestawu znaków platformy. Długość nowego ciągu znaków jest funkcją zestawu znaków, a zatem może nie być równa długości tablicy bajtów. Zachowanie tego konstruktora, gdy podane bajty nie są prawidłowe w domyślnym zestawie znaków, nie jest określone. Klasa CharsetDecoder powinna być używana, gdy wymagana jest większa kontrola nad procesem dekodowania.

Możesz użyć metod opisanych w tym pytaniu (zwłaszcza, że ​​zaczynasz od InputStream): Odczyt / konwersja InputStream na Ciąg

W szczególności, jeśli nie chcesz polegać na bibliotekach zewnętrznych, możesz wypróbować tę odpowiedź , która odczytuje InputStreamvia InputStreamReaderdo char[]bufora i dołącza go do StringBuilder.

Wiedząc, że masz do czynienia z tablicą bajtów UTF-8, na pewno będziesz chciał użyć konstruktora String, który akceptuje nazwę zestawu znaków . W przeciwnym razie możesz narazić się na pewne luki w zabezpieczeniach oparte na kodowaniu zestawu znaków. Pamiętaj, że rzuca, z UnsupportedEncodingExceptionczym będziesz musiał sobie poradzić. Coś takiego:

public String openFileToString(String fileName) {
    String file_string;
    try {
        file_string = new String(_bytes, "UTF-8");
    } catch (UnsupportedEncodingException e) {
        // this should never happen because "UTF-8" is hard-coded.
        throw new IllegalStateException(e);
    }
    return file_string;
}

Oto uproszczona funkcja, która odczytuje bajty i tworzy ciąg znaków. Zakłada się, że prawdopodobnie już wiesz, w jakim kodowaniu znajduje się plik (a poza tym domyślnie).

static final int BUFF_SIZE = 2048;
static final String DEFAULT_ENCODING = "utf-8";

public static String readFileToString(String filePath, String encoding) throws IOException {

    if (encoding == null || encoding.length() == 0)
        encoding = DEFAULT_ENCODING;

    StringBuffer content = new StringBuffer();

    FileInputStream fis = new FileInputStream(new File(filePath));
    byte[] buffer = new byte[BUFF_SIZE];

    int bytesRead = 0;
    while ((bytesRead = fis.read(buffer)) != -1)
        content.append(new String(buffer, 0, bytesRead, encoding));

    fis.close();        
    return content.toString();
}

Łańcuch ma konstruktor, który przyjmuje parametry byte [] i charsetname jako parametry :)

Obejmuje to również iterację, ale jest to znacznie lepsze niż łączenie łańcuchów, ponieważ są one bardzo bardzo kosztowne.

public String openFileToString(String fileName)
{
    StringBuilder s = new StringBuilder(_bytes.length);

    for(int i = 0; i < _bytes.length; i++)
    {
        s.append((char)_bytes[i]);
    }

    return s.toString();    
}

Dlaczego nie wziąć tego, czego szukasz od samego początku i przeczytać ciąg z pliku zamiast tablicy bajtów? Coś jak:

BufferedReader in = new BufferedReader(new InputStreamReader( new FileInputStream( "foo.txt"), Charset.forName( "UTF-8"));

następnie czytaj Linia od wewnątrz, aż się skończy.

Używam w ten sposób

String strIn = new String(_bytes, 0, numBytes);