Как я могу определить, нашел ли .NET StreamReader спецификацию UTF8 в базовом потоке?

Я получаю FileStream(filename,FileMode.Open,FileAccess.Read,FileShare.ReadWrite), а затем StreamReader(stream,true).

Есть ли способ проверить, начинался ли поток с спецификации UTF8? Я замечаю, что файлы без спецификации считываются как UTF8 с помощью StreamReader.

Как я могу рассказать друг другу?

Ответы

Ответ 1

Вместо того, чтобы жестко кодировать байты, лучше использовать API

public string ConvertFromUtf8(byte[] bytes)
{
  var enc = new UTF8Encoding(true);
  var preamble = enc.GetPreamble();
  if (preamble.Where((p, i) => p != bytes[i]).Any()) 
    throw new ArgumentException("Not utf8-BOM");
  return enc.GetString(bytes.Skip(preamble.Length).ToArray());
}

Ответ 2

Помогает ли это? Вы проверяете первые три байта файла:

    public static void Main(string[] args)
    {
        FileStream fs = new FileStream("spork.txt", FileMode.Open);
        byte[] bits = new byte[3];
        fs.Read(bits, 0, 3);

        // UTF8 byte order mark is: 0xEF,0xBB,0xBF
        if (bits[0] == 0xEF && bits[1] == 0xBB && bits[2] == 0xBF)
        {

        }

        Console.ReadLine();
    }
}

Ответ 3

Вы можете определить, столкнулся ли StreamReader с спецификацией, инициализируя его с помощью кодировки UTF8 без спецификации и проверяя, изменится ли CurrentEncoding после первого чтения.

var utf8NoBom = new UTF8Encoding(false);
using (var reader = new StreamReader(file, utf8NoBom))
{
    reader.Read();
    if (Equals(reader.CurrentEncoding, utf8NoBom))
    {
        Console.WriteLine("No BOM");
    }
    else
    {
        Console.WriteLine("BOM detected");
    }
}