Что такое os.linesep?

Модуль Python os содержит значение для отдельной строки, разделяющей платформу, но документы явно не используют ее при записи в файл:

Не используйте os.linesep в качестве ограничителя строк при записи файлов, открытых в текстовом режиме (по умолчанию); вместо этого используйте один "\n" на всех платформах.

Docs

Предыдущие вопросы исследовали, почему вы не должны использовать его в этом контексте, но какой контекст он полезен? Когда следует использовать разделитель строк и для чего?

Ответы

Ответ 1

Документы явно говорят, что не использовать его при записи в файл

Это не точно, документ говорит, что он не использовал его в режиме текст.

os.linesep используется, когда вы хотите перебирать строки текстового файла. Внутренний сканер распознает os.linesep и заменит его на "\n".

Для иллюстрации мы пишем двоичный файл, который содержит 3 строки, разделенных символом "\ r\n" (разделитель Windows):

import io

filename = "text.txt"

content = b'line1\r\nline2\r\nline3'
with io.open(filename, mode="wb") as fd:
    fd.write(content)

Содержимое двоичного файла:

with io.open(filename, mode="rb") as fd:
    for line in fd:
        print(repr(line))

NB: я использовал режим "rb" для чтения файла в виде двоичного файла.

Я получаю:

b'line1\r\n'
b'line2\r\n'
b'line3'

Если я прочитал содержимое файла в текстовом режиме, например:

with io.open(filename, mode="r", encoding="ascii") as fd:
    for line in fd:
        print(repr(line))

Я получаю:

'line1\n'
'line2\n'
'line3'

Разделитель заменяется на "\n".

os.linesep также используется в режиме записи: любой символ "\n" преобразуется в разделитель строк по умолчанию системы: "\ r\n" в Windows, "\n" на POSIX и т.д.

С помощью функции io.open вы можете заставить разделитель строк использовать все, что хотите.

Пример: как написать текстовый файл Windows:

with io.open(filename, mode="w", encoding="ascii", newline="\r\n") as fd:
    fd.write("one\ntwo\nthree\n")

Если вы читаете этот файл в текстовом режиме, например:

with io.open(filename, mode="rb") as fd:
    content = fd.read()
    print(repr(content))

Вы получаете:

b'one\r\ntwo\r\nthree\r\n'

Ответ 2

Как вы знаете, чтение и запись файлов в текстовом режиме в python преобразует разделитель строк в конкретной платформе в '\n' и наоборот. Но если вы читаете файл в двоичном режиме, конверсия не происходит. Затем вы можете явно преобразовать окончания строк, используя string.replace(os.linesep, '\n'). Это может быть полезно, если файл (или поток или что-то еще) содержит комбинацию двоичных и текстовых данных.