Python3でファイルを読み書きするとき、改行コードはどうなるの？

newline引数に「None」を渡す

open()関数のnewline引数に「None」（newline引数を省略したときもデフォルトのNoneになる）を渡して呼び出すと、universal newlinesモードが有効になります。そして認識した改行コードを呼び出し元に返す前に「\n」へ変換します。

次のCRLF.txtを読み込む例を見てみましょう。行は正しく分割され、改行コードは「\n」に置き換わっています。

>>> read_test('CRLF.txt', None)
['crlf\n', 'crlf\n']

最初なので詳しく説明しましょう。ただし、実際にコードを確認したわけではないので厳密には異なるかもしれませんが、実用上はこのように理解しておけば十分でしょう。

1. read_test()関数を呼び出すと、「’CRLF.txt'」と「None」を引数にopen()関数を呼び出す。
2. open()関数が返したファイルオブジェクトに対してreadlines()メソッドを呼び出す。
3. readlines()メソッドは、読み込んだテキストファイルから改行コードを「\r\n」と認識し、「\r\n」で行を分割すると共に「\n」に置き換える。そして各行を要素とするリストを呼び出し元に返す。
4. readlines()メソッドがリストを返したら、それをそのままread_test()関数が呼び出し元に返す。
5. read_test()関数が返したリストは、対話型インタープリタによって表示される。

次にLF.txtを読み込む例を見てみましょう。

>>> read_test('LF.txt', None)
['lf\n', 'lf\n']

予想通りの結果になっているだろうか。これは例では改行コードを「\n」と認識し、「\n」に変換しているはずである。実際、そのような結果になっています。

newline引数に「''」を渡す

open()関数のnewline引数に「''」を渡すと、universal newlinesモードが有効になります。しかし、認識した改行コードを変換することはしない。

次の実行例を見てみましょう。

>>> read_test('CRLF.txt', '')
['crlf\r\n', 'crlf\r\n']
>>> read_test('LF.txt', '')
['lf\n', 'lf\n']

CRLF.txtを読んだ場合、改行コードは「\r\n」と認識されますが、「\r\n」は変換されずそのままです。

LF.txtを読んだ場合、改行コードは「\n」と認識されるが、同様に「\n」は変換されずそのままです。

newline引数に「'\n'」を渡す

open()関数のnewline引数に「'\n'」を渡すと、「\n」が改行コードと認識されるが、改行コード「\n」は変換されずにそのまま返される。

実行例を見てみましょう。

>>> read_test('CRLF.txt', '\n')
['crlf\r\n', 'crlf\r\n']
>>> read_test('LF.txt', '\n')
['lf\n', 'lf\n']

CRLF.txt、LF.txtのどちらを読み込んでも、改行コードは「\n」と認識される。そして「\n」は変換されない。

newline引数に「'\r\n'」を渡す

open()関数のnewline引数に「'\r\n'」を渡すと、改行コードは「\r\n」と認識されるが、「\r\n」を変換しないでそのまま返す。

実行例は次の通りです。

>>> read_test('CRLF.txt', '\r\n')
['crlf\r\n', 'crlf\r\n']
>>> read_test('LF.txt', '\r\n')
['lf\nlf\n']

CRLF.txtを読み込むと、改行コードを「\r\n」と認識するが、「\r\n」は変換されずそのままです。

一方、LF.txtを読み込むと、改行コードを「\r\n」と認識するので、改行コードが見つからず1行として返されている。

newline引数に「None」を渡す。

open()関数のnewline引数に「None」を渡すと、「\n」を os.linesep に置き換えて出力する。

まずはMacで実行したものを確認してみましょう。Macで実行すると os.linesep は「\n」になるので、「\n」が「\n」に置き換えられるので、テキストの内容は変わらずファイルへ書き込まれます。

>>> write_test(None, 'A\r\nB\r\n')

$ od -c write_test
0000000    A  \r  \n   B  \r  \n
0000006

次にWindowsで実行てみます。Windowsで実行すると os.linesep は「\r\n」になるので、「\n」が「\r\n」に変換されてファイルへ書き込まれます。

>>> write_test(None, 'A\r\nB\r\n')
$ od -c write_test
0000000    A  \r  \r  \n   B  \r  \r  \n
0000010

newline引数に「''」または「'\n'」を渡す。

open()関数のnewline引数に「''」か「'\n'」を渡すと、何も変換は行われず、テキストはそのままファイルへ書き込まれます。

>>> write_test('', 'A\r\nB\r\n')

$ od -c write_test
0000000    A  \r  \n   B  \r  \n
0000006

>>> write_test('\n', 'A\r\nB\r\n')

$ od -c write_test
0000000    A  \r  \n   B  \r  \n
0000006

newline引数に「'\r\n'」を渡す。

open()関数のnewline引数に「'\r\n'」を渡すと、テキストの「\n」は「\r\n」に変換されてファイルへ書き込まれます。

>>> write_test('\r\n', 'A\r\nB\r\n')

$ od -c write_test
0000000    A  \r  \r  \n   B  \r  \r  \n
0000010