python怎么讀取文件指定行

本文小編為大家詳細介紹“python怎么讀取文件指定行”，內容詳細，步驟清晰，細節處理妥當，希望這篇“python怎么讀取文件指定行”文章能幫助大家解決疑惑，下面跟著小編的思路慢慢深入，一起來學習新知識吧。

行遍歷實現

在python中如果要將一個文件完全加載到內存中，通過file.readlines()即可，但是在文件占用較高時，我們是無法完整的將文件加載到內存中的，這時候就需要用到python的file.readline()進行迭代式的逐行讀取：

filename = 'hello.txt'

with open(filename, 'r') as file:
    line = file.readline()
    counts = 1
    while line:
        if counts >= 50000000:
            break
        line = file.readline()
        counts += 1

這里我們的實現方式是先用一個with語句打開一個文件，然后用readline()函數配合while循環逐行加載，最終通過一個序號標記來結束循環遍歷，輸出文件第50000000行的內容。該代碼的執行效果如下：

dechin@ubuntu2004:~/projects/gitlab/dechin/$ time python3 get_line.py 

real    0m10.359s
user    0m10.062s
sys     0m0.296s

可以看到這里的耗時為10s多一些。

linecache實現

雖然在python的readline函數中并沒有實現讀取指定行內容的方案，但是在另一個庫linecache中是實現了的，由于使用的方式較為簡單，這里直接放上代碼示例供參考：

filename = 'hello.txt'

import linecache
text = linecache.getline(filename, 50000000)

該代碼的執行結果如下：

dechin@ubuntu2004:~/projects/gitlab/dechin/$ time python3 get_line.py 

real    0m11.904s
user    0m5.672s
sys     0m6.231s

雖然在實現方式上簡化了許多，但是我們發現這個實現的用時超過了11s，還不如我們自己手動實現的循環遍歷方案。因此如果是對于性能有一定要求的場景，是不建議采用這個方案的。

命令行sed獲取

我們知道用Linux系統本身自帶的sed指令也是可以獲取到文件指定行或者是指定行范圍的數據的，其執行指令為：sed -n 50000000p filename即表示讀取文件的第50000000行的內容。同時結合python的話，我們可以在python代碼中執行系統指令并獲取輸出結果：

filename = 'hello.txt'

import os
result = os.popen('sed -n {}p {}'.format(50000000, filename)).read()

需要注意的是，如果直接運行os.system()是沒有返回值的，只有os.popen()是有返回值的，并且需要在尾巴加上一個read()的選項。該代碼的執行結果如下：

dechin@ubuntu2004:~/projects/gitlab/dechin/$ time python3 get_line.py 

real    0m2.532s
user    0m0.032s
sys     0m0.020s

可以看到直接使用sed指令的執行速度很快，但是用這種方法并不是一本萬利的，比如以下這個例子：

filename = 'hello.txt'

import os
result = os.popen('sed -n {}p {}'.format(500, filename)).read()

我們把讀取第50000000行內容改為讀取第500行的內容，再運行一次程序：

dechin@ubuntu2004:~/projects/gitlab/dechin/$ time python3 get_line.py 

real    0m2.540s
user    0m0.037s
sys     0m0.013s

然而我們發現這個速度并沒有因為要讀取的行數減少了而變少，而是幾乎保持不變的。

讀到這里，這篇“python怎么讀取文件指定行”文章已經介紹完畢，想要掌握這篇文章的知識點還需要大家自己動手實踐使用過才能領會，如果想了解更多相關內容的文章，歡迎關注億速云行業資訊頻道。