Trong bài viết này, tôi sẽ minh họa nhập liệu nhiều dòng trong ứng dụng Go terminal. Trong bài viết trước, chúng ta đã thảo luận về cách phân tích cú pháp nhiều đầu vào từ người dùng trong Golang. Bây giờ, chúng tôi sẽ giới thiệu 3 phương pháp để đọc nhiều dòng từ bảng điều khiển
fmt.Scan[]bufio.Reader[]input text: line1 line2 line3 3 lines of text: line1 line2 line30
Phương pháp-1. Sử dụng để đọc nhiều dòng văn bản
input text:
line1
line2
line3
3 lines of text: line1 line2 line31. Quét quét văn bản được đọc từ đầu vào tiêu chuẩn, lưu trữ các giá trị được phân tách bằng dấu cách liên tiếp thành các đối số liên tiếp. Dòng mới được tính là khoảng trắng. Nó trả về số lượng mục được quét thành côngTrong ví dụ bên dưới, chúng ta sử dụng hàm
input text:
line1
line2
line3
3 lines of text: line1 line2 line32 để đọc 3 dòng từ stdin và lưu mỗi dòng dưới dạng một biếnpackage main
import [
"fmt"
"log"
]
func main[] {
fmt.Println["input text:"]
var line1, line2, line3 string
_, err := fmt.Scan[&line1, &line2, &line3]
if err != nil {
log.Fatal[err]
}
fmt.Printf["3 lines of text: %s %s %s\n", line1, line2, line3]
}
đầu ra
input text:
line1
line2
line3
3 lines of text: line1 line2 line3Lưu ý rằng hàm
input text:
line1
line2
line3
3 lines of text: line1 line2 line32 coi các dòng mới là khoảng trắng, vì vậy mỗi dòng không được chứa ký tự khoảng trắng
CŨNG ĐỌC. Lặp Golang qua Mảng [2 Phương thức]
Phương pháp-2. Sử dụng để đọc nhiều dòng văn bản
input text:
line1
line2
line3
3 lines of text: line1 line2 line34. ReadString đọc cho đến khi xuất hiện dấu phân cách đầu tiên trong đầu vào, trả về một chuỗi chứa dữ liệu cho đến và bao gồm cả dấu phân cách. Nếu ReadString gặp lỗi trước khi tìm thấy dấu phân cách, nó sẽ trả về dữ liệu đã đọc trước lỗi và chính lỗi đó [thường là io. EOF]Chúng tôi sẽ cho bạn thấy một ví dụ về cách sử dụng
input text:
line1
line2
line3
3 lines of text: line1 line2 line35 để nhập nhiều dòng văn bản cho đến khi dòng đó chỉ chứa các ký tự khoảng trắng________số 8_______đầu ra
Quảng cáo
input text:
This is GoLinuxCloud
Welcome to our website
output:
This is GoLinuxCloud
Welcome to our websiteLưu ý rằng hàm
input text:
line1
line2
line3
3 lines of text: line1 line2 line35 trả về một chuỗi chứa dữ liệu tối đa và bao gồm cả dấu phân cách, vì vậy tất cả các dòng sẽ chứa 'input text:
line1
line2
line3
3 lines of text: line1 line2 line37' ở cuối dòng
Phương pháp-3. Dùng để đọc nhiều dòng văn bản cho đến dòng trống
input text:
line1
line2
line3
3 lines of text: line1 line2 line38. Văn bản trả về mã thông báo gần đây nhất được tạo bởi lệnh gọi Quét dưới dạng một chuỗi mới được phân bổ chứa các byte của nóCŨNG ĐỌC. Golang io. Ví dụ về ReadCloser
Đây là một ví dụ về việc sử dụng
input text:
line1
line2
line3
3 lines of text: line1 line2 line39 để nhập nhiều dòng văn bản cho đến khi dòng nhập trốngpackage main
import [
"bufio"
"fmt"
"log"
"os"
]
func main[] {
fmt.Println["input text:"]
scanner := bufio.NewScanner[os.Stdin]
var lines []string
for {
scanner.Scan[]
line := scanner.Text[]
// break the loop if line is empty
if len[line] == 0 {
break
}
lines = append[lines, line]
}
err := scanner.Err[]
if err != nil {
log.Fatal[err]
}
fmt.Println["output:"]
for _, eachLine := range lines {
fmt.Println[eachLine]
}
}đầu ra
input text:
Today is Sunday
Have a nice weekend!
output:
Today is Sunday
Have a nice weekend!
Đọc nhiều dòng văn bản từ STDIN có điều kiện
Chúng tôi có thể sửa đổi mã từ Phần 3 để đọc các dòng từ bảng điều khiển và thêm một điều kiện để đọc cho đến khi nó đến một dòng chỉ chứa ký tự 'Q'
Một nhiệm vụ phổ biến trong lập trình là mở tệp và phân tích nội dung của nó. Bạn sẽ làm gì khi tệp bạn đang cố xử lý khá lớn, chẳng hạn như vài GB dữ liệu hoặc lớn hơn? . Mặc dù tùy thuộc vào bạn để xác định kích thước phù hợp cho các khối dữ liệu mà bạn đang xử lý, nhưng đối với nhiều ứng dụng, việc xử lý một tệp tại một thời điểm là phù hợp
Trong suốt bài viết này, chúng tôi sẽ đề cập đến một số ví dụ mã minh họa cách đọc tệp theo từng dòng. Trong trường hợp bạn muốn tự mình thử một số ví dụ này, bạn có thể tìm thấy mã được sử dụng trong bài viết này tại repo GitHub sau
Tệp IO cơ bản trong Python
Python là một ngôn ngữ lập trình có mục đích chung tuyệt vời và nó có một số chức năng IO tệp rất hữu ích trong thư viện tiêu chuẩn gồm các hàm và mô-đun tích hợp sẵn
Chức năng
fp.close[]
fp = open['path/to/file.txt', 'r']
Như đã trình bày ở trên, hàm
fp.close[]
fp.close[]
fp.close[]
fp.close[]
fp.close[]
fp.close[]
Khi bạn đã viết hoặc đọc tất cả dữ liệu mong muốn trong một đối tượng tệp, bạn cần đóng tệp để tài nguyên có thể được phân bổ lại trên hệ điều hành mà mã đang chạy trên đó
fp.close[]
Ghi chú. Việc đóng tài nguyên đối tượng tệp luôn là một phương pháp hay, nhưng đó là một nhiệm vụ rất dễ quên
Mặc dù bạn luôn có thể nhớ gọi
fp.close[]
Chỉ đơn giản bằng cách sử dụng từ khóa
fp.close[]
Một trong hai phương pháp này đều phù hợp, với ví dụ đầu tiên là Pythonic hơn
Đối tượng tệp được trả về từ hàm
fp.close[]
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
Ghi chú. Trong phần còn lại của bài viết này, chúng ta sẽ làm việc với văn bản của cuốn sách "Iliad of Homer", có thể tìm thấy tại gutenberg. org, cũng như trong repo GitHub chứa mã cho bài viết này
Đọc từng dòng tệp trong Python với readline[]
Hãy bắt đầu với phương pháp
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
Đoạn mã này mở một đối tượng tệp có tham chiếu được lưu trữ trong
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
...
Line 567: exceedingly trifling. We have no remaining inscription earlier than the
Line 568: fortieth Olympiad, and the early inscriptions are rude and unskilfully
Line 569: executed; nor can we even assure ourselves whether Archilochus, Simonides
Line 570: of Amorgus, Kallinus, Tyrtaeus, Xanthus, and the other early elegiac and
Line 571: lyric poets, committed their compositions to writing, or at what time the
Line 572: practice of doing so became familiar. The first positive ground which
Line 573: authorizes us to presume the existence of a manuscript of Homer, is in the
Line 574: famous ordinance of Solon, with regard to the rhapsodies at the
Line 575: Panathenaea: but for what length of time previously manuscripts had
Line 576: existed, we are unable to say.
...
Chạy mã này, bạn sẽ thấy một cái gì đó như sau
...
Line 567: exceedingly trifling. We have no remaining inscription earlier than the
Line 568: fortieth Olympiad, and the early inscriptions are rude and unskilfully
Line 569: executed; nor can we even assure ourselves whether Archilochus, Simonides
Line 570: of Amorgus, Kallinus, Tyrtaeus, Xanthus, and the other early elegiac and
Line 571: lyric poets, committed their compositions to writing, or at what time the
Line 572: practice of doing so became familiar. The first positive ground which
Line 573: authorizes us to presume the existence of a manuscript of Homer, is in the
Line 574: famous ordinance of Solon, with regard to the rhapsodies at the
Line 575: Panathenaea: but for what length of time previously manuscripts had
Line 576: existed, we are unable to say.
...
Mặc dù, cách tiếp cận này là thô và rõ ràng. Chắc chắn không phải là rất Pythonic. Chúng ta có thể sử dụng phương pháp
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
Đọc từng dòng tệp với readlines[]
Phương thức
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
...
Line 567: exceedingly trifling. We have no remaining inscription earlier than the
Line 568: fortieth Olympiad, and the early inscriptions are rude and unskilfully
Line 569: executed; nor can we even assure ourselves whether Archilochus, Simonides
Line 570: of Amorgus, Kallinus, Tyrtaeus, Xanthus, and the other early elegiac and
Line 571: lyric poets, committed their compositions to writing, or at what time the
Line 572: practice of doing so became familiar. The first positive ground which
Line 573: authorizes us to presume the existence of a manuscript of Homer, is in the
Line 574: famous ordinance of Solon, with regard to the rhapsodies at the
Line 575: Panathenaea: but for what length of time previously manuscripts had
Line 576: existed, we are unable to say.
...
...
Line 567: exceedingly trifling. We have no remaining inscription earlier than the
Line 568: fortieth Olympiad, and the early inscriptions are rude and unskilfully
Line 569: executed; nor can we even assure ourselves whether Archilochus, Simonides
Line 570: of Amorgus, Kallinus, Tyrtaeus, Xanthus, and the other early elegiac and
Line 571: lyric poets, committed their compositions to writing, or at what time the
Line 572: practice of doing so became familiar. The first positive ground which
Line 573: authorizes us to presume the existence of a manuscript of Homer, is in the
Line 574: famous ordinance of Solon, with regard to the rhapsodies at the
Line 575: Panathenaea: but for what length of time previously manuscripts had
Line 576: existed, we are unable to say.
...
file = open['Iliad.txt', 'r']
lines = file.readlines[]
for index, line in enumerate[lines]:
print["Line {}: {}".format[index, line.strip[]]]
file.close[]
Hãy xem hướng dẫn thực hành, thực tế của chúng tôi để học Git, với các phương pháp hay nhất, tiêu chuẩn được ngành chấp nhận và bao gồm bảng gian lận. Dừng các lệnh Git trên Google và thực sự tìm hiểu nó
Kết quả này trong
...
Line 160: INTRODUCTION.
Line 161:
Line 162:
Line 163: Scepticism is as much the result of knowledge, as knowledge is of
Line 164: scepticism. To be content with what we at present know, is, for the most
Line 165: part, to shut our ears against conviction; since, from the very gradual
Line 166: character of our education, we must continually forget, and emancipate
Line 167: ourselves from, knowledge previously acquired; we must set aside old
Line 168: notions and embrace fresh ones; and, as we learn, we must be daily
Line 169: unlearning something which it has cost us no small labour and anxiety to
Line 170: acquire.
...
Bây giờ, mặc dù tốt hơn nhiều, chúng ta thậm chí không cần gọi phương thức
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
Đọc từng dòng tệp bằng vòng lặp for - Cách tiếp cận Pythonic nhất
Bản thân
...
Line 567: exceedingly trifling. We have no remaining inscription earlier than the
Line 568: fortieth Olympiad, and the early inscriptions are rude and unskilfully
Line 569: executed; nor can we even assure ourselves whether Archilochus, Simonides
Line 570: of Amorgus, Kallinus, Tyrtaeus, Xanthus, and the other early elegiac and
Line 571: lyric poets, committed their compositions to writing, or at what time the
Line 572: practice of doing so became familiar. The first positive ground which
Line 573: authorizes us to presume the existence of a manuscript of Homer, is in the
Line 574: famous ordinance of Solon, with regard to the rhapsodies at the
Line 575: Panathenaea: but for what length of time previously manuscripts had
Line 576: existed, we are unable to say.
...
filepath = 'Iliad.txt'
with open[filepath] as fp:
line = fp.readline[]
cnt = 1
while line:
print["Line {}: {}".format[cnt, line.strip[]]]
line = fp.readline[]
cnt += 1
...
Line 567: exceedingly trifling. We have no remaining inscription earlier than the
Line 568: fortieth Olympiad, and the early inscriptions are rude and unskilfully
Line 569: executed; nor can we even assure ourselves whether Archilochus, Simonides
Line 570: of Amorgus, Kallinus, Tyrtaeus, Xanthus, and the other early elegiac and
Line 571: lyric poets, committed their compositions to writing, or at what time the
Line 572: practice of doing so became familiar. The first positive ground which
Line 573: authorizes us to presume the existence of a manuscript of Homer, is in the
Line 574: famous ordinance of Solon, with regard to the rhapsodies at the
Line 575: Panathenaea: but for what length of time previously manuscripts had
Line 576: existed, we are unable to say.
...
Đây là cách tiếp cận ngắn nhất, Pythonic nhất để giải quyết vấn đề và cách tiếp cận được hầu hết mọi người ưa chuộng.
with open['Iliad.txt'] as f:
for index, line in enumerate[f]:
print["Line {}: {}".format[index, line.strip[]]]
Kết quả này trong
...
Line 277: Mentes, from Leucadia, the modern Santa Maura, who evinced a knowledge and
Line 278: intelligence rarely found in those times, persuaded Melesigenes to close
Line 279: his school, and accompany him on his travels. He promised not only to pay
Line 280: his expenses, but to furnish him with a further stipend, urging, that,
Line 281: "While he was yet young, it was fitting that he should see with his own
Line 282: eyes the countries and cities which might hereafter be the subjects of his
Line 283: discourses." Melesigenes consented, and set out with his patron,
Line 284: "examining all the curiosities of the countries they visited, and
...
Ở đây, chúng tôi đang tận dụng các chức năng tích hợp sẵn của Python cho phép chúng tôi lặp lại dễ dàng trên một đối tượng có thể lặp lại, chỉ cần sử dụng vòng lặp
file = open['Iliad.txt', 'r']
lines = file.readlines[]
for index, line in enumerate[lines]:
print["Line {}: {}".format[index, line.strip[]]]
file.close[]
Làm thế nào bạn có thể sử dụng điều này thực tế? . Hầu hết thời gian, sẽ không khôn ngoan nếu đọc toàn bộ kho ngữ liệu vào bộ nhớ. Mặc dù thô sơ, bạn có thể viết một giải pháp từ đầu để đếm tần suất của một số từ nhất định mà không cần sử dụng bất kỳ thư viện bên ngoài nào. Hãy viết một tập lệnh đơn giản tải vào một tệp, đọc từng dòng một và đếm tần suất xuất hiện của các từ, in ra 10 từ thường xuyên nhất và số lần xuất hiện của chúng
import sys
import os
def main[]:
filepath = sys.argv[1]
if not os.path.isfile[filepath]:
print["File path {} does not exist. Exiting...".format[filepath]]
sys.exit[]
bag_of_words = {}
with open[filepath] as fp:
for line in fp:
record_word_cnt[line.strip[].split[' '], bag_of_words]
sorted_words = order_bag_of_words[bag_of_words, desc=True]
print["Most frequent 10 words {}".format[sorted_words[:10]]]
def order_bag_of_words[bag_of_words, desc=False]:
words = [[word, cnt] for word, cnt in bag_of_words.items[]]
return sorted[words, key=lambda x: x[1], reverse=desc]
def record_word_cnt[words, bag_of_words]:
for word in words:
if word != '':
if word.lower[] in bag_of_words:
bag_of_words[word.lower[]] += 1
else:
bag_of_words[word.lower[]] = 1
if __name__ == '__main__':
main[]
Tập lệnh sử dụng mô-đun
file = open['Iliad.txt', 'r']
lines = file.readlines[]
for index, line in enumerate[lines]:
print["Line {}: {}".format[index, line.strip[]]]
file.close[]
file = open['Iliad.txt', 'r']
lines = file.readlines[]
for index, line in enumerate[lines]:
print["Line {}: {}".format[index, line.strip[]]]
file.close[]
file = open['Iliad.txt', 'r']
lines = file.readlines[]
for index, line in enumerate[lines]:
print["Line {}: {}".format[index, line.strip[]]]
file.close[]
file = open['Iliad.txt', 'r']
lines = file.readlines[]
for index, line in enumerate[lines]:
print["Line {}: {}".format[index, line.strip[]]]
file.close[]
file = open['Iliad.txt', 'r']
lines = file.readlines[]
for index, line in enumerate[lines]:
print["Line {}: {}".format[index, line.strip[]]]
file.close[]
Cuối cùng, chúng tôi in mười từ phổ biến nhất
Thông thường, đối với điều này, bạn sẽ tạo Mô hình Túi từ, sử dụng các thư viện như NLTK, tuy nhiên, việc triển khai này sẽ đủ. Hãy chạy tập lệnh và cung cấp
file = open['Iliad.txt', 'r']
lines = file.readlines[]
for index, line in enumerate[lines]:
print["Line {}: {}".format[index, line.strip[]]]
file.close[]
$ python app.py Iliad.txt
Kết quả này trong
fp.close[]
Phần kết luận
Trong bài viết này, chúng ta đã khám phá nhiều cách để đọc từng dòng một tệp trong Python, cũng như tạo mô hình Túi từ thô sơ để tính toán tần suất của các từ trong một tệp nhất định