个人使用中发现，按行读取较大文件 10～100MB ，使用 ReadSlice() 比 scanner.Scan() 性能好一些。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
package main
import (
"bufio"
"errors"
"fmt"
"io"
"strings"
)
func Grep(reader io.Reader, str string) error {
var buf strings.Builder
r := bufio.NewReaderSize(reader, 64*1024)
for {
frag, err := r.ReadSlice('\n')
if err == bufio.ErrBufferFull {
buf.Write(frag)
continue // partial line
}
if err == io.EOF {
if len(frag) == 0 {
break
}
} else if err != nil {
return errors.New("index parse error: " + err.Error())
}
buf.Write(frag)
line := buf.String()
pos := strings.Index(line, str)
if pos != -1 {
fmt.Printf(line)
}
buf.Reset()
}
return nil
}
func main() {
r := strings.NewReader("line 1\nline 2 test\nline3\nline test4")
_ = Grep(r, "test")
}
本文网址: https://golangnote.com/topic/307.html 转摘请注明来源