Simplified splitter to use a single scanner and respect comment lines
This commit is contained in:
parent
1fcf9f1291
commit
e8d45282e8
119
main.go
119
main.go
@ -4,8 +4,6 @@ import (
|
|||||||
"fmt"
|
"fmt"
|
||||||
"os"
|
"os"
|
||||||
"bufio"
|
"bufio"
|
||||||
"strings"
|
|
||||||
"unicode/utf8"
|
|
||||||
)
|
)
|
||||||
|
|
||||||
func main(){
|
func main(){
|
||||||
@ -22,82 +20,65 @@ func main(){
|
|||||||
}
|
}
|
||||||
defer file.Close()
|
defer file.Close()
|
||||||
|
|
||||||
lscan := bufio.NewScanner(file)
|
scan := bufio.NewScanner(file)
|
||||||
lscan.Split(bufio.ScanLines)
|
scan.Split(Split)
|
||||||
for lscan.Scan() {
|
for scan.Scan() {
|
||||||
line := lscan.Text()
|
word := scan.Text()
|
||||||
// Ignore comments
|
fmt.Printf("[%s] ", word)
|
||||||
if len(line) < 1 || line[0] == '#' {
|
|
||||||
continue
|
|
||||||
}
|
|
||||||
|
|
||||||
wscan := bufio.NewScanner(strings.NewReader(line))
|
|
||||||
wscan.Split(ScanWords)
|
|
||||||
for wscan.Scan() {
|
|
||||||
word := wscan.Text()
|
|
||||||
fmt.Printf("[%s] ", word)
|
|
||||||
}
|
|
||||||
}
|
}
|
||||||
fmt.Printf("\n")
|
fmt.Printf("\n")
|
||||||
}
|
}
|
||||||
|
|
||||||
func ScanWords(data []byte, atEOF bool) (int, []byte, error) {
|
func Split(data []byte, atEOF bool) (int, []byte, error) {
|
||||||
start := 0
|
var ignoreline bool
|
||||||
quote := int32(0)
|
var started bool
|
||||||
for start < len(data) {
|
var startidx int
|
||||||
r, w := utf8.DecodeRune(data[start:])
|
var quote byte
|
||||||
if !isSpace(r) {
|
|
||||||
if isQuote(r) {
|
for i := 0; i < len(data); i++ {
|
||||||
quote = r
|
c := data[i]
|
||||||
start += w
|
switch c {
|
||||||
}
|
case '\f', '\n', '\r':
|
||||||
break
|
if ignoreline {
|
||||||
|
return i + 1, nil, nil
|
||||||
|
}
|
||||||
|
fallthrough
|
||||||
|
|
||||||
|
case ' ', '\t', '\v':
|
||||||
|
if started && quote == 0 {
|
||||||
|
return i + 1, data[startidx:i], nil
|
||||||
|
}
|
||||||
|
|
||||||
|
case '\'', '"', '`':
|
||||||
|
if started && quote == c {
|
||||||
|
return i + 1, data[startidx:i], nil
|
||||||
|
}
|
||||||
|
|
||||||
|
if quote == 0 {
|
||||||
|
quote = c
|
||||||
|
}
|
||||||
|
|
||||||
|
case '#':
|
||||||
|
if !started {
|
||||||
|
ignoreline = true
|
||||||
|
}
|
||||||
|
|
||||||
|
default:
|
||||||
|
if !ignoreline && !started {
|
||||||
|
started = true
|
||||||
|
startidx = i
|
||||||
|
}
|
||||||
}
|
}
|
||||||
start += w
|
|
||||||
}
|
}
|
||||||
|
|
||||||
for i := start; i < len(data); {
|
if atEOF {
|
||||||
r, w := utf8.DecodeRune(data[i:])
|
if ignoreline {
|
||||||
|
return len(data), nil, nil
|
||||||
if (quote > 0 && quote == r) || (quote == 0 && isSpace(r)) {
|
|
||||||
return i + w, data[start:i], nil
|
|
||||||
}
|
}
|
||||||
|
if started {
|
||||||
i += w
|
return len(data), data[startidx:], nil
|
||||||
}
|
|
||||||
|
|
||||||
if atEOF && len(data) > start {
|
|
||||||
return len(data), data[start:], nil
|
|
||||||
}
|
|
||||||
return start, nil, nil
|
|
||||||
}
|
|
||||||
|
|
||||||
func isQuote(r rune) bool {
|
|
||||||
switch r {
|
|
||||||
case '\u0022', '\u0027':
|
|
||||||
return true
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
}
|
|
||||||
|
|
||||||
func isSpace(r rune) bool {
|
|
||||||
if r <= '\u00FF' {
|
|
||||||
switch r {
|
|
||||||
case ' ', '\t', '\n', '\v', '\f', '\r':
|
|
||||||
return true
|
|
||||||
case '\u0085', '\u00A0':
|
|
||||||
return true
|
|
||||||
}
|
}
|
||||||
return false
|
|
||||||
}
|
}
|
||||||
|
|
||||||
if '\u2000' <= r && r <= '\u200a' {
|
return 0, nil, nil
|
||||||
return true
|
|
||||||
}
|
|
||||||
|
|
||||||
switch r {
|
|
||||||
case '\u1680', '\u2028', '\u2029', '\u202f', '\u205f', '\u3000':
|
|
||||||
return true
|
|
||||||
}
|
|
||||||
return false
|
|
||||||
}
|
}
|
||||||
|
@ -1,4 +1,4 @@
|
|||||||
set alert
|
set alert "Don't think about it"
|
||||||
|
|
||||||
monitor group
|
monitor group
|
||||||
host www1.example.com address 10.11.135.101
|
host www1.example.com address 10.11.135.101
|
||||||
|
Loading…
Reference in New Issue
Block a user