## 实例
~~~
package main
import (
"os"
"bufio"
"time"
"io"
"github.com/axgle/mahonia"
"strings"
"fmt"
)
func main() {
file, _ := os.Open("G:\\pachong\\001.txt")
defer file.Close()
//准备一个优质数据文件
goodFile, _ := os.OpenFile("G:\\pachong\\001.txtkaifang_good.txt",
os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0644)
defer goodFile.Close()
//准备一个错误数据文件
badFile, _ := os.OpenFile("G:\\pachong\\kaifang_bad.txt",
os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0644)
defer badFile.Close()
//缓冲读取
reader := bufio.NewReader(file)
//记录用时
t := time.Now()
for {
//按行读取
lineBytes, _, err := reader.ReadLine()
if err == io.EOF {
break
}
gbkStr := string(lineBytes)
// 编码
lineStr := ConvertEncoding(gbkStr, "GBK")
//将行数据,按照逗号拆分
fields := strings.Split(lineStr, ",")
if len(fields) > 2 && len(fields[1]) == 18 {
//正确的数据
goodFile.WriteString(lineStr + "\n")
fmt.Println("Good:", lineStr)
} else {
//劣质文件
badFile.WriteString(lineStr + "\n")
fmt.Println("Bad:", lineStr)
}
}
// 返回一个时间差
end := time.Since(t)
fmt.Println("程序用时:", end)
}
//处理乱码
func ConvertEncoding(srcStr string, encoding string) (dstStr string) {
enc := mahonia.NewDecoder(encoding)
utfStr := enc.ConvertString(srcStr)
dstStr = utfStr
return
}
~~~
- 一、数组
- 二、切片
- 三、copy
- 四、MAP
- 五、结构体
- 六、结构体参数
- 七、面向”对象“
- 1、匿名字段
- 2、方法
- 3、包和封装
- 4、接口
- 5、异常处理
- 八、Json
- 九、文件操作
- 1、写文件
- 2、读取文件内容
- 3、拷贝文件
- 十、反射
- 1、查看类型,字段和方法
- 2、查看匿名字段
- 3、修改基本类型的值
- 4、修改结构体的值
- 5、调用方法
- 十一、并发编程
- 1、并行和并发
- 2、协程
- 3、runtime包
- 5、channel的使用
- 6、close
- 7、定时器
- 8、select
- 9、协程同步锁
- 十二、socket编程
- 十三、Http编程
- 十四、并发爬虫和数据处理
- 1、简易爬虫实例
- 2、并发爬取图片
- 3、读文件中的数据
- 4、数据清洗
- 其他
- 1、推荐文章