C#如何写爬虫

1、首先要安装HtmlAgilityPack这个解析库，如下图所示

2、然后实例化HtmlWeb，设置页码，爬取的连接，通过Load方法获取html，如下图所示

3、接着就是对获取的html进行解析了，主要是用到SelectSingleNode，如下图所示

4、然后就是组装插入数据库的数据了，如下图所示

5、解析完一个注意加页码获取下一页的html，如下图所示

6、最后就是插入数据库的方法，如下图所示