第17章 爬虫（第1页）
“接下来，就是试试获取小说的内容了。”
接下来，他开始编写程序以获取小说的详细信息和内容。
由于小说内容比较庞大，他决定把获取内容的频率放低。
毕竟是在奶茶店，店里面还有不少的人在使用着店里面提供的wifi。
如果他瞬时间向服务器的请求量过大，其他人的网络，基本上就会陷入瘫痪的状态。
他现在只是手痒痒了，想试试手，真正要爬取到足够多的小说数据，至少需要好几天的时间。
“接下来，就是见证奇迹的时刻。”
他开始启动他的爬虫程序，程序开始在小说网站上爬取小说的内容。
无数本小说的内容文字一闪而过，便进入了数据库之中。
“哟，还有点意思。”
他发现，在爬取的过程中，点娘小说网站的反爬虫机制还算是不错，他的爬虫程序很快就被封禁了。
针对ip的。
不过，他快速升级了他的爬虫程序，加入了无数的ip池，以及强大的识别验证码能力，使其更难被网站检测到。
“咦，看来我这掌握的五级信息技术，比我想象之中的要强！”
经过一番小小的折腾，点娘都市小说分类下的数百万本小说，全部进入了他的数据库里面。
“最强的点娘的反爬虫机制也不过如此。看来获取数据集的过程，会比我想象的简单不少。“
”那现在就是时间的问题了，等我爬取到足够多的小说数据集，就可以开始训练我的写小说ai模型了！”他心中充满了自信。
现在，就让小说模型先跑着吧。
今天是周末，奶茶店的人比往常多上不少，等到了快要歇业的时间里，铺子里还有不少的人。
林小玲没办法，只好延长了奶茶店的营业时间。
连带的，王卿一遍看着ai模型的训练，一遍记着单词。
“喂，我要下班了，咱们一起走吧。”
王卿还沉迷于互联网世界的新奇时，林小玲的声音传了上来。
他抬头一看，“都已经十二点了啊。”
“等我一会儿。”
“好，我在门口等你。”
林小玲没有上楼去，今天太累了，她就在楼下等着王卿收拾东西。
“怎么还没出来呀。”
她在店门口等了两三分钟，王卿那边还没有动静，就想上楼去看看。
还没有走到门口，便看到他扛着一台巨大的电脑主机和一个显示器，不禁笑了起来。
王卿嘴里喘着粗气，额头上挂着一粒粒细密的汗珠，身上的衬衫湿漉漉的贴在了背上。
他双手抱着一台电脑主机和一个显示器，像只蚂蚁一样艰难地从二楼的楼梯上下了来。
四合院，开局取代何雨柱成大厨 大妈犯桃花，谁说普女不能当海王 影视之多子多福 熟苗女靠打工改命 逍遥小农民 凡人神鼎：家祖神农你什么辈分？ 都市种田，传播中医我是认真的 神墓之混沌祭坛 男宠 三星大团圆正传 快穿攻略：女配逆袭虐渣记 西游之黑神话大圣 盗斗 强龙下山 封门诡影之镇魔 开局变身超女，穿越诸天万界 拈花一笑 星际裂隙：人类的黎明 精灵探险队：我是炭小侍 她，素质不详，遇强则强
替嫁后，残王的疯批王妃无法无天
她是风华绝代的大帝姬，却穿越成被迫替嫁又不受宠的疯批王妃，人人唾弃。刚穿越便被栽赃陷害拖出去喂狗，这谁能忍？摇身一变成为顶级天医，生白骨活死人，天资潋滟，倾城绝色。曾经辜负她真心的哥哥们纷纷后悔，排队求原谅。一心和离却没想到反被残王宠得无法无天。帝云寒，说好的和离呢？之前那是本王眼瞎。各位书友要是觉得替嫁后，残王的疯批王妃无法无天还不错的话请不要忘记向您QQ群和微博里的朋友推荐哦！替嫁后，残王的疯批王妃无法无天...
快穿：龙套好愉快
...
我体内有个黑洞
黑洞，宇宙中最神秘的天体。它引力巨大，可吞噬一切物质，视界范围内连光线都无法逃脱。根据广义相对论，物体质量越大，时间会更加缓慢，在大质量黑洞附近，时间过去一秒，其他时空可能过去一年。此外，跌入黑洞的...
最佳女婿
一代兵王，回归都市，入赘豪门，你以为很享受吃软饭可是一门技术活...
遮天：妖皇雪月清
地球青年雪月清穿越成一只雪兔，不过他气运逆天，得到了妖神花的洗礼。他离开了红颜，远走古星，踏上最强者的试炼路。百战不死，越战越强，破雪兔身，化为真龙。创自己的法，悟自己的道。证道后，天生下地独尊，俯视万古轮回，坐看岁月更迭。打穿仙路，将故人送进仙域。救过强大的大帝，是狠人等大帝的引路人，杀到过魂河的尽头。前往过乱古时代，和大长老称兄道弟，为了不让石昊在上苍那么莽，亲自教导他，为他留下一个美好的童年。雪月清非原著中的雪月清，萝卜青菜，各有所爱吧。文笔不是很好，见谅。...
渔人传说
我有一座房子，面朝大海，春暖花开当其它人向往都市的繁华喧嚣时，他却选择回归荒废多年的孤岛老家当其它人感叹近海无渔，生活难以为继时。他每次出海都满载而归，赚钱比捡钱都容易看渔家子弟出身的庄海洋，...