我用手机写了一个Python爬虫，爬下了《凡人修仙传》……
◆
上一次，舞剑用手机写了一个 Python 爬虫，爬取了《凡人修仙传》小说第一章的标题与正文，最后保存到 TXT 文本中。
这一次，舞剑继续完善这个 Python 爬虫小程序，将第一章之后的章节也都爬下来并保存。
要爬取之后的章节，最重要的就是找到章节的 Url ，这样才能根据 Url 进入下一章的网页，进而爬取标题与正文。
▼
进入《凡人修仙传》目录，打开开发者工具查看，可以看到所有章节的 url 都包含在 class="mipe016cba0a9e30432 pagelist" 的 div 标签中。
而具体每一个章节的 url 则包含在 class="mipa9e3043269eeb300 read" 的 url 标签中。
① /book/61781/0-1/ 到 /book/61781/0-26/ 地址之间包含了所有章节 url 集合，只需要循环 26 次进入每一个 url 就行了。
使用 lxml 代码如下所示：
②进入单独的 url 后，会看到 class="mip2640b9493a875280 read" 的 url 列表。这里可以创建一个列表 list，用来保存所有的章节 url， 以便后期使用。
使用 lxml 爬取代码如下所示：
之后就可以根据 url 列表来爬取相应的章节，直至下载全本小说。
▼
方法二||2第一章：m.9txs.com/book/61781/868469.html
第二章：m.9txs.com/book/61781/868470.html
从上方的网址可以分析出：
book代表小说，61781代表凡人修仙传，而最后的 868469.html 则代表着第一章，很显然 868470.html 代表第二章。
只需要不断将 868469+1 ，最终就会爬出《凡人修仙传》全本 TXT 。
▼
方法三||3在阅读小说的过程中，底部都会有 下一章 按钮。
切换到源码，则是下一章的 url。
<div class="mip3a8752807e01b0d0 pager">
<a href="/book/61781/868469.html">上一章</a>
<a href="/book/61781/">目 录</a>
<a href="/book/61781/868471.html">下一章</a>
</div>
只需要在解析方法时，顺便将下一章的 href 地址取出，然后拼接到网址之上，一直向前爬取，最后就会爬出《凡人修仙传》全本。
至于它的 lxml 解析方法，只有这么一段，很简单。
好了，《凡人修仙传》全本 TXT 下载思路就在这里，至于其他的小说同理，只需要更换 url 就行了。
有兴趣的小伙伴记得关注我，一直更新手机编程的技巧与APP。
主题：凡人修仙；结果字数：20000；
凡人修仙传：逆天之路
第一章：平凡少年
在浩瀚无垠的修仙世界中，有一个名叫云溪的小村落。村里有个少年，名叫林凡，他天生资质平庸，无法修炼仙法，注定了一生的平凡。然而，林凡的心中却燃烧着对修仙的无限渴望，他希望有朝一日能够超脱凡尘，成就仙道。
第二章：奇遇仙缘
一日，林凡在山中采药时，意外发现了一枚神秘的仙石。仙石中蕴含着无尽的仙灵之气，让林凡的修为突飞猛进。从此，他踏上了修仙之路，开始了他的逆天之旅。
第三章：门派纷争
林凡在修仙的过程中，结识了许多志同道合的朋友，他们一同加入了云溪宗。然而，修仙界充满了尔虞我诈，云溪宗也不例外。林凡在门派中历经磨难，逐渐成长为一个有担当的修仙者。
第四章：仙魔大战
一场仙魔大战即将爆发，修仙界陷入了一片混乱。林凡带领云溪宗的弟子们奋勇抵抗，誓要守护修仙界的和平。在这场激战中，林凡的修为不断突破，终于成为了修仙界的一方霸主。
第五章：逆天改命
然而，修仙之路并非坦途。林凡在修炼过程中，逐渐发现了自己身上的秘密。原来，他并非天生的平凡少年，而是被天道所封印的逆天之子。为了解开身上的封印，林凡历经千辛万苦，终于找到了逆天改命的方法。
第六章：仙道巅峰
经过无数次的生死考验，林凡终于解开了身上的封印，成就了仙道巅峰。他不再是一个平凡的少年，而是成为了修仙界的传奇人物。他的故事传遍了整个修仙界，激励着无数凡人勇往直前，追求修仙之道。
第七章：守护苍生
成就仙道巅峰的林凡，并没有沉迷于自己的荣耀与力量。他深知修仙者应当守护苍生，守护这片天地间的和平与安宁。于是，他带领云溪宗的弟子们，四处游历，斩妖除魔，为修仙界带来了一片安宁。
第八章：天道轮回
然而，修仙之路永无止境。林凡在修炼的过程中，逐渐领悟到了天道轮回的奥秘。他明白，修仙者应当顺应天道，遵循自然法则，方能真正超脱凡尘，成就永恒。
第九章：传承仙道
为了将修仙之道传承下去，林凡决定创立自己的门派，将他的修炼心得传授给更多的弟子。他将自己的门派命名为“逆天门”，寓意着逆天改命，勇往直前。在逆天门的带领下，修仙界再次焕发出了勃勃生机。
第十章：永恒传说
岁月流转，林凡的故事成为了修仙界永恒的传说。他的经历激励着无数凡人勇敢追求修仙之道，他的精神成为了修仙者们心中的信仰。而林凡，也在这修仙之路上，继续前行，探寻着更高层次的仙道奥秘。
这是一个关于凡人修仙的跌宕起伏的故事，林凡从一个平凡的少年，逐渐成长为修仙界的传奇人物。他的经历告诉我们，只要有坚定的信念和不懈的努力，凡人也能逆天改命，成就仙道。这个故事将会引起读者的共鸣，激励着他们勇往直前，追寻自己的梦想。
相关问答
[回答]凡人修仙传txt全集下载,txt小说下载地址www.hktxt.com/kehuan/154.html试试吧没写完呢,哪来的全集,你怎么都是求没写完的啊~看看这个,应该还不错...
[最佳回答]http://www.yankuai.com/book/info/1/1630.htm这里可以观看和下载
[回答]还没有写完,持续更新中。凡人修仙传持续更新http://www.fanrenxiuxian.net你可能还会喜欢斗破苍穹持续更新http://www.doupocangqiong-q.com...
网络小说家忘语的作品凡人修仙传小说可以到起点中文网观看《凡人修仙传》是连载于起点中文网的一部仙侠修真小说,作者是忘语。小说讲述了一个普通的山村穷小...
第四十章凡人修真传小说拍到第四十集。这个哔哩哔哩的动画网剧一个礼拜一集,中间还有几个档期不拍摄。动画剧基本还原了小说原著的剧情场景,但是制作手法太差...
在我看来,如果当代网络小说要评四大名著,一定会有《凡人修仙传》一席之地。事实上,凡人此书是无数仙侠迷眼中的第一仙侠小说,很多人对此书的评价,甚至超过了...
凡人修仙传有771万字《凡人修仙传》是连载于起点中文网的一部仙侠修真小说,作者是忘语。小说讲述了一个普通的山村穷小子,偶然之下,跨入到一个江湖小门派,...
凡人修仙传是作者忘语写的一部修仙小说这部小说由人界,灵界以及仙界三个篇幅组成开创了凡人流小说是凡人流小说的一部佳作小说主要讲的是主角韩立从一介凡人修...
凡人修仙传5年左右。开始创作时间2008年2月20日;结束创作时间2013年9月23日。(结束时间以大结局为准,不包括外传10月25日结束)。凡人修仙传是忘语所撰的一...
《凡人修仙传》60万字时与“起点中文网”签约,100万字时正式上架。作者“忘语”凭借《凡人修仙传》开创凡人流小说,跻身起点众神之一,打破之前起点要求旗下作...
