爬虫基础教程：实战出真知

2018年1月17日09:07:25 12 17,881 °C
摘要

很多朋友跟我说，楼主你的爬虫教程很少啊，都是进阶教程，基础教程没有吗？我的答案是，有，而且蛮受欢迎。

爬虫基础教程：实战出真知

一、前言

很多朋友跟我说，楼主你的爬虫教程很少啊，都是进阶教程，基础教程没有吗？我的答案是，有，而且蛮受欢迎。

二、专栏介绍

可能只关注我网站的朋友不知道，我曾经是在CSDN写博客的，那里遗留了我很多文章。其中，有一个CSDN博客专栏，就是爬虫基础教程。目前为止，没有重新再整理爬虫基础教程的打算。

本站的进阶教程讲的不详细，很多具体细节没有讲解，是因为面对的是已经有基础的朋友了。

如果没有爬虫基础，推荐看我的CSDN博客专栏《Python3网络爬虫》。

专栏地址：https://blog.csdn.net/c406495762/article/category/9268672爬虫基础教程：实战出真知

一共有15篇文章，从最简单的urllib原理开始讲起，循序渐近，不拐弯抹角，直奔主题，实战为主，详细讲述。

与此配套的还有我的Github开源项目：

https://github.com/Jack-Cherish/python-spider

爬虫基础教程：实战出真知

这里包含了所有爬虫教程的源码，并且还有一些没有写教程的源码。比如12306火车票抢票，抖音APP视频下载等。并且，我也会在此持续输出！

今天把这个系列专栏和Github开源项目推荐给大家，方便关注本站爬虫教程，但是没有爬虫基础的朋友们去学习。

三、总结

最后，祝各位朋友玩得开心！

weinxin
微信公众号
分享技术，乐享生活：微信公众号搜索「JackCui-AI」关注一个在互联网摸爬滚打的潜行者。
Jack Cui

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen:

目前评论：12   其中：访客  7   博主  5

    • avatar mInQ 来自天朝的朋友 搜狗浏览器 Windows 7 上海市浦东新区 电信 4
      回复 2018年1月23日 下午1:36  沙发

      楼主，如果学scrapy框架，还有必要学beautifulsoup之类的嘛

        • avatar Jack Cui Admin 来自天朝的朋友 谷歌浏览器 Android 7.0 MI 5 Build/NRD90M 辽宁省沈阳市 联通GSM/WCDMA/LTE共用出口
          回复 2018年1月23日 下午2:09  1层

          @mInQ 基础，最好也学一下。也不难，思想都是互通的。

            • avatar mInQ 来自天朝的朋友 搜狗浏览器 Windows 7 上海市浦东新区 电信 4
              回复 2018年1月23日 下午3:03  2层

              @Jack Cui 好的，了解了 :mrgreen:

          • avatar bender 来自天朝的朋友 谷歌浏览器 Windows 7 北京市 铁通 1
            回复 2018年3月2日 下午4:43  板凳

            你真棒

              • avatar Jack Cui Admin 来自天朝的朋友 谷歌浏览器 Windows 7 辽宁省沈阳市 东北大学四舍(女生)
                回复 2018年3月2日 下午5:17  1层

                @bender 一起加油~ :wink:

              • avatar 派生coder 来自天朝的朋友 谷歌浏览器 Windows 10 中国 移动 1
                回复 2018年7月15日 下午11:16  地板

                看过博主的github ，想请教一个问题 我有个vip解析网址不知道怎么找下载接口 不知道方不方便解答一下
                http://www.6688.appsvipapi.kuuhui.com:65533/svipjx/ 用来解析pptv 可惜不会找下载接口 用python学习 :smile:

                  • avatar Jack Cui Admin 来自天朝的朋友 谷歌浏览器 Windows 10 北京市 百度网讯科技联通节点
                    回复 2018年7月16日 下午1:12  1层

                    @派生coder 抓包，看下返回地址。找到那个返回真实视频地址的就可以，如果是分段的，就分段下载。如果没有返回，就换别的解析接口看看。

                      • avatar 派生coder 来自天朝的朋友 谷歌浏览器 Windows 10 中国 移动 1
                        回复 2018年7月17日 下午2:28  2层

                        @Jack Cui 哦 这样看来就比较麻烦 如果用这个接口不知道下载地址是否隐藏在swf里面（因为按网上教程同样代码处这里留下一个swf下载链接） 不知道你清不清楚python是否能读取swf里面内容 如果用分段下载的话 构建下载链接比较麻烦 主要是失效还特别快 所以想着是不是有方法找到swf里面的内容

                    • avatar carl 来自天朝的朋友 谷歌浏览器 Windows 10 四川省成都市 电信 0
                      回复 2018年7月17日 下午12:03  4楼

                      博主可以的，请问有什么推荐的爬虫相关书籍吗？

                        • avatar Jack Cui Admin 来自天朝的朋友 谷歌浏览器 Windows 10 北京市 百度网讯科技联通节点
                          回复 2018年7月17日 下午12:50  1层

                          @carl 这里有推荐：https://cuijiahua.com/resource.html

                        • avatar Pluto4U 来自天朝的朋友 谷歌浏览器 Mac OS X 10_14_3 浙江省杭州市 电信 4
                          回复 2019年5月20日 下午3:13  5楼

                          scrapy和这个区别在哪里？不太懂
                          小说爬取那个我试了下，爬不到小说的文字具体内容了，只有一个标题和简单的几句话，是为什么呢

                            • avatar Jack Cui Admin 来自天朝的朋友 Safari浏览器 Mac OS X 10_14_4 北京市丰台区 联通
                              回复 2019年5月20日 下午10:49  1层

                              @Pluto4U scrapy是用框架，这个是最简单的解析。别在ide中打印，pycharm之类的可能需要配置，在cmd中运行就有了。