每天学习一点点,成功增加一大步

标签:爬虫

NodsJS

NodeJs笔记:puppeteer爬虫

NodeJs笔记:puppeteer爬虫
以前在用 php 写后端时也曾写过 php 的爬虫,现在使用 nodeJs 来试着写爬虫。而 puppeteer 则可以模拟浏览器来浏览,在这里就做了两个实例,第1个实例是网页页面保存为图片,第2个实例通过搜索将搜索出现的图片列表保存下来。 实验工具 语言...

zhanghui 3年前 (2018-03-03) 2899℃

NodsJS

NodeJS实战:借助 HTTP API 来做个 HTTP小爬虫

NodeJS实战:借助 HTTP API 来做个 HTTP小爬虫
今天是小实践了一下如何利用 nodeJS 的 HTTP API 来做个小爬虫,如果是以前做远端页面数据的抓取时均采用 PHP 语言来实现,现在既然在学习 nodeJS 所以就来尝试下吧。 首先做个简单的获取 HTML 源代码的实例吧。建立一个JS文件,然后在头部引入两个依赖的模块...

zhanghui 4年前 (2016-07-31) 1083℃