爬虫的基础环境主要包括Nodejs运行环境和MongoDB数据库,其中在《实现一个简单的爬虫》章节中仅需要Nodejs运行环境,在《保存数据到数据库》章节中开始使用MongoDB数据库;之后的章节里面,Nodejs运行环境和MongoDB数据库都会被用到。
Nodejs运行环境和MongoDB数据库的安装教程网上已经有很多了,这里提供官网的链接:
注:教程需要的nodejs的版本大于8.9,mongodb大于3.2
OooOoops
缺失模块。
1、请确保node版本大于6.2
2、在博客根目录(注意不是yilia根目录)执行以下命令:
npm i hexo-generator-json-content --save
3、在根目录_config.yml里添加配置:
jsonContent:
meta: false
pages: false
posts:
title: true
date: true
path: true
text: false
raw: false
content: false
slug: false
updated: false
comments: false
link: false
permalink: false
excerpt: false
categories: false
tags: true