题目描述
实际工作中,解决一个需求往往需要用到多项知识,但这些知识都是通用的,譬如数据库。结合前面学习的知识,将爬取的数据写入数据库该如何实现?需要用到哪些知识?
关键提炼
- 熟悉常用的数据库:MySQL、Redis、MongoDB 等;
- 熟悉 SQL 的使用,增删改查要熟练。
实际工作中,解决一个需求往往需要用到多项知识,但这些知识都是通用的,譬如数据库。结合前面学习的知识,将爬取的数据写入数据库该如何实现?需要用到哪些知识?
要想将爬取的数据写入数据库,从操作层面上来看,不论是MySQL、Redis、MongoDB数据库还是其他数据库,都要进行获取数据库连接、准备写入数据、写入数据、数据库保存及退出几个步骤。
但从个人角度来看,爬虫(包括爬虫的技术选型)所针对业务的目的与需求拆分、数据结构的确定、数据库的选择与设计、数据的物理实现等都需要考虑在内。
登录后即可查看更多作业,立即登录
数据加载中...