ChinaTrojangirl 2020-06-05 16:06 采纳率: 66.7%
浏览 274
已采纳

scrapy中把数据存储到MongoDB,运行也没出错怎么查找不到数据库呢???

scrapy中把数据存储到MongoDB,运行爬虫也没出错,在命令提示符中怎么查找不到数据库呢???
(1)在settings.py中定义了MongoDB_URL = 'mongodb://127.0.0.1:27017'
(2)在pipeline中写入代码
#def open_spider(self, spider):
"""
当爬虫启动时执行,只执行一次,所以在分类爬虫启动时执行,要判断是否是分类爬虫
:param spider:
:return:
"""
if isinstance(spider, CategorySpiderSpider):

        self.client = MongoClient(MongoDB_URL)
        self.collection = self.client['jd']['category']    #创建数据库及数据表



def process_item(self, item, spider):
    """
    向MongoDB插入数据
    :param item:
    :param spider:
    :return:
    """
    if isinstance(spider, CategorySpiderSpider):
        #插入数据 insert_one() 方法,该方法的第一参数是字典 name => value 对,item中是category对象,需要转换为字典
        self.collection.insert_one(dict(item))
        return item


def close_spider(self, spider):
    """
    关闭数据库连接
    :param spider:
    :return:
    """
    if isinstance(spider, CategorySpiderSpider):
        self.client.close()

(3)最后打开这个管道
  • 写回答

1条回答 默认 最新

  • 放风喽 2020-06-05 20:37
    关注

    1.密码设置了吗
    2.127.0.0.1改成localhost试试
    3.我没招了

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

悬赏问题

  • ¥15 ROS Turtlebot3 多机协同自主探索环境时遇到的多机任务分配问题,explore节点
  • ¥15 Matlab怎么求解含参的二重积分?
  • ¥15 苹果手机突然连不上wifi了?
  • ¥15 cgictest.cgi文件无法访问
  • ¥20 删除和修改功能无法调用
  • ¥15 kafka topic 所有分副本数修改
  • ¥15 小程序中fit格式等运动数据文件怎样实现可视化?(包含心率信息))
  • ¥15 如何利用mmdetection3d中的get_flops.py文件计算fcos3d方法的flops?
  • ¥40 串口调试助手打开串口后,keil5的代码就停止了
  • ¥15 电脑最近经常蓝屏,求大家看看哪的问题