有人在Scrapy中有sqlite管道的示例代码吗？

在Scrapy中使用SQLite管道的示例代码如下：

首先，在Scrapy项目的settings.py文件中添加以下配置：

ITEM_PIPELINES = {
    'myproject.pipelines.SQLitePipeline': 300,
}

SQLITE_DATABASE = 'data.db'

然后，创建一个名为pipelines.py的文件，并添加以下代码：

import sqlite3

class SQLitePipeline(object):
    def __init__(self, sqlite_database):
        self.sqlite_database = sqlite_database

    @classmethod
    def from_crawler(cls, crawler):
        return cls(
            sqlite_database=crawler.settings.get('SQLITE_DATABASE')
        )

    def open_spider(self, spider):
        self.connection = sqlite3.connect(self.sqlite_database)
        self.cursor = self.connection.cursor()
        self.cursor.execute('CREATE TABLE IF NOT EXISTS items (id INTEGER PRIMARY KEY, name TEXT, price REAL)')

    def close_spider(self, spider):
        self.connection.commit()
        self.connection.close()

    def process_item(self, item, spider):
        self.cursor.execute('INSERT INTO items (name, price) VALUES (?, ?)', (item['name'], item['price']))
        return item

以上代码定义了一个名为SQLitePipeline的管道类，它负责将爬取到的数据存储到SQLite数据库中。在open_spider方法中，我们创建了一个SQLite连接，并创建了一个名为items的表。在process_item方法中，我们将每个item插入到数据库中。

请注意，上述代码中的数据库文件名为data.db，你可以根据需要修改为你想要的数据库文件名。

这是一个简单的示例代码，你可以根据自己的需求进行修改和扩展。希望对你有帮助！

参考链接：