Sandbox::https://github.com/NanmiCoder/MediaCrawler/blob/main/var.py

Repository navigation

# -*- coding: utf-8 -*-

# This file is part of MediaCrawler project.

# Repository: https://github.com/NanmiCoder/MediaCrawler/blob/main/var.py

# GitHub: https://github.com/NanmiCoder

# Licensed under NON-COMMERCIAL LEARNING LICENSE 1.1

# 声明：本代码仅供学习和研究目的使用。使用者应遵守以下原则：

# 1. 不得用于任何商业用途。

# 2. 使用时应遵守目标平台的使用条款和robots.txt规则。

# 3. 不得进行大规模爬取或对平台造成运营干扰。

# 4. 应合理控制请求频率，避免给目标平台带来不必要的负担。

# 5. 不得用于任何非法或不当的用途。

# 详细许可条款请参阅项目根目录下的LICENSE文件。

# 使用本代码即表示您同意遵守上述原则和LICENSE中的所有条款。

from asyncio.tasks import Task

from contextvars import ContextVar

from typing import List

import aiomysql

request_keyword_var: ContextVar[str] = ContextVar("request_keyword", default="")

crawler_type_var: ContextVar[str] = ContextVar("crawler_type", default="")

comment_tasks_var: ContextVar[List[Task]] = ContextVar("comment_tasks", default=[])

db_conn_pool_var: ContextVar[aiomysql.Pool] = ContextVar("db_conn_pool_var")

source_keyword_var: ContextVar[str] = ContextVar("source_keyword", default="")