全栈媒体数据处理与管理平台 · 多源数据采集 · 智能媒体分类 · AI 分析处理
覆盖核心媒体库、爬虫引擎、多平台采集、AI 媒体服务与智能分析工具
Media 系列项目覆盖从数据采集、媒体管理到 AI 分析的全链路
A03 - Media 媒体平台是 SG studio 旗下的媒体数据处理与管理项目群，涵盖从底层媒体库管理、URL 数据采集、多平台媒体资源抓取，到 AI 驱动的媒体服务与智能分析工具的全方位解决方案。五个子项目协同运作，构成完整的媒体数据处理流水线。
提供一站式的媒体数据采集、存储、处理和分析能力。通过 Python 与 Node.js 的混合架构，充分发挥两种语言在数据处理和网络通信方面的各自优势。多引擎并行采集架构确保高效获取各类媒体资源，AI 服务的引入则让媒体分类和分析达到智能化水平。
以 MediaCore 为核心媒体库底座，DataCollection 提供数据采集引擎，MediaCollector 实现多平台媒体抓取，DreamMedia 承载 AI 媒体服务能力，MediaAiTool 作为智能分析工具，五大模块形成完整的媒体技术生态闭环。
五大子项目协同构建完整的媒体数据处理流水线
核心媒体库
Media 系列的基础核心库，提供统一的媒体数据模型定义、存储接口和通用工具函数。采用 Node.js 与 Python 双语言实现，包含媒体文件管理、元数据标准化、格式转换适配器等基础能力。
URL 数据采集系统与爬虫引擎
专注于 URL 级别的数据采集，提供高性能的爬虫引擎和任务调度系统。支持多种 URL 协议和数据类型，具备去重、限速、重试、代理切换等功能。可配置化的采集规则引擎，适用于大规模数据采集任务。
多平台媒体采集器
面向多平台的多媒体资源采集系统，支持图片、视频等多种媒体类型的自动化抓取。深度集成 xhs（小红书）、Yandex 图片搜索等多个主流平台的数据接口，具备平台适配器架构，可快速扩展新的数据源。
AI 媒体服务平台
基于人工智能技术的媒体服务平台，包含 ai_service 和 backend 两大模块。ai_service 提供图像识别、内容审核、智能分类等 AI 推理能力；backend 负责服务编排、API 网关和业务逻辑层。
AI 媒体分析工具
专注于媒体数据的 AI 分析和智能处理工具集，主要用于测试和验证 Ollama 本地大模型的集成能力。提供图像描述生成、媒体内容摘要、语义标签提取等分析功能，为 DreamMedia 平台的 AI 能力落地提供技术储备。
从数据采集到智能分析，覆盖媒体处理全流程
支持从多种渠道和平台自动采集媒体数据，构建丰富的数据资源池。
利用 AI 技术对采集到的媒体资源进行自动分类和标签化处理。
集成多种 AI 模型，对媒体内容进行深度分析和智能处理。
Python + Node.js 混合架构，多引擎并行采集