使用Bright Data和Google Gemini进行结构化数据提取与数据挖掘

这个n8n工作流展示了如何使用Bright Data Web Unlocker产品和Google Gemini AI模型进行结构化数据提取和数据挖掘。工作流从指定的URL获取数据，然后使用AI能力进行深度分析和信息提取。

## 工作原理

1. **数据获取**: 使用Bright Data Web Unlocker从指定URL获取Markdown格式的数据
2. **数据转换**: 将Markdown数据转换为纯文本格式
3. **AI分析**: 使用Google Gemini Flash Exp模型进行多种分析：
– 主题提取和结构化分析
– 按地理位置和类别聚类的新兴趋势分析
– 情感分析
4. **结果输出**: 将分析结果通过Webhook通知并保存到本地文件

## 核心节点功能

– **Bright Data Web Request**: 通过API从目标网站获取结构化数据
– **Google Gemini Chat Model**: 使用AI模型进行数据分析和提取
– **Information Extractor**: 执行结构化信息提取，包括主题建模和趋势分析
– **Markdown to Textual Data Extractor**: 将Markdown格式转换为纯文本
– **Webhook Notifications**: 将分析结果发送到指定端点
– **File Operations**: 将分析结果保存为JSON文件

## 应用场景

– 新闻网站内容分析和趋势监测
– 市场情报收集和分析
– 社交媒体趋势跟踪
– 竞争对手分析
– 内容营销策略制定

## 技术特点

– 使用Bright Data Web Unlocker处理反爬虫机制
– 集成Google Gemini AI进行智能分析
– 结构化数据输出便于后续处理
– 支持实时Webhook通知
– 本地文件保存确保数据持久化