这个工作流自动化了使用Bright Data Web Unlocker提取维基百科数据的过程，解析和清理数据，然后将结果发送到指定的webhook URL进行下游处理、报告或集成。
这个工作流解决了什么问题？
需要定期从维基百科页面获取结构化信息的研究人员。
构建知识库或使用事实数据丰富数据集的数据工程师。
自动化事实检查或内容采购的数字营销人员或内容作者。
希望通过维基百科的丰富上下文触发外部系统的自动化爱好者。
这个工作流做什么
这个工作流解决了手动检索、结构化和大规模使用维基百科数据的挑战。
工作流分解
触发器
类型：计划或手动
目的：通过固定计划（例如每天）或通过手动触发器或传入webhook按需启动工作流。
Bright Data维基百科抓取
使用的工具：Bright Data Web Unlocker
操作：抓取一个或多个维基百科文章URL的HTML内容。
解析和提取结构化数据
Basic LLM Chain节点负责生成人类可读的内容。
总结
利用Summarization Chain节点总结维基百科内容。
发送到Webhook
在”Summary Webhook Notifier”节点中启动对指定URL的Webhook通知。
设置
在Bright Data注册。
导航到Proxies & Scraping，通过在Scraping Solutions下选择Web Unlocker API创建新的Web Unlocker区域。
在n8n中，在Credentials下配置Header Auth账户（Generic Auth Type：Header Authentication）。
Value字段应设置为Bearer XXXXXXXXXXXXXX。XXXXXXXXXXXXXX应替换为Web Unlocker Token。
在n8n中，使用Google Gemini API密钥（或通过Vertex AI或代理访问）配置Google Gemini(PaLM) Api账户。
使用维基百科URL和Bright Data区域更新Set Wikipedia URL with Bright Data Zone节点。
使用您选择的Webhook端点更新Summary Webhook Notifier节点。
如何根据您的需求自定义此工作流
更新维基百科URL
替换为您感兴趣的维基百科URL。
确保将维基百科URL设置为”Set Wikipedia URL with Bright Data Zone”节点的一部分。
修改数据提取逻辑
通过扩展”LLM Data Extractor”节点提示提取整个文章内容或仅特定部分。
扩展AI总结
提取关键要点或实体。
通过扩展”Concise Summary Generator”节点创建简短形式的总结。
扩展Summary Webhook Notifier
通过Webhook通知机制发送到Slack、Discord、Telegram、MS Teams。
通过Webhook通知机制连接到您的内部数据库/API。
评论(0)