0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何用Brower Use WebUI实现网页数据智能抓取与分析?

jf_23871869 来源:刘力 作者:刘力 2025-04-17 17:48 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

​ 作者:算力魔方创始人/英特尔创新大使刘力

Browser-use是一款能让AI智能体像人类一样操作网页的创新工具,与传统网络爬虫技术相比,Browser-use能模拟人浏览并操作网页,在采集网站数据时,不会被网站反爬机制识别和封禁,能稳定有效地获取数据和执行任务。除了数据采集外,Browser-use还能抓取网页全部交互元素,自动完成设置的动作,如填写表单、内容提取等。

Browser-use已经成为AI 智能体应用首选的操作浏览器的工具,受到AI社区的热烈追捧,Github stars已超过56k,而且增速迅猛。

GitHub: https://github.com/browser-use/browser-use.

本文从零开始介绍使用DeepSeek + Browser-use WebUI快速实现网页数据智能抓取与分析。

视频链接:如何用Brower Use WebUI实现网页数据智能抓取与分析? (qq.com)

一,搭建开发环境

首先,请在算力魔方®4060上创建虚拟环境,并安装Browser-use WebUI,如下所示:

conda create -n browser python=3.11
condaactivatebrowser
git clone https://github.com/browser-use/web-ui.git
cd web-ui
pip install -r requirements.txt

然后,输入命令,安装playwright,完成开发环境搭建。

pip install playwright
playwright install
wKgZO2gBtaGADxZ7AANy95U1O_w686.pngwKgZO2gAzgGAFmnuAAPRoo1q__s894.png

Windows:

wKgZO2gAzg2AOPaUAAD7OoCJGwo152.png

二,配置DeepSeek API Key

到DeepSeek官网:https://www.deepseek.com/,点击“API开发平台”完成注册和充值,然后生成API Keys。

wKgZPGfqBamAQHLUAADp0un7ULo903.png

然后,创建一个名为“.env”的环境配置文件。

cp .env.example .env

最后,用VS Code把“.env”文件打开,填入DeepSeek API Key。

wKgZPGgAziyASXp6ABKUayms2jY560.png

三,DeepSeek-V3-0324是调用MCP的优秀模型

首先,请用命令启动Browser-Use WebUI,并在“Agent Settings”页面,禁用“Use Vision”。

python webui.py --ip 127.0.0.1 --port 7788
wKgZO2gAzjWAB0gWAAPVj5ZEZUE021.png

Windows:

wKgZPGgAzkGAS1s3AADu70GuW3c560.png

然后,在“LLM Settings”页面的“LLM Provider”处,选择“deepseek”。

wKgZO2gAzkqACRzJAAHZHR1Svpo981.png

最后,在“Run Agent”页面,输入提示词,感受DeepSeek使用Browser-use 工具实现网页数据智能抓取与分析的过程!

在https://www.csdn.net/网站,搜索并统计由账号"算力魔方AIPC"发表的原创文章,包含文章标题,发布时间,阅读量和点赞量。
wKgZPGgAzlaAViE0AAYpToPgkRk718.png

四,总结

Browser-use已经成为AI 智能体应用首选的操作浏览器的工具,人人都能通过DeepSeek + Browser-use通过“说说话”,就能实现网页数据智能抓取与分析。

如果你有更好的文章,欢迎投稿!

稿件接收邮箱:nami.liu@pasuntech.com

更多精彩内容请关注“算力魔方®”!

​审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    91

    文章

    41964

    浏览量

    303057
  • DeepSeek
    +关注

    关注

    2

    文章

    861

    浏览量

    3468
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    机器人主控核心板米尔RK3576 + ROS2,NPU加速实现目标跟随与机械臂抓取

    回顾上篇:基于RK3576+ROS2 Humble+SLAM Toolbox+Nav2,我们实现了机器人的建图与自主导航。机器人已经能够“走到哪里”。但真正的智能机器人不仅要“走到哪”,还要“看到并
    发表于 04-10 21:23

    大会回顾 - 安森美 | 从数据割裂到全域智能,携手普迪飞实现数据分析效率跃升

    点击蓝字,关注我们在普迪飞(PDFSolutions)年度用户大会上,安森美(onsemi)良率提升系统团队分享了其依托Exensio平台实现制造分析能力全面跃升的深度实践。作为全球领先的智能电源
    的头像 发表于 04-08 09:35 431次阅读
    大会回顾 - 安森美 | 从<b class='flag-5'>数据</b>割裂到全域<b class='flag-5'>智能</b>,携手普迪飞<b class='flag-5'>实现</b><b class='flag-5'>数据分析</b>效率跃升

    智能检测】基于AI深度学习与飞拍技术的影像测量系统:实现高效精准的全自动光学检测与智能制造数据闭环

    CAD/Gerber/3D模型导入,提升编程效率与产线集成度;并通过数据闭环管理,实现扫码识别、SPC分析报告自动生成及MES/Q-DAS等系统对接,全面融入智能制造体系。 适合
    发表于 03-31 17:11

    ESP32开发板创建同步WebServer网页服务器

    ESP32 内置了 Wi-Fi 功能,能够作为网页服务器(Web Server)向网络中的其他设备提供服务。通过在 ESP32 上运行网页服务器,可以创建基于浏览器的用户界面,用于监控传感器数据或控制设备状态,是
    的头像 发表于 01-30 11:36 496次阅读
    ESP32开发板创建同步WebServer<b class='flag-5'>网页</b>服务器

    何用软件实现系统的复位?

    看门狗的工作过程是怎样的? 如何用软件实现系统的复位?
    发表于 01-08 06:15

    如何使用机器人分析仪EtherCAT-Analyzer抓取主从站数据

    EtherCAT总线在机器人控制总线里占据重要地位。这次,我们搭建了包含EtherCAT主从站和分析仪的完整环境,用机器人分析仪EtherCAT-Analyzer实际抓取主从站之间的通讯数据
    的头像 发表于 12-22 11:46 1071次阅读
    如何使用机器人<b class='flag-5'>分析</b>仪EtherCAT-Analyzer<b class='flag-5'>抓取</b>主从站<b class='flag-5'>数据</b>?

    何用FPGA控制ADV7513实现HDMI画面显示和音频播放

    HDMI接口显示使用DMT时序+TMDS编码来实现。当用FPGA控制HDMI的数据传输时,通常可以采用纯RTL实现TMDS算法或者使用专门的HDMI芯片(如ADV7513)这两种方案来完成。本文主要是介绍如
    的头像 发表于 12-02 11:05 7210次阅读
    如<b class='flag-5'>何用</b>FPGA控制ADV7513<b class='flag-5'>实现</b>HDMI画面显示和音频播放

    数据智能的安全困境,如何用 AI 破解?

    一、高安全防护护航数据智能融合新范式(一)智能数据安全治理体系加速升级政策层面,2024年来,全球数据安全治理政策法规加速向“精细化”演
    的头像 发表于 11-20 19:00 750次阅读
    <b class='flag-5'>数据</b><b class='flag-5'>智能</b>的安全困境,如<b class='flag-5'>何用</b> AI 破解?

    ILA 抓取MCU200T的内部信号

    我们在使用MCU200T 利用自己搭建的摄像头获取图像的过程中,通过Vivado自带的内嵌式逻辑分析仪,可以观察到摄像头读入的实时数据,ILA捕获数据如下图所示,保存其波形文件,按照28x28格式展开如右下角所示为“6”。
    发表于 10-29 08:03

    商品销量数据抓取接口

    ​  商品销量数据是电商分析的核心指标,能帮助企业优化库存、制定营销策略。构建一个高效的数据抓取接口,可以自动化获取这些数据,提升决策效率。
    的头像 发表于 10-21 18:02 802次阅读
    商品销量<b class='flag-5'>数据</b><b class='flag-5'>抓取</b>接口

    何用FPGA实现4K视频的输入输出与处理

    在游戏、影视和显示领域,4K 已经成为标配。而今天,我们就来聊聊——如何用 FPGA 实现 4K 视频的输入输出与处理。
    的头像 发表于 10-15 10:47 2504次阅读
    如<b class='flag-5'>何用</b>FPGA<b class='flag-5'>实现</b>4K视频的输入输出与处理

    应用案例 | 赋能半导体良率跃升!深视智能高速摄像机揭秘晶元抓取微观世界

    。深视智能的“解题思路”面对晶元抓取过程“快、精、微”的特点,深视智能提出基于高速摄像技术的晶元抓取工艺优化方案:01毫秒级动态解析精灵系列高速摄像机(型号:SH
    的头像 发表于 08-18 08:19 988次阅读
    应用案例 | 赋能半导体良率跃升!深视<b class='flag-5'>智能</b>高速摄像机揭秘晶元<b class='flag-5'>抓取</b>微观世界

    借助电商 API,多平台客户评价一键抓取

    ​  在当今电商竞争激烈的环境中,客户评价是影响消费者决策的关键因素。商家需要从多个平台(如 Amazon、eBay、淘宝等)实时抓取分析这些评价,以优化产品和服务。然而,手动收集耗时费力,且容易
    的头像 发表于 08-11 14:49 915次阅读

    光伏电站运维管理软件如何实现智能监控与数据分析

    、安全运行。 运维管理的主要内容是通过设备运行监控、设备维护与检修,实现数据管理与决策支持、能源管理与优化。常用方法与工具是通过智能化监控系统、无人机巡检等来结合AI与大数据分析
    的头像 发表于 07-14 15:59 806次阅读
    光伏电站运维管理软件如何<b class='flag-5'>实现</b><b class='flag-5'>智能</b>监控与<b class='flag-5'>数据分析</b>?

    拼多多电商 API 接口与竞品,数据抓取速度大较量

    在当今电商行业,数据抓取速度是衡量平台竞争力的核心指标之一。高效的 API(应用程序接口)能显著提升数据分析、库存管理和用户个性化推荐的效率。本文将深入比较拼多多电商 API 接口与主要竞品(如淘宝
    的头像 发表于 07-09 15:29 963次阅读