{ "cells": [ { "cell_type": "code", "execution_count": 5, "metadata": {}, "outputs": [], "source": [ "from langchain.document_loaders import SeleniumURLLoader" ] }, { "cell_type": "code", "execution_count": 6, "metadata": {}, "outputs": [], "source": [ "urls = [\n", " \"https://aiqicha.baidu.com/brand/detail?pid=xlTM-TogKuTwDXvk7672ZY75%2AN-J6d58lQmd&id=339490880&from=ps&pd=pb\",\n", " \"https://www.bilibili.com/video/BV1gT411H7RT/?spm_id_from=333.1007.tianma.3-3-9.click\"\n", "]" ] }, { "cell_type": "code", "execution_count": 7, "metadata": {}, "outputs": [], "source": [ "loader = SeleniumURLLoader(urls=urls)" ] }, { "cell_type": "code", "execution_count": 8, "metadata": {}, "outputs": [ { "data": { "text/plain": [ "[Document(page_content='查企业\\n\\n查老板\\n\\n查关系\\n\\n无匹配数据\\n\\n登录\\n\\n注册\\n\\n积分商城\\n\\n个人会员\\n\\n企业套餐\\n\\n企服商城\\n\\n工商服务\\n\\n财税服务\\n\\n知识产权\\n\\n资质许可\\n\\n\\n 应用\\n \\n\\n热门功能\\n\\n招投标查询\\n\\n批量受益人\\n\\n批量查询\\n\\n企业认领\\n\\n番番寻客宝\\n\\n高级搜索\\n\\n舆情监测\\n\\n专项查询\\n\\n查关系\\n\\n查老赖\\n\\n查商标\\n\\n地图查询\\n\\n新网快查\\n\\n空壳扫描\\n\\n查风险\\n\\n产品中心\\n\\n积分商城\\n\\n商家中心\\n\\n导出记录\\n\\n我的关注\\n\\n我的纠错\\n\\n用户反馈\\n\\n认证权益\\n\\n媒体合作\\n\\n更多功能即将上线，敬请期待…\\n\\n精灵在线网络技术(北京)有限公司\\n\\n企业发展\\n\\n品牌项目\\n\\n品牌项目详情\\n\\n百思不得姐\\n\\n英文名：-\\n\\n发源地：北京市\\n\\n创建年份：2011\\n\\n品牌信息\\n\\n所属企业\\n\\n精灵在线网络技术(北京)有限公司\\n\\n英文名\\n\\n发源地\\n\\n北京市\\n\\n创建年份\\n\\n2011\\n\\n咨询电话\\n\\n010-56182605\\n\\n传真\\n\\n官网\\n\\nhttp://www.spriteapp.com/\\n\\n邮箱\\n\\n公司地址\\n\\n北京市 海淀区 黑泉路8号 宝盛广场北区(B座)9层 查看地图\\n\\n品牌介绍\\n\\n精灵在线网络技术（北京）有限公司是一家移动互联网公司，成立于2011年，总部位于北京。经过多年的发展，现已拥有完善产品运营团队。团队里聚集了一批充满梦想、充满活力的精灵族，是一支踏实而又富有激情的创业团队。 精灵在线一直秉承着“简单、快乐、分享”的人文理念，在开放式的工作环境中让员工拥有家庭式的工作环境，自由布置。让每一位员工都能安逸、舒适的享受自己的工作。\\n\\n融资信息\\n 5\\n\\n序号\\n\\n发布日期\\n\\n融资轮次\\n\\n融资金额\\n\\n投资方\\n\\n2016-04-15\\n\\nC轮\\n\\n1000万元\\n\\n腾讯投资\\n\\n2015-06-30\\n\\nB+轮\\n\\n金额未知\\n\\n道彤投资\\n\\n2014-10-01\\n\\nB轮\\n\\n1200万元\\n\\n华映资本弘帆投资\\n\\n2013-07-01\\n\\nA轮\\n\\n2000万元\\n\\n华映资本\\n\\n2013-05-01\\n\\n天使轮\\n\\n900万元\\n\\n天娱数科\\n\\n企业品牌项目\\n 1\\n\\n序号\\n\\n项目名称\\n\\n最新融资轮次\\n\\n成立时间\\n\\n所属地\\n\\n项目简介\\n\\n百思不得姐\\n\\n2011\\n\\n北京市\\n\\n精灵在线网络技术（北京）有限公司是一家移动互联网公司，成立于2011年，总部位于北京。经过多年的发展，现已拥有完善产品运营团队。团队里聚集了一批充满梦想、充满活力的精灵族，是一支踏实而又富有激情的创业团队。 精灵在线一直秉承着“简单、快乐、分享”的人文理念，在开放式的工作环境中让员工拥有家庭式的工作环境，自由布置。让每一位员工都能安逸、舒适的享受自己的工作。\\n ... 展开\\n\\n新闻资讯更多 >\\n\\n野风药业不断推进技术创新加强产品力，致力打造优质企业ZAKER新闻2023-04-27\\n\\n海能技术2023年第一季度营收5199.28万 有机元素分析系列收入增长挖贝网2023-04-27\\n\\n百洋股份2023年第一季度营收5.54亿 净利362.39万 出口价格及出口量、饲料产销量同比下降挖贝网2023-04-27\\n\\n4月26日尿素产业链情报生意社2023-04-27\\n\\n评论: 民生银行发布钢铁行业低碳转型金融服务方案365jia.cn2023-04-27\\n\\n信誉认证专区我要认证 >\\n\\n益加益(湖北)机械设备集团有限公司\\n 实地认证\\n \\n 金牌企业\\n \\n 益加益（湖北）机械设备集团有限公司主营业务是粮油机械制造和销售。\\n 企业大门办公楼\\n\\n成都泛美航空旅游中等职业技术学校有限公司\\n 实地认证\\n \\n 学校环境优美，教学设施设备齐全\\n 凯旋门第一教学楼\\n\\n成都泛美航空旅游中等职业技术学校有限公司\\n 实地认证\\n \\n 学校环境优美，教学设施设备齐全\\n 凯旋门第一教学楼\\n\\n北京现代汽车金融有限公司\\n \\n 实地认证\\n \\n 我们根植于中国市场，致力于成为一家具有全球化视野的金融公司。\\n 公司大厦公司前台\\n\\n北京现代汽车金融有限公司\\n 实地认证\\n \\n 我们根植于中国市场，致力于成为一家具有全球化视野的金融公司。\\n 公司大厦公司前台\\n\\n爱心人寿保险股份有限公司\\n \\n 实地认证\\n \\n 爱心人寿保险股份有限公司是经中国银保监会批准成立的全国性、综合性人寿保险公司。\\n 爱心所在大楼爱心前台\\n\\n爱心人寿保险股份有限公司\\n 实地认证\\n \\n 爱心人寿保险股份有限公司是经中国银保监会批准成立的全国性、综合性人寿保险公司。\\n 爱心所在大楼爱心前台\\n\\n武汉华日精密激光股份有限公司\\n \\n 实地认证\\n \\n 华日激光秉承“用激光工具改变生活”的愿景。\\n 超快产业基地激光展厅\\n\\n武汉华日精密激光股份有限公司\\n 实地认证\\n \\n 华日激光秉承“用激光工具改变生活”的愿景。\\n 超快产业基地激光展厅\\n\\n深圳市安保医疗科技股份有限公司\\n \\n 实地认证\\n \\n 安保医疗，专业从事急救和生命支持综合解决方案的医疗企业。\\n 办公大楼前台\\n\\n深圳市安保医疗科技股份有限公司\\n 实地认证\\n \\n 安保医疗，专业从事急救和生命支持综合解决方案的医疗企业。\\n 办公大楼前台\\n\\n北京科技职业学院\\n \\n 实地认证\\n \\n 北京科技职业学院办学方针育人为本，德育为先\\n 学校大门办公楼\\n\\n北京科技职业学院\\n 实地认证\\n \\n 北京科技职业学院办学方针育人为本，德育为先\\n 学校大门办公楼\\n\\n河南亚新窑炉有限公司\\n \\n 实地认证\\n \\n 河南亚新窑炉有限公司承建、设计移动式隧道窑和多拼式隧道窑。\\n 企业门头厂区内环境\\n\\n河南亚新窑炉有限公司\\n 实地认证\\n \\n 河南亚新窑炉有限公司承建、设计移动式隧道窑和多拼式隧道窑。\\n 企业门头厂区内环境\\n\\n武汉长乐园园林开发有限公司\\n \\n 实地认证\\n \\n 武汉长乐园是经湖北省民政厅批准，合法建立的一座现代化经营性公墓\\n 长乐园正门月亮湖\\n\\n武汉长乐园园林开发有限公司\\n 实地认证\\n \\n 武汉长乐园是经湖北省民政厅批准，合法建立的一座现代化经营性公墓\\n 长乐园正门月亮湖\\n\\n吉香居食品股份有限公司\\n \\n 实地认证\\n \\n 金牌企业\\n \\n 吉香居食品股份有限公司成立于2000年12月，总部位于四川眉山，主营泡菜、调味酱\\n 公司大门办公大楼\\n\\n吉香居食品股份有限公司\\n 实地认证\\n \\n 金牌企业\\n \\n 吉香居食品股份有限公司成立于2000年12月，总部位于四川眉山，主营泡菜、调味酱\\n 公司大门办公大楼\\n\\n益加益(湖北)机械设备集团有限公司\\n \\n 实地认证\\n \\n 金牌企业\\n \\n 益加益（湖北）机械设备集团有限公司主营业务是粮油机械制造和销售。\\n 企业大门办公楼\\n\\n益加益(湖北)机械设备集团有限公司\\n 实地认证\\n \\n 金牌企业\\n \\n 益加益（湖北）机械设备集团有限公司主营业务是粮油机械制造和销售。\\n 企业大门办公楼\\n\\n成都泛美航空旅游中等职业技术学校有限公司\\n 实地认证\\n \\n 学校环境优美，教学设施设备齐全\\n 凯旋门第一教学楼\\n\\n成都泛美航空旅游中等职业技术学校有限公司\\n 实地认证\\n \\n 学校环境优美，教学设施设备齐全\\n 凯旋门第一教学楼\\n\\n北京现代汽车金融有限公司\\n \\n 实地认证\\n \\n 我们根植于中国市场，致力于成为一家具有全球化视野的金融公司。\\n 公司大厦公司前台\\n\\n您可能感兴趣的企业\\n\\n北京保利星数据光盘有限公司\\n\\n四川西南交大铁路发展股份有限公司\\n\\n浙江科瑞普电气有限公司\\n\\n深圳市通用科技有限公司\\n\\n南京我乐家居股份有限公司\\n\\n爱企查\\n\\n关于我们用户协议免责声明\\n\\n联系我们\\n\\n用户反馈：\\n 点此反馈\\n\\n商务合作：ext_bd-aiqicha@baidu.com\\n\\n数据来源\\n\\n国家企业信用信息公示系统信用中国中国裁判文书网\\n\\n中国执行信息公开网国家知识产权局商标局\\n\\n版权局民政部\\n\\n京ICP证030173号京网文|2013|0934-983号\\n Copyright ©2023 Baidu\\n\\nAPP\\n\\n公众号\\n\\n小程序\\n\\n百度小程序\\n\\n微信小程序\\n\\n反馈\\n\\n置顶\\n\\n提示\\n\\n退出后，需要重新登录，确认退出吗？\\n\\n取消\\n\\n确定', metadata={'source': 'https://aiqicha.baidu.com/brand/detail?pid=xlTM-TogKuTwDXvk7672ZY75%2AN-J6d58lQmd&id=339490880&from=ps&pd=pb'}),\n", " Document(page_content='公开发布笔记\\n\\n首页\\n\\n番剧\\n\\n直播\\n\\n游戏中心\\n\\n会员购\\n\\n漫画\\n\\n赛事\\n\\n下载客户端\\n\\n\\n\\n登录\\n\\n\\n\\n大会员\\n\\n消息\\n\\n动态\\n\\n收藏\\n\\n历史\\n\\n创作中心\\n\\n\\n\\n投稿\\n\\n飞机上还能这么high？！\\n\\n全站排行榜最高第38名\\n\\n100.7万\\n\\n2160\\n\\n2023-04-24 15:23:14\\n\\n未经作者授权，禁止转载\\n\\n智慧的眼神\\n\\n飞机上还能这么high？！\\n\\n关注\\n\\n正在缓冲...\\n\\n已静音开播\\n\\n点击恢复音量\\n\\n登录 免费享高清视频\\n\\n试看30秒\\n\\n00:02\\n\\n08:38\\n\\n自动\\n\\n1080P 高码率大会员\\n\\n1080P 高清登录即享\\n\\n720P 高清登录即享\\n\\n480P 清晰登录即享\\n\\n360P 流畅\\n\\n自动(360P)\\n\\n倍速\\n\\n2.0x\\n\\n1.5x\\n\\n1.25x\\n\\n1.0x\\n\\n0.75x\\n\\n0.5x\\n\\n镜像画面\\n\\n洗脑循环\\n\\n自动开播\\n\\n更多播放设置\\n\\n播放方式\\n\\n自动切集\\n\\n播完暂停\\n\\n视频比例\\n\\n自动\\n\\n4:3\\n\\n16:9\\n\\n播放策略\\n\\n默认\\n\\nAV1\\n\\nHEVC\\n\\nAVC\\n\\n其他设置\\n\\n隐藏黑边\\n\\n关灯模式\\n\\n高能进度条\\n\\n打开《高能进度条》常驻\\n\\n已装填 1925 条弹幕\\n\\n按类型屏蔽\\n\\n滚动\\n\\n顶部\\n\\n底部\\n\\n彩色\\n\\n高级\\n\\n智能云屏蔽\\n\\n3级\\n\\n弹幕随屏幕缩放\\n\\n防挡字幕\\n\\n智能防挡弹幕\\n\\n添加屏蔽词\\n\\n同步屏蔽列表\\n\\n不透明度\\n\\n80%\\n\\n显示区域\\n\\n1/4\\n\\n半屏\\n\\n3/4\\n\\n不重叠\\n\\n不限\\n\\n半屏\\n\\n弹幕字号\\n\\n100%\\n\\n弹幕速度\\n\\n极慢\\n\\n适中\\n\\n极快\\n\\n适中\\n\\n高级设置\\n\\n全新【硬核会员弹幕模式】\\n\\n更多弹幕设置\\n\\n弹幕速度同步播放倍数\\n\\n弹幕字体\\n\\n黑体\\n\\n黑体\\n\\n宋体\\n\\n新宋体\\n\\n仿宋\\n\\n微软雅黑\\n\\n微软雅黑 Light\\n\\nNoto Sans DemiLight\\n\\nNoto Sans Regular\\n\\n粗体\\n\\n描边类型\\n\\n重墨\\n\\n描边\\n\\n45°投影\\n\\n恢复默认设置\\n\\n请先\\n\\n登录或\\n\\n注册\\n\\n弹幕礼仪\\n\\n发送\\n\\n优先使用播放器内置策略播放\\n\\n优先使用 AV1 编码视频播放\\n\\n优先使用 HEVC/H.265 编码视频播放\\n\\n优先使用 AVC/H.264 编码视频播放\\n\\n开启画中画\\n\\n宽屏模式\\n\\n网页全屏\\n\\n进入全屏 (f)\\n\\n关闭弹幕 (d)\\n\\n视频底部15%部分为空白保留区\\n\\n反馈\\n\\n7.8万\\n\\n5.1万\\n\\n4771\\n\\n飞机上还能这么high？！从00:00开始分享\\n 获取视频分享链接手机扫码观看/分享动态微信QQQQ空间微博贴吧嵌入代码 467\\n\\n用手机看\\n 稍后再看\\n\\n我的普通生活不普通飞机\\n 搞笑\\n 生活\\n 日常\\n 生活记录\\n 长沙\\n 女子推理社\\n 唠嗑\\n 白醋少女\\n 追一趟春日列车\\n\\n收起\\n\\n我的普通生活不普通\\n\\n飞机\\n\\n搞笑\\n\\n生活\\n\\n日常\\n\\n生活记录\\n\\n长沙\\n\\n\\n\\n女子推理社\\n\\n唠嗑\\n\\n白醋少女\\n\\n追一趟春日列车\\n\\n坎公过生日，送你120抽！还有这种好事？\\n\\n评论1574\\n\\n最热最新\\n\\n请先\\n\\n登录\\n\\n后发表评论 (・ω・)\\n\\n发布\\n\\n不知落花为何物\\n\\n我是19年的老粉，见证了白醋从阿姨变成少女的全过程\\n\\n2023-04-25 00:27\\n\\n3242\\n\\n回复\\n\\n加入黑名单\\n\\n举报\\n\\n热评\\n\\n白醋少女\\n\\n2023-04-25 00:33\\n\\n36\\n\\n回复\\n\\n加入黑名单\\n\\n举报\\n\\n阿对的摆烂日常\\n\\n回复 @白醋少女 :好的老婆\\n\\n2023-04-25 08:14\\n\\n回复\\n\\n加入黑名单\\n\\n举报\\n\\n共51条回复,\\n\\n点击查看\\n\\n全谦\\n\\n知道为什么她不断更吗？因为她把哔哩哔哩当成朋友圈。\\n\\n2023-04-26 00:20\\n\\n15\\n\\n回复\\n\\n加入黑名单\\n\\n举报\\n\\n白醋少女\\n\\n那就恰恰证明你们都是我的朋友呀\\n\\n2023-04-26 00:32\\n\\n回复\\n\\n加入黑名单\\n\\n举报\\n\\n全谦\\n\\n回复 @白醋少女 :既然是朋友，那借我500\\n\\n15小时前\\n\\n回复\\n\\n加入黑名单\\n\\n举报\\n\\n共4条回复,\\n\\n点击查看\\n\\n登录后查看 1000+ 条评论\\n\\n白醋少女\\n\\n发消息\\n\\n工作vx：whiteboom7（不是本人）\\n一只努力逗你开心的少女（阿姨）在此！\\n\\n充电\\n\\n关注 162.9万\\n\\n弹幕列表\\n\\n弹幕列表\\n\\n屏蔽设定\\n\\n高级弹幕\\n\\n弹幕列表填充中...\\n\\n查看历史弹幕\\n\\n假期出门这么画，松弛感max！无眼影红唇妆\\n 杨豆奶\\n\\n接下来播放\\n 自动连播\\n\\n08:27\\n\\n如果你们来到武汉跟着我女朋友这样吃，那我觉得这件事情…泰裤辣！\\n\\n卑鄙的老曹\\n\\n01:17\\n\\n英文谐音梗 “我勒个去”！\\n\\njohnhuu\\n\\n00:29\\n\\n你怎么证明你是你自己？？？\\n\\n疆域阿力木\\n\\n02:22\\n\\n两分半速通西天\\n\\n巴特丶八仔\\n\\n02:05\\n\\n【女子推理社】 前台女孩诡笑吓懵戚薇 刚进公司诡事连连？？\\n\\n云霞霜雪\\n\\n01:57\\n\\n狠人rapper泰裤辣\\n\\n刘背实\\n\\n00:20\\n\\n好家伙，果然最穷的还是我！\\n\\n娱乐有范OU\\n\\n01:56\\n\\n这么甜的兔子警官，谁不想帮她呢\\n\\n观影修罗场\\n\\n00:18\\n\\n下雨这件事，泰裤辣！\\n\\nso小马弟\\n\\n00:10\\n\\n天黑容易犯错 屋顶会着火\\n\\n地位极高硬气鑫\\n\\n02:29\\n\\n“近五年不会有超过它的作品了！”\\n\\nHongkongFilm\\n\\n01:59\\n\\n哪个正经人旅游和上班一样啊\\n\\n侯翠翠\\n\\n02:27\\n\\n仅18秒视频涨粉60万，带货2年掉粉50万，全网“最不上进”的主播\\n\\n星如雨湘\\n\\n00:16\\n\\n有些男孩子怎么回事啊！\\n\\n白醋少女\\n\\n01:06\\n\\n哥哥他凶我\\n\\n白婉晴\\n\\n00:22\\n\\n大学生了就不要穿的像个小孩一样了\\n\\n七颗猩猩QKXX\\n\\n00:29\\n\\n在飞机上配着帅气的保护壳玩Switch可太棒了呀！\\n\\nPoetic元学习up\\n\\n06:50\\n\\n【前方高能】“同志，你的信仰似乎最近动摇了！！”\\n\\n种花家的阿燃\\n\\n03:20\\n\\n五一调休这件事情，泰裤辣！\\n\\n文西与阿漆\\n\\n00:23\\n\\n再说就不礼貌了嗷！\\n\\n白醋少女\\n\\n展开\\n\\n一起来创作有趣表情包吧！！\\n\\n大家围观的直播\\n\\nLIVE她好像知道自己很可爱糖醋娜美611\\n\\n客服\\n\\n赛事库\\n\\n课堂\\n\\n2021拜年纪', metadata={'source': 'https://www.bilibili.com/video/BV1gT411H7RT/?spm_id_from=333.1007.tianma.3-3-9.click'})]" ] }, "execution_count": 8, "metadata": {}, "output_type": "execute_result" } ], "source": [ "data = loader.load()\n", "data" ] } ], "metadata": { "kernelspec": { "display_name": "base", "language": "python", "name": "python3" }, "language_info": { "codemirror_mode": { "name": "ipython", "version": 3 }, "file_extension": ".py", "mimetype": "text/x-python", "name": "python", "nbconvert_exporter": "python", "pygments_lexer": "ipython3", "version": "3.10.10" }, "orig_nbformat": 4 }, "nbformat": 4, "nbformat_minor": 2 }