粉丝1193获赞6920

使用网页版的抖音在分享链接的时候会发现一个问题,比方说我要分享这个链接,点击分享得到的内容却是有点杂的,你看我得到内容这么长的一个内容, 然而实际上我只要这个网址,那如何来提纯呢?我们用拍摄来写这个的吧,比方说 我拿到了这样的一个字母串,如何获取链接? 实际上我们会发现它的规律是用空格来进行分割的,所以我们可以尝试把这个支付串进行分割,按照空格进行分割,这里布写也可以。分割 以后得到的力就是一个列表,我们只需要获取列表的倒数的第一个,第二个获取列表的倒数第二个成员就可以了,所以尝试获取列表的倒数第二个成员再来看, 那么这个东西链接就拿到了,点击这个链接,我会发现跳转到了我需要的那个视频上面去了。好,这样提成工作就完成了。好,接下来我们要把这个字不算变成动态的, 我们要把这个支付串变成动态的,那动态的话就需要用户通过手写的方式来完成,所以让他用一 的来接收请输入抖音的分享链接就 ok 了,然后他会打印输出 好代码。完成之后我们再来尝试进行一次,进行一次分享。好,假设我要分享这个链接了,然后获取分享链接。获取分享链接之后, 然后我们可以启动这个程序,分享链接粘进去,然后回车,那么结果就拿到了,然后点击我就可以打开我需要的一个页面了。 好,这是利用拍摄来完成抖音网页分享链接的一个提成操作。

selina mui 自动化测试值获取网页啊,好,我们来看一下如何获取网页的 url 啊,也就是获取我们的这个什么地址,那获取地址有什么用呢?啊?那么它的主要用途也是用来什么呢?断言, 有时候还是以登录为例,为例的话,当我们登录前,那么他的 u r l 是 ur, 登录之后就变成了这个, 那我就执行完登录后的脚本之后我就获取了这个二二,来判断一下,哎,是不是符合我的预期,是,就说明这个登录功能是正常的,那我们就测试用力是通过的,如果不是,那就说明登录功能是有问题的,那我们这个用力呢就是失败的,所以它的主要用途呢是用在我们用力的断眼上。 然后我们来看一下啊,如何获取啊?网页的这个幺二二, 看这个壳也挺小样, 比如说我们得到幺二二,我们复制的电量有好我们来喷他, 让我们来执行演示一下, 好,我们来看这个幺二二,数已经得到了,对吧?这就是我们获取网页幺二二的方法,就这个, 本次知识输入就到这里啦,你学会了吗?还有哪些疑问,评论区留言或私信我将一一为大家解答。

有小伙伴私信我怎么不更新了?因为比关修炼了一段时间,最近才有空发发视频,有问题可以随时来撩我。今天要分享的是利用 python 批量获取某个 u r l 里面 所有的链接,并整合到 exo 里面案例,批量获取阿里巴巴网页 url, 然后通过 url 获取到 meta 信息来获取到对应 url 的标题加关键词。 宝,我想你了,好难。


在我们的那个三天体验课的时候,有同学说,老师我登录这个京东的网址之后,我找不到含有数据的 u i 哦,或者说老师我找不到那个放大镜,那今天老师来给你讲一下怎样去找。那么我们登录这个京东的网站之后,我们在这搜索鞋子, 那么我们在这的时候呢,去按照他的这个销量抬一抬,抬完之后呢,那我们看 第一个位于第一个的,我们把它点开,点开之后我们去找到他的一个商品的评论部分,那 这个时候你去按一下键盘上的 f 十二,但不是所有电脑上的 f 十二都好用,如果不好用怎么办?单击右键检查也是可以的,那么我们去找到这个叫 出货口,然后呢我们这块什么都没有,你把鼠标放到这,按一下,回车刷新一下,那么再去点击这个商品的评论, 那么在这的时候呢,有的人是放大镜是谁啊?不是就是找这个搜索吗?对吧?那么我们找 u r l 的第一种方式,你可以采用这种搜索的方式,我把里面都删除,你可以采用这种搜索的方式找到几个字啊, 别整太多,找太多的话可能是不好使,当我们复制之后,倒着粘贴刷新,他就会出现含有这条数据的一个请求,我们点击一下,你看 就在这呢,这个就是你要找的含有数据的 u r l 这款 happy 当中,你把它复制有 不开了,对吧?把它复制就 ok 了,那么这是第一第一种方式。那么还有第二种方式是什么?就说老师我找不到放大镜啊,我也没有办法搜索呀,那你的第二种方式就是我知道这个数据是一个阶层数据,所以 这一块有个叫 ceo 车,你呢?在这直接写个街森回车,那么整个的请求当中的所有街森数据都会在这显示,那这样的话就缩小了你查找 u r、 l 的一个范围,那你看 一二三四五六七有七个,你可以在这七个当中去找含有数据的,这样的话也可以找得到。

你真的了解 u r l 吗? u i l 就是我们经常说的网址 url, 经常混淆的有这么几个 uriurn uri, 它是统一资源标志服。 u i l 就是我们经常说的网址,他是统一资源定位服务,而还有一个 urn 呢?他是统一资源名称,他们之间是什么关系呢?我们来看一下 ui, 它是一个总体的概念,它包括了 uil 和 uin。 我们来举个例子, 这里的三 w 百度点 com, 他就是一个 ur, 同时呢他也是 uri, 而下面这些呢,他们都是一个资源文件,所以他们属于 uri。 对于最后一个 urn, 他使用的并不太多,比如说 每本书的 isb 音号,就可以用这里的 uin 来表示。我们看一下一个 ul, 它的组成部分。 在这一个 uil 中,我们看到第一个 http, 它是协议名称,现在使用比较多的协议主要有 http 协议和 https 协议。 https 也就是在 http 的基础上又添加了一个 ssl, 增加了访问的安全性。下一个三 w example 点 com, 这是网站的域名 下一个冒号八零,八零就是这里的端口号,因为每个应用程序他都有自己的端口号, 比如说之前我们在介绍买四盒的时候,他的端口号就是三三零六,而对于 httb 服务,他默认的端口号 就是八零。也就是说我们访问三 w 点百度点 com 和访问三 w 点百度点 com 冒号八零效果是一样的。 接下来是文件的路径,我们连接到服务器以后,会到这个服务器下面的这个目录下面去查找相应的文件。 接下来问号后面的是参数,我们在 uil 中设置一些传递的参数,然后服务器就可以接受到这些参数,并做一些相应的处理。 最后一个井号后面的它叫做毛点,它的作用呢?就是当我们点击它以后,可以立即跳转到这个页面中的某一个特定部位,一个 ul 基本上就是由这么多元素组成的。

介绍完 request 对象是用通用的方式来获取请求参数,就是 get parameter 那一系列的方法。之后啊,接下来我们来介绍一下这个请求参数啊,如果有中文的问题,其实会有乱码哈,那么有乱码我们就来处理这个乱码, 那么首先呢,我们先把这个乱码呢给他演示一下哈,在这一块呢,我们打开 idea, 在这表单里边呢,现在我们来改一下对应的提交方式哈,这个提交方式是 post, 我们把它改成 get, ok 吧。改完 get 之后呢,我们在这个位置呢,把这个提交的 solit 改成 iq 四,刚好这个地方刚才我们创建了一个空的 solit 在这里边呢,我们就来接收一下对应的请求参数啊,那么来获取一下 user name ok 吧,那么 user name 获取呢?我们 request 点 get parameter 直接来获取就可以了哈,好,获取。

要讲案例收集智能体,首先我们先输入我们需要录入的幺二幺连接,然后我们选择我们需要录入的产品,这里选择 java server, 然后就会开始上传,这边会先调取 mcp 服务,是靠近 crm 的 mcp 服务获取到商机,然后我们确认我们需要录入的客户名称, 然后我们点击确定这样内容,呃,我们的知识库就已经录入完毕了,现在我们确定我们要录入的标签, 可以看到标签录入成功, 看完了演示效果,来让我们看一下案例收集智能体的逻辑结构,他的工作流到底是怎么样的。首先 在这边我们案例收集智能体文件上传,这边齿轮点开上,呃,开启的一个是文档和视频,然后具体上传的多少文件数是自己决定的,呃,这个就本次,不不不,就是 案例收集智能体,他支持呃多同时上传多个文件和同时上传多个 url。 我 们来看一下,首先开始,后面跟着表单收集,表单收集的配置参数产品,我们点开看一眼, 这里编辑参数组织类型,我们选择选项卡,然后标签是 james roder, 就是 我们就是各个产品,后面这个选项值是什么?这个选项值就是知识库,就是对应的知识库的 id, 在后面我们走到这个自定义工具,这个自定义工具只是把它分断,就是我们把呃每一个给大家看,把每一个 url 拆开,因为我们要支持上面多个 url 嘛,然后把它拆开,拆开之后在这边把它分组, 你看这边循环节点,这里写的是循环啊,数组循环,然后 循环开始,然后我们循环的数组是什么?循环的数组就是自定义工具,他拆开的这个一个一个 url 循环体内的。我们首先还有一个案例收集的子应用,待会会介绍,然后 在这他传入的参数有,首先呃用户问题,这里的这个用户问题,我们传入的是循环,开始循环元素就是我们的每一个 u 二幺,就是如果有 u 二幺他就这样上传, 然后选择文档这边我们开始文档,如果是上传文档就是把这个文档就是就是他子应用就会读取这个主应用传出传过去的文档。然后视频也是一个逻辑数据集 id, 就是 告诉子应用我们现在要录入哪一个 呃数据集,有哪一个知识库。然后我们开始讲一下第二个字,应用 quality c r m 查询案例,我们点开看一下 ctrl c r m 案例查询是案例查询子应用的子应用,它的这边接口传餐需要就是传入两个参数,一个是 a k 和 s k, 就是 ctrl c r m 的 a k 和 s k。 首先第一个我们是把呃传入的这个数据以接收形式传入给第二个正题,他是会把这个数据提取成呃商机啊,这些东西就是告诉我呃我们就靠近三 m, 最后我们要查的是商机的数据, 然后在这里我们就要只让他返回最后查询到的商机的名称啊,客户名啊,商机所有人啊,部门这些,然后在这边 我们进行了托米处理,然后我们强调了这边一定要是 contents, 就是 包含, 然后最后再,然后我们来介绍一下呃案例收集智能题子应用, 接下来让我们来介绍一下案例收集智能题的子应用。首先在这里我们打开了文件上传,我们需要哪些文件呢?我们需要文档和视频, 这里是和母应用里对应的,然后我们在这边用户输入,这边我们需要啊数据及 id, 数据及 id 也是在母应用那边有所对应。然后我们来到开始,开始后面接着四个指定回复, 首先是 a k 和 s k, a k 和 s k 是 called c r m 中的 a k 和 s k, 然后是 userbase u r l, userbase u r l 就是 你所用的 ms kb 的 地址啊, userkey 就是 你所用的 ms kb 的 userkey, 它在 api 管理中可以进行创建。 然后我们继续往下,是来到第一个 ai 对 话节点,这个 ai 对 话节点的目的是将我们前面收集到的数据及 id 和产品进行对应,目的是给出对应的产品的名称,可以方便后续进行调用。 我们继续往下来到 url 判断, url 判断这个节点,它可以判断用户输入的内容是否是包含了 url 连接的,然后它只会回答是和否。 再来到链接提取,链接提取它会把我们用户问用户输入中所有的信息进行判断,提取出来 u 二 l 内容,然后同时只输出 u 二 l 内容, 然后来到判断器,如果 u r 判断中判断出来它有 url 的 话,我们就会进入 url 处理,然后我们如果是开始文档,开始里面有文档,我们就会进行文档的处理,我们一开始有文档就会进行文档的处理,然后我们如果有视频就会进行视频的处理, 就下面上面是视频处理,下面是文档处理,然后我们继续往下我们 url 这条路,我们先介绍下 url 这条路吧,然后我们首先先进行的是什么链接内容爬取,我们会把这个 url 里包含的内容进行爬取就提取出来, 然后我们会对这个链接的内容进行企业名称提取,我们会找出这个文本中的企业,然后我们同样要简要输出,为什么我们要简要的输出呢?因为我们 希望在 qdcm 中查询商机的时候,呃进行模糊搜索,因为可能案例中没有提到具体的啊。公司名称, 同样很多公司他很他有很多子公司,我们希望把所有包相关的公司全都提取出来。 再往后我们这里有一个企呃企业名称提取,他会把我们这个 call dcm 中查询的案例他提直接提取出来一个可以进行企业工商查询的企业名称, 然后这个企业名称会填到这个表单里面, 如果这就是你需要的,你就可以直接啊继续点击提交,继续往下走,如果这是如果你有需要修改的话,你可以直接改了,然后再提交。 再往下就会对我们这边确认好的用户的客户的名称进行企业工商信息查询, 在这边考勤信息提取,我们会将前面这边考勤 crm 按查询到的所有案例进行信息的提取, 我们首先会只使用我们现在需要的这个产品的相关商机, 然后我们会提纯只需要只输出企业产啊对产签约产品,然后签约信息, 再往下我们会进行企业工商信息的提取,同样我们会对企业工商信息查询 api 中的结果进行信息提取,只提取出来,只输出我们需要的内容, 然后是 schema 提取,我们会综合原文呃企业官方信息提取,然后考勤信息提取的内容进行 schema 的 提取,就是把 schema 全都提取出来, 然后放在表单中进行人工复刻,如果人人工觉得就是现在是可以直接入入库了,我们就直接点击接受, 然后如果不接受的话,本次入库就终止。在入库的流程中,我们的逻辑是怎么样的?我们首先会把 u l 转化为 markdown 的 u l, 然后我们会去除 schema 的 markdown 的 格式, 再把这些内容和原文拼接起来,可以看到输入参数有这个 markdown 的 content, 这是来源是就是我们这边去除 schema 的 markdown, 然后 url content 就是 我们这边的 url 这个工具,然后 string content 就是 我们的原文, 我们继续往下获取链接内容标题,这工具的目的什么?这个工具就是我们最后录入的知识库的标题的来源。我们首先继续往下看, 我们还会进行把所有的就是我们之前的 skimmer 转化为关键问题啊,我们输入就是我们这边去除 skimmer 的 maxon 格式的结果,然后往下走,我们就开始上传到上传到知识库了, 我们输入参数有,首先文件名称,文件名称就是我们这边获取链接内容标题,然后 content 就是 我们这边拼接好的这些东西,就是这就是 content, 这边就是我们最后的呃知识库的内容了。 然后例子就是关键问题,然后 knowledge id, user key 和 user base url 继续往下 我们会获取我们现在上传的这个新的文档的 id, 同样我们会获得这个文档所在的知识库的所有的标签的 id, 然后我们会进行一个 ai 对 话,我们这个 ai 对 话的目的是什么?我们这个 ai 对 话会想目的是从文章中精确的提取出文档的标签,然后将它们一一对应, 然后我们把我们提出来的这些文档标签进行参数提取,然后放在表单中,让人工进行负荷, 最后确认好了需要什么标签之后,我们会进行文档标签 id 的 收集,它的目的是会让我们就是精确的提取出啊文档标签的 id, 然后将它们一一对应,它会把 首先我们表单收集,最后确认的啊标签和这个标签的 id 对 应,然后只输出我们需要的这个标签的 id, 可以 看一下回复,只输出这个 id, 然后我们把这个 id 录入到呃这个文档,我们可以看一下这边的输入参数啊, userkey 和 userbase 可以 就就不说了,然后我们看这边 knowledge id 就是 我们这边使用的这个数据集, 然后 document id 就是 我们这个文档的 id, 就是 我们最后目的要录入的这个文档,然后这边就是 i 就是 我们的标签标签的 id, 这样的话就可以 给对应的知识库的对应的文档进行标签的录入。 接下来让我们来看视频和文档,其实视频和文档与 url 这条呃路线的链路,路线的逻辑其实是一样的,我们可以看上面, 首先来到视频这条线,如果我们要处理视频,首先我会进行视频理解,就是我们会对这个上传到的视频进行也是 skma 提取, 然后我们还是同样的会对我们这个视频啊,就视频里的内容进行企业名称提取, 然后 call 第三 m 查询,然后企业名称,然后企业工商查询, 这边都是一样的。 我们来到工具这边,首先我们会收集我们视频的来源 u r l, 然后这个 url 的 木,这个 url 会在这里,这个工具使用,我们原本可以看一下原本 url 这个线路的逻辑是什么,就是我们最后上传到的文档, 刚才上去的文档的标题,它是来源于这个链接的内容的标题,那我们视频的啊,文档的标题来源在哪呢?就来源于我们这个 b 站的视频,因为我们这里是做的是 b 站, b 站的视频理解我们录入视频之后的文档的标题就是我们 b 站的视频的标题,然后后面都是一样的, 你看可以看到这边 file name 这边我们就是获取 b 段视频标题 后面的逻辑都和 u 二 l 那 条线路是一样的,都是呃参数提取,然后文档标签 id 收集,然后直接创建标签。 接下来我们来聊呃文档,我们来看一下文档这边怎么处理的,其实文档这边也是大同小异,首先判断是文,有文档之后,我们会先进行 在这边呃上传文件后获取呃文件的获取文件的内容 他可以,比如说你上传多多个文件的时候,他会把所有文件的内容都提取出来,然后放在一起 传到循环节点,作为循环数组,这样就可以做到把多个文件一个一个进行处理,实现多组文件啊入库入库, 我们来看一下啊循环节点里的逻辑。 首先也是企业名称提取,然后是 call 一 三 m 查询,然后这边都是一样的客户名称确定,企业工商信息查询 api, 然后是否接受。 在这边同样可以看到 我们上传文档入库之后的文件名来源是什么,就是我们这个上传的文件的文件名, 我们这边需要两个参数,一个是呃我们这个文档嘛,然后和这个这 idx, 就是 我们 现在处理到了第几个文件,然后我们就取这个 d 对 应的 d, 比如说去现在处理第二个文件,我们就找到这个第二个文件的啊 document 的 content, 然后进行处理,所以这里要加一个下标,开刚开始的下标, 然后后面的逻辑也是一样的,可以看到在这边我们 file name 就是 我们这边获取上传文件的文件名。再然后呃就是文档标签收集, 然后文档标签 id 收集和创建标签。 接下来让我们看一下实际的效果。我们首先点击第一条顺丰科技的 jimmy 案例, 可以看到他成功给出了我们需要的案例, 包含了之前案例收集的 schemer。 然后我们再点击物流行业有哪些典型的 jump server 案例, 我们来看一下案例查询的工作流, 首先我们会进行查询问题的确认,我们会精准的提取出,就通过问题来提取出这个问题所包含的跟文档相关的标签,然后输出出来,这边可以看到输出出来,然后 我们在这边文档标签解锁,进行呃,解锁标签, 然后我们会把跟这个标签有关的所有文档传给这边知识库剪辑,这样我们就少了很多啊不必要的文档的剪辑。 然后我们总结这边我们直接对啊知识库剪辑到的所有信息进行总结,然后回答 视频到这里就结束了,欢迎大家在评论区留下意见和问题。