35 条回复  ·  329 次点击
dejavuwind 初学 2024-8-30 18:00:28

我这种需求应该去学什么

@unco020511 打个 8 折 交个朋友
yb2313 小成 2024-8-30 18:30:44

我这种需求应该去学什么

上爬虫, 给系统上上压力
Sawyerhou 小成 2024-8-30 18:44:46

我这种需求应该去学什么

系统能用 chrome 打开吗?能的话用 automa 插件试试。
saranz 小成 2024-8-30 18:48:15

我这种需求应该去学什么

还是直接和领导申请数据库吧,写虫子,对业务系统太浪费了。
NoOneNoBody 小成 2024-8-30 18:48:17

我这种需求应该去学什么

给你个最简单的方案:
1. 先让 chatgpt 写个 python flask ,接收油猴提交过来的数据,就几行 python 而已
如果后续计算简单,可以让 flask import 计算模块直接计算,储存结果,然后返回给油猴
如果计算复杂耗时,几分钟完成不了,就直接存接收的数据,离线另外计算
2.油猴,让 chatgpt 写,你需要做的就是用浏览器找到数据所在元素,开发者工具 copy css selector 并告诉 gpt 提取这个
如果需要自动翻页,也是知道多个页面的地址,让 gpt 写自动跳到下一页
脚本获取后提交给前面说的 flask ,看情况是否需要获取返回,离线计算的话,alert 知道存了就行了

把整个需求组织一下,跟 chatgpt 说清楚,自己改改基本就可以了,全部本地操作,不用学太多东西
liuyx7894 初学 2024-8-30 18:58:31

我这种需求应该去学什么

呃...大概率爬虫框架都不用,你把列表页接口和详情页接口找到,然后把你的 token 搞下来用任意语言循环请求一下就搞定了....
内部系统也没啥反扒...
Nosub 小成 2024-8-30 21:26:20

我这种需求应该去学什么

提供两个思路,做过类似的功能,
第一个:纯 api 接口层面,看看是否可以直接调用接口,如果不能,看看 api 是否可以重放,如果可以重放,就表示可以提取 cookie 或是 token 写脚本。

第二个:如果数据依然来自 api 接口,如果接口很难破解或是以你的能力破解不了,那就不破解,抓包就可以了,写一个模拟点击的功能,然后写一个抓包插件,基于 fiddler 写个抓包插件或是脚本并不难,可以学习下 c#。

第三个:如果数据是服务端渲染,也就是数据在 HTML 里面,那更加简单,写个爬虫,解析 HTML 就可以。


第四,如果以上方法都不行,用按键精灵写一个脚本,模拟人为点击,复制数据,粘贴数据。
stillsilly 小成 2024-8-30 22:11:58

我这种需求应该去学什么

3 个 js 函数就行了  
列表数据 = 发请求拿列表页数据()
列表数据.循环每条(一条数据 => {
       详情数据  =  发请求拿详情数据(一条数据.id)
      // 拿到详情数据了,存到数组里,列表循环完之后导出成 excel 文件。也是一个简单的小函数就可以了。
      // 不会写的话可以问 chatGPT ,就这么问它:帮我用 js 写一个函数,传入数组,把数组转成 excel 下载下来。
})
adoal 小成 2024-8-30 22:42:53

我这种需求应该去学什么

设计系统的架构受制于产生这些设计的组织的沟通结构。

——马文·康威,1967
imicksoft 小成 2024-8-30 23:02:29

我这种需求应该去学什么

是浏览器打开的 web 管理系统?
那用 aardio ,web.view2 组件,循环浏览提取网页上的信息,保存一下,再整理
返回顶部