找回密码
 立即注册

QQ登录

只需一步,快速开始

wenwwlwing

初级会员

17

主题

54

帖子

335

积分

初级会员

积分
335
wenwwlwing
初级会员   /  发表于:2020-12-20 14:25  /   查看:8607  /  回复:15
100金币
本帖最后由 wenwwlwing 于 2020-12-20 18:02 编辑

如题,我需要每天进行一次跟踪,获取某个其他网页的阅读量等数据,并把这些数据保存到活字格数据库,便于以后统计分析,所以建立主子表如下:




页面如下:



但是,这些数据每次都得手动点开对应的链接去查看,然后手动填到表格中,

既然活字格有服务端命令,有定时命令,那么能否利用这些命令把对应的数据抓取回来,每天自动保存在表格中?

附上工程文件,请大佬指点





附件: 您需要 登录 才可以下载或查看,没有帐号?立即注册

15 个回复

正序浏览
Tracy.Liu讲师达人认证 悬赏达人认证 活字格认证
论坛元老   /  发表于:2020-12-24 09:29:13
16#
感谢大家支持~
回复 使用道具 举报
renho活字格认证
银牌会员   /  发表于:2020-12-23 22:11:52
15#
wenwwlwing 发表于 2020-12-23 19:14
有道理,所以用了八爪鱼采集数据,用服务端命令读入csv

如果您的问题已解决,请及时更新帖子的状态为“已处理”,并设置最佳答案给有帮助到你的回复;
如果您的问题还未解决,欢迎跟帖补充;
如果您有新的问题,也欢迎创建新的求助帖。
回复 使用道具 举报
wenwwlwing
初级会员   /  发表于:2020-12-23 19:14:45
14#
renho 发表于 2020-12-22 00:16
哪个方便用哪个   现在开发都是一堆技术栈
没有用一个东西 解决所有问题的全能工具出现。

有道理,所以用了八爪鱼采集数据,用服务端命令读入csv
回复 使用道具 举报
Tracy.Liu讲师达人认证 悬赏达人认证 活字格认证
论坛元老   /  发表于:2020-12-22 09:00:29
13#
感谢各位大佬~
回复 使用道具 举报
wenwwlwing
初级会员   /  发表于:2020-12-21 21:01:18
11#
Tracy.Liu 发表于 2020-12-21 16:20
其实我理解,你是直接从网页上爬数据,那你可以直接把数据爬出来,然后把处理自己写代码处理好,或者是楼上 ...

主要是不想再用第三方程序了,就想在活字格中实现全部功能呢
回复 使用道具 举报
wenwwlwing
初级会员   /  发表于:2020-12-21 21:00:33
10#
renho 发表于 2020-12-21 13:29
这个关键看你会不会代码了
不会就用采集器 百度一搜会有很多
定时入库  一次性搞定   还不用写代码

好的,谢谢啦!我试试
回复 使用道具 举报
Tracy.Liu讲师达人认证 悬赏达人认证 活字格认证
论坛元老   /  发表于:2020-12-21 16:20:29
9#
其实我理解,你是直接从网页上爬数据,那你可以直接把数据爬出来,然后把处理自己写代码处理好,或者是楼上大神提供的方式,把数据直接存到数据库里。活字格中用作数据展示。
活字格服务端命令有一个调用程序的功能,给你说一下,如果需要,可以看一下。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
回复 使用道具 举报
renho活字格认证
银牌会员   /  发表于:2020-12-21 13:29:16
8#
wenwwlwing 发表于 2020-12-20 23:31
谢谢!但是有时候不一定是微博,有可能是头条号或其他网站的一条内容,想找到一种通用的办法

这个关键看你会不会代码了
不会就用采集器 百度一搜会有很多
定时入库  一次性搞定   还不用写代码


你想用活字格来实现的话  会复杂得多
回复 使用道具 举报
wenwwlwing
初级会员   /  发表于:2020-12-20 23:32:34
7#
phoben 发表于 2020-12-20 19:20
如果不想做官方的API,可以在用一个定时命令,再服务端用POST插件取到网页源码,然后通过代码进行截取所要 ...

谢谢!能否详细讲解一下怎么取到网页源码?怎么截取吗?
回复 使用道具 举报
wenwwlwing
初级会员   /  发表于:2020-12-20 23:31:23
6#
renho 发表于 2020-12-20 23:18
1、用微博的api,用post插件去定时调用

2、此外,还有一种办法,存储过程    是可以get操作的,配合微博 ...

谢谢!但是有时候不一定是微博,有可能是头条号或其他网站的一条内容,想找到一种通用的办法
回复 使用道具 举报
12下一页
您需要登录后才可以回帖 登录 | 立即注册
返回顶部