怎么发送采集数据到网站-http接口方式

采集完成的数据,要怎么发送到网站上呢?

我们可以使用http的post方式来传输数据,需要有接收数据的接口文件,然后在工具中对接参数映射要传输的数据即可。

例如用,它就支持把采集到的数据,快速自动化批量发送到用户的网站,设置也挺人性化的,需要用户自行提供的接收数据的http接口。

该发送方式十分通用灵活,几乎可以给任何网站传输数据,但是主要是给用户自己开发的系统使用,因为需要程序员才会使用。

如果是开源的CMS系统,也可以去官方商城中寻找对应的接口或插件,如果是非官方的请务必检查有无安全问题,再使用。

一、http自定义接口传输方式:

发送数据时,会把数据组装为http请求的格式:

参数名1=参数值1&参数名2=参数值2...

然后将组装的数据通过http的post方式传输给用户的自定义http接口,每发送一条数据就调用一次接口。

例如post表单数据: myTitle=测试标题&myContent=这是正文的内容...

自定义http接口接收到数据后,会对数据进行处理,最后写入网站,就完成了数据发送。

二、创建对接发送配置:

1. 自定义HTTP接口入口

  在要发送的采集任务的【导出目标管理】栏,点击【+自定义HTTP接口配置】按钮,创建自定义HTTP接口发送目标;

2. 自定义HTTP接口目标配置

I、基本信息配置

带星号是必填项,建议要设置安全校验参数,在【密码参数名】与 【发送密码】对应填写,也可到下一步第二步【添加URL参数及与抓取字段映射】中填写的,二选一填写即可。

【POST内容类型】可以选择表单格式或者JSON格式,默认是表单格式。

【状态】的选择是用户自己的标记信息,不影响系统执行;

II、映射字段配置

第一列填写用户http接口中需要接收的自定义的参数名;

第二列选择对应采集数据中已存在的字段名,如果是固定值,请在第三列填写(二选一生效,此时第二列不需要选择字段);

  提示:如果接口有设置密码安全验证,可在基本信息或者第二步映射字段中选择一处填写;

III、添加HTTP请求头(非必填项,可选)

  添加HTTP请求头这一步是可选的,一般不需要可以直接跳过的;

三、返回json格式数据

  自定义HTTP接口接收到数据后,进行处理再写入到网站中,最后再返回json格式信息给服务器,表示数据是发送成功或失败:

{"rs":1,"code":0,"data":{"url":"文档的url,也不可以填"},"msg":""}

    rs: 请求结果,成功请返回1,失败返回0 (必有项); code:返回编码 (可选项); msg:一般是错误信息(可选项); data:数据对象 (可选项);

这样就完成了用http接口方式发送数据到网站,非常方便与灵活的。

经验分享 程序员 微信小程序 职场和发展