ZHT5178 大佬有话说 : 2020-1-16 11:03:40
请教一个导出的CSV数据每日自动化更新的问题
本帖最后由 ZHT5178 于 2020-1-16 11:32 编辑
现在一个站点没有MYSQL权限,但是有后台账户有权限可以导出CSV格式的数据文件,请问我如何实现:后台账户自动某个时刻登录web端并导出CSV文件,导出的CSV文件自动入库我本地电脑数据库或者EXCEL文件里面(入库的时候可以对比,跳过旧数据,写入新数据,也可以覆盖)
xong 大佬有话说 : 2020-1-16 11:13:20
看数据库结构吧,每日导出修改的、新增的,对比自己原有的,再新增到自己的本地库中,excel当介质
夕日 大佬有话说 : 2020-1-16 11:21:54
mysql可以连接吗,还是说通过那种服务商的后台导出
要可以连接的话随便拿python撸个脚本就行了,pandas导出csv之类的很简单
ZHT5178 大佬有话说 : 2020-1-16 11:26:33
夕日 大佬有话说 : 2020-1-16 11:21
mysql可以连接吗,还是说通过那种服务商的后台导出
要可以连接的话随便拿python撸个脚本就行了,pandas导出 …
只能服务商的后台导出
ZHT5178 大佬有话说 : 2020-1-16 11:27:34
xong 大佬有话说 : 2020-1-16 11:13
看数据库结构吧,每日导出修改的、新增的,对比自己原有的,再新增到自己的本地库中,excel当介质 …
您说的这个如何实现呢?
xong 大佬有话说 : 2020-1-16 11:41:28
ZHT5178 大佬有话说 : 2020-1-16 11:27
您说的这个如何实现呢?
写个接口每天自动下载数据文件,这个可以通过模拟登录等直接调用你在web操作中用的接口,拿到数据后解析文件,写入你的数据库,然后就是定时每天或者每小时下载数据文件,通过数据文件与数据库的对比,做新增修改删除等操作,就把数据文件csv当中间件来用就好了
A23187 大佬有话说 : 2020-1-16 11:47:24
python 有 excel 相关的库,不过你这 csv 直接处理也就行了。crontab + python 吧