【数据分析】网页数据提取

huojunan

liujiaqi 发表于 2016-3-16 23:24
前辈不客气

无意中看了前辈以前的帖子，发现前辈也是化学狗hhhhh

从化学狗转职成社畜半年多了

huojunan

liujiaqi 发表于 2016-3-16 23:24
前辈不客气

无意中看了前辈以前的帖子，发现前辈也是化学狗hhhhh

这几天想用可以报错了，能给看看么？

aimowei

这个网站数据不是说 来自于 http://www.pm25.in/  吗？

而这个PM25.in 有对应的API接口。 http://www.pm25.in/api_doc

直接使用API 获取数据 应该就不会 用两天就报错了。

huojunan

aimowei 发表于 2016-3-23 12:35
这个网站数据不是说 来自于 http://www.pm25.in/  吗？

而这个PM25.in 有对应的API接口。 http://www.pm ...

这个是能查历史数据？

aimowei

他的说明是: 我们目前不提供历史数据，只提供最近一小时的数据，API没有办法获取从XX时间到XX时间的数据；

aimowei

huojunan 发表于 2016-3-23 18:05
这个是能查历史数据？

https://www.gracecode.com/aqi.html

这个网站上有历史数据。  对你有没有用我就不知道了。

huojunan

aimowei 发表于 2016-3-23 21:13
https://www.gracecode.com/aqi.html

这个网站上有历史数据。  对你有没有用我就不知道了。

太历史了，通常情况需要的历史数据都是近期的，比如，北方城市在3月15日前后一个月的数据之类的

liujiaqi

huojunan 发表于 2016-3-23 12:28
这几天想用可以报错了，能给看看么？

1. output = "";
   
2. cityparam = encrypt_parameter("北京");//城市
   
3. typeparam = encrypt_parameter(encrypt_parameter("HOUR"));//HOUR DAY MONTH
   
4. startTimeparam = encrypt_parameter("2016-03-23 08:00");//开始时间
   
5. endTimeparam = encrypt_parameter("2016-03-24 11:27");//结束时间
   
6. $.ajax({
   
7.     url: '../api/getdata_citydetail.php',
   
8.     data:{'city':cityparam,
   
9.              'type':typeparam,
   
10.              'startTime':startTimeparam,
    
11.              'endTime':endTimeparam
    
12.     },
    
13.     type: "post",
    
14.     success: function (data) {
    
15.     data = eval('(' + decrypt_result(data,cityparam) + ')');
    
16.         if(data.total>0){
    
17.             for(i=0;i<data.rows.length;i++){
    
18.                 output+=data.rows[i].time+" "+data.rows[i].pm2_5+"\r\n";
    
19.             }
    
20.             console.log(output);
    
21.         }
    
22.     }
    
23. });

复制代码

对方修改了类型的加密方式

huojunan

liujiaqi 发表于 2016-3-24 11:41
对方修改了类型的加密方式

那边的管理员不乐意有人抽取数据？

liujiaqi

huojunan 发表于 2016-3-24 13:16
那边的管理员不乐意有人抽取数据？

不像是，可能有什么需求吧

上面的代码是修改过的