久久久久av_欧美日韩一区二区在线_国产精品三区四区_日韩中字在线

返回列表 發(fā)帖
查看: 2867|回復(fù): 1

【免費(fèi)開源】利用云數(shù)據(jù)API接口，開發(fā)屬于自己的采集器

22

主題

83

回帖

165

積分

應(yīng)用開發(fā)者

智伍應(yīng)用

貢獻(xiàn)
1 點(diǎn)
金幣
50 個(gè)
QQ
樓主
發(fā)表于 2022-8-23 12:29:21 | 只看樓主 |倒序?yàn)g覽 |閱讀模式

復(fù)制下面的代碼，保存為一個(gè)php文件即可，可以把代碼封裝一下，變成自己的東西！
  1. <?php
  2. header("Content-type: text/html; charset=utf-8");
  3. function get_sign($dataArr) //計(jì)算簽名驗(yàn)證的函數(shù)
  4. {
  5.         if(!is_array($dataArr))
  6.         {
  7.                 return 'no';

  9.         } else {

  11.                 ksort($dataArr, SORT_STRING);
  12.                 $string1 = '';
  13.                 foreach ($dataArr as $k => $v) {
  14.                         $v=urlencode($v);
  15.                         $string1 .= "{$k}={$v}&";
  16.                 }
  17.                 return strtoupper(md5($string1));
  18.         }
  19. }
  20. function get_json_data($dataUrl) // 根據(jù)接口地址，轉(zhuǎn)換成具體列表內(nèi)容，展示結(jié)果
  21. {
  22.         $nowTime=time();
  23.         $tokenStr=file_get_contents('./appid.txt'); // 讀取保存的appid和對(duì)應(yīng)的密鑰
  24.         $tokenArr=explode('_ZW_',$tokenStr);
  25.         $appid=$tokenArr[0];
  26.         $appid_key=$tokenArr[1];
  27.         $dataJson=file_get_contents($dataUrl);       
  28.         $dataJson=trim($dataJson);
  29.         $dataNewsArr=json_decode($dataJson,true);
  30.         $result='<hr><h2>下面是結(jié)果內(nèi)容</h2><hr><p><br></p>';
  31.         $result=$result.'<table border=1 cellpadding=12 style="width:100%;">';
  32.         $result=$result.'<tr><th>一鍵采集</th><th>標(biāo)題</th><th>鏈接地址</th><th>發(fā)布時(shí)間</th></tr>';
  33.         foreach($dataNewsArr as $item)
  34.         {
  35.                 $signArr=array();
  36.                 $signArr['url']=urldecode($item['fromurl']);
  37.                 $signArr['appid']=$appid;
  38.                 $signArr['t']=$nowTime;
  39.                 $signArr['appsecret']=$appid_key; // 密鑰僅用于計(jì)算簽名，不要公開，私密
  40.                 $sign=get_sign($signArr);
  41.                 $result=$result.'<tr style="text-align:center">';
  42.                 $result=$result.'<td nowrap><a href="./sdk_demo.php?ac=content&url='.urlencode($item['fromurl']).'&appid='.$appid.'&t='.$nowTime.'&sign='.$sign.'"> 點(diǎn)擊采集 </a></td>';
  43.                 $result=$result.'<td>'.$item['title'].'</td>';
  44.                 $result=$result.'<td><a href="'.$item['fromurl'].'" target="_blank">'.$item['fromurl'].'</a></td>';
  45.                 $result=$result.'<td nowrap>'.date('Y-m-d H:i:s',$item['sendtime']).'</td>';
  46.                 $result=$result.'</tr>';
  47.         }
  48.         $result=$result.'</table>';
  49.         return $result;
  50. }
  51. if(!empty($_GET['ac']) && $_GET['ac']=='register')
  52. {
  53.         if(!file_exists('./appid.txt'))
  54.         {               
  55.                 $appid=php_uname('s').php_uname('n').php_uname('m'); // 根據(jù)服務(wù)器的特征，生成唯一appid，請(qǐng)求獲得密鑰之后，保存到本地
  56.                 $appid=$appid.__DIR__;
  57.                 $appid=md5($appid);
  58.                 $appid_key=file_get_contents("http://api.zhiwu55.net/v1/catch_data/register/?appid=".$appid);
  59.                 $dataStr=$appid.'_ZW_'.$appid_key;
  60.                 file_put_contents('./appid.txt',$dataStr); //生產(chǎn)環(huán)境中，上線了，千萬(wàn)不要這樣保存appid和密鑰，相當(dāng)于公開暴露出去了
  61.         }
  62.         $result='<hr><h2>下面是結(jié)果內(nèi)容</h2><hr><p><br></p>注冊(cè)appid成功！已經(jīng)保存到appid.txt文件中';       
  63. }
  64. if(!empty($_GET['ac']) && $_GET['ac']=='content')
  65. {
  66.         $fromurl=urlencode($_GET['url']);
  67.         $dataUrl="http://api.zhiwu55.net/v1/catch_data/content/?url={$fromurl}&appid={$_GET['appid']}&t={$_GET['t']}&sign={$_GET['sign']}";
  68.         $content=file_get_contents($dataUrl);
  69.         if($content=='Requests are too frequent')
  70.         {
  71.                 $result='<h1>采集過于頻繁！</h1>';
  72.                
  73.         } elseif(strlen($content)<50) {
  74.                
  75.                 $result='<h1>'.$content.'</h1>';
  76.                
  77.         } elseif(stripos($content,'__zhiwu55.com__')!==false) {
  78.                
  79.                
  80.                 $firstPost=substr($content,0,strpos($content,'__zhiwu55.com__'));       
  81.                 $comment=substr($content,strpos($content,'__zhiwu55.com__')+15);       
  82.                 $comment=str_replace('__zhiwu55.cn__','</li><li>',$comment);       
  83.                 $result='<hr><h2>下面是結(jié)果內(nèi)容</h2><hr><p><br></p>'.$firstPost.'<br><br><strong>評(píng)論如下：</strong><br><br><li>'.$comment.'</li>';
  84.        
  85.         } else {
  86.                
  87.                 $result='<hr><h2>下面是結(jié)果內(nèi)容</h2><hr><p><br></p>'.$content;
  88.                
  89.         }
  90. }
  91. if(!empty($_GET['ac']) && $_GET['ac']=='search_keyword' && !empty($_GET['keyword']))
  92. {
  93.         $tokenStr=file_get_contents('./appid.txt'); // 讀取保存的appid和對(duì)應(yīng)的密鑰
  94.         $tokenArr=explode('_ZW_',$tokenStr);
  95.         $appid=$tokenArr[0];       
  96.         $dataUrl="http://api.zhiwu55.net/v1/catch_data/search/?appid={$appid}&keyword=".urlencode($_GET['keyword']);
  97.         $result=get_json_data($dataUrl);
  98. }       
  99. if(!empty($_GET['ac']) && $_GET['ac']=='hotnews')
  100. {
  101.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/hotnews_json.html');
  102. }
  103. if(!empty($_GET['ac']) && $_GET['ac']=='top_news')
  104. {
  105.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/updatenews_json.html');       
  106. }
  107. if(!empty($_GET['ac']) && $_GET['ac']=='toutiao')
  108. {
  109.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/toutiao.com_json.html');       
  110. }
  111. if(!empty($_GET['ac']) && $_GET['ac']=='thepaper')
  112. {
  113.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/thepaper.cn_json.html');       
  114. }
  115. if(!empty($_GET['ac']) && $_GET['ac']=='sohu')
  116. {
  117.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/sohu.com_json.html');       
  118. }
  119. if(!empty($_GET['ac']) && $_GET['ac']=='sina')
  120. {
  121.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/sina.com.cn_json.html');       
  122. }
  123. if(!empty($_GET['ac']) && $_GET['ac']=='qq')
  124. {
  125.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/qq.com_json.html');       
  126. }
  127. if(!empty($_GET['ac']) && $_GET['ac']=='myzaker')
  128. {
  129.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/myzaker.com_json.html');       
  130. }
  131. if(!empty($_GET['ac']) && $_GET['ac']=='guokr')
  132. {
  133.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/guokr.com_json.html');       
  134. }
  135. if(!empty($_GET['ac']) && $_GET['ac']=='163')
  136. {
  137.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/163.com_json.html');       
  138. }
  139. if(!empty($_GET['ac']) && $_GET['ac']=='keyword01')
  140. {
  141.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/E4BD93E882B2_json.html');       
  142. }
  143. if(!empty($_GET['ac']) && $_GET['ac']=='keyword02')
  144. {
  145.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/E8B4A2E7BB8F_json.html');       
  146. }
  147. if(!empty($_GET['ac']) && $_GET['ac']=='keyword03')
  148. {
  149.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/E6989FE5BAA7_json.html');       
  150. }
  151. if(!empty($_GET['ac']) && $_GET['ac']=='keyword04')
  152. {
  153.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/E59BBDE99985_json.html');       
  154. }
  155. if(!empty($_GET['ac']) && $_GET['ac']=='keyword05')
  156. {
  157.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/E5869BE4BA8B_json.html');       
  158. }
  159. if(!empty($_GET['ac']) && $_GET['ac']=='keyword06')
  160. {
  161.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/E5BDA9E7A5A8_json.html');       
  162. }
  163. if(!empty($_GET['ac']) && $_GET['ac']=='keyword07')
  164. {
  165.         $result=get_json_data('http://api.zhiwu55.net/v1/catch_data/batch_run/E7949FE6B4BB_json.html');       
  166. }
  167. ?>
  168. <!DOCTYPE html>
  169. <html>
  170. <head>
  171. <meta http-equiv="Content-Type" content="text/html; charset=utf-8">
  172. <meta name="viewport" content="width=device-width,initial-scale=1.0,maximum-scale=1.0,user-scalable=0,viewport-fit=cover">
  173. </head>
  174. <body style="padding:16px;">
  175. <div style="margin-bottom:64px;line-height:32px;">
  176.         <a href="./sdk_demo.php?ac=register">【必須】注冊(cè)appid</a>   
  177.         <a href="./sdk_demo.php?ac=hotnews">獲取熱搜榜單的內(nèi)容</a>   
  178.         <a href="./sdk_demo.php?ac=top_news">獲取最新內(nèi)容</a>   
  179.         <a href="./sdk_demo.php?ac=toutiao">今日頭條</a>   
  180.         <a href="./sdk_demo.php?ac=thepaper">澎拜新聞</a>   
  181.         <a href="./sdk_demo.php?ac=sohu">搜狐</a>   
  182.         <a href="./sdk_demo.php?ac=sina">新浪</a>   
  183.         <a href="./sdk_demo.php?ac=qq">騰訊網(wǎng)</a>   
  184.         <a href="./sdk_demo.php?ac=myzaker">ZAKER扎克</a>   
  185.         <a href="./sdk_demo.php?ac=guokr">果殼</a>   
  186.         <a href="./sdk_demo.php?ac=163">網(wǎng)易</a><br><br>
  187.         <a href="./sdk_demo.php?ac=keyword01">體育</a>   
  188.         <a href="./sdk_demo.php?ac=keyword02">財(cái)經(jīng)</a>   
  189.         <a href="./sdk_demo.php?ac=keyword03">星座</a>   
  190.         <a href="./sdk_demo.php?ac=keyword04">國(guó)際</a>   
  191.         <a href="./sdk_demo.php?ac=keyword05">軍事</a>   
  192.         <a href="./sdk_demo.php?ac=keyword06">彩票</a>   
  193.         <a href="./sdk_demo.php?ac=keyword07">生活</a><br><br>
  194.         <form action="./sdk_demo.php" method="GET">
  195.                 <input type="hidden" name="ac" value="search_keyword">
  196.                 請(qǐng)輸入簡(jiǎn)短精準(zhǔn)關(guān)鍵詞：
  197.                 <input type="text" name="keyword" value="房地產(chǎn)" style="padding:4px;height:30px;line-height:30px;width:300px;">
  198.                   
  199.                 <input type="submit" value="確定采集" style="height:38px;">
  200.         </form>
  201. </div>

  203. <?php
  204. echo $result;
  205. /*********

  207. 接口所有的請(qǐng)求方式都是GET請(qǐng)求，即直接訪問接口地址即可，簡(jiǎn)單、方便、快捷使用智伍云數(shù)據(jù)的API接口

  209. 注意事項(xiàng)：

  211. 1、請(qǐng)自行用接口，注冊(cè)一個(gè)自己的appid和密鑰，不要用公開泄露出去，因?yàn)橥粋€(gè)appid請(qǐng)求過于頻繁，會(huì)禁止訪問一段時(shí)間

  213. 2、所有的數(shù)據(jù)都有過期時(shí)間，獲取到數(shù)據(jù)之后，請(qǐng)保存到自己的服務(wù)器，圖片做好本地化存儲(chǔ)

  215. 3、如果appid對(duì)應(yīng)的密鑰忘記了，或者密鑰泄露出去，需要重置密鑰，暫時(shí)只能聯(lián)系智伍應(yīng)用在線客服處理

  217. -----------------------------------------------------------------------------

  219. 接口地址：http://api.zhiwu55.net/v1/catch_data/register/

  221. 接口說明：注冊(cè)一個(gè)訪問智伍云數(shù)據(jù)的appid和密鑰，獲得拉取數(shù)據(jù)的權(quán)限，僅一個(gè)appid請(qǐng)求參數(shù)，其中appid為自定義32位的數(shù)字和字母的組合，注冊(cè)成功之后，會(huì)返回32位的密鑰，請(qǐng)把這個(gè)返回的密鑰保存起來，為了安全10分鐘過后，此接口不再顯示注冊(cè)appid的密鑰

  223. 調(diào)用示例：http://api.zhiwu55.net/v1/catch_data/register/?appid=ZW3456789812X45678901234567890a1  返回密鑰：OuHZ552V20hi5ie3HCKTtyez3HR5ukhc  再次提醒，請(qǐng)把返回的密鑰保存起來，以備需要的時(shí)候使用。

  225. -----------------------------------------------------------------------------

  227. 接口地址：http://api.zhiwu55.net/v1/catch_data/search/

  229. 接口說明：根據(jù)特定的關(guān)鍵語(yǔ)，返回指定的內(nèi)容，有二個(gè)參數(shù)，分別是appid和keyword，返回json數(shù)據(jù)格式，如果看上了近期的某一篇文章內(nèi)容，可以直接把標(biāo)題當(dāng)作關(guān)鍵詞來訪問該接口

  231. 調(diào)用示例：http://api.zhiwu55.net/v1/catch_data/search/?appid=ZW3456789812X45678901234567890a1&keyword=%E6%90%9E%E7%AC%91

  233. -----------------------------------------------------------------------------


  236. 接口地址：http://api.zhiwu55.net/v1/catch_data/content/

  238. 接口說明：這里一個(gè)最重要的接口，調(diào)用稍微麻煩一點(diǎn)，根據(jù)鏈接地址，拉取對(duì)應(yīng)的數(shù)據(jù)和圖片，需要用注冊(cè)appid的32位密鑰簽名驗(yàn)證，一共有4個(gè)參數(shù)，分別如下

  240. 第1個(gè)參數(shù)：url，鏈接地址，請(qǐng)用接口返回的fromurl數(shù)值
  241. 第2個(gè)參數(shù)：appid，即自己注冊(cè)的appid
  242. 第3個(gè)參數(shù)：t，當(dāng)前的時(shí)間戳，請(qǐng)確保自己服務(wù)器的時(shí)間是中國(guó)的標(biāo)準(zhǔn)時(shí)間
  243. 第4個(gè)參數(shù)：sign，根據(jù)參數(shù)計(jì)算出來的簽名

  245. 下面是調(diào)用示例代碼：

  247. function get_sign($dataArr) //計(jì)算簽名驗(yàn)證的函數(shù)
  248. {
  249.         if(!is_array($dataArr))
  250.         {
  251.                 return 'no';

  253.         } else {

  255.                 ksort($dataArr, SORT_STRING);
  256.                 $string1 = '';
  257.                 foreach ($dataArr as $k => $v) {
  258.                         $v=urlencode($v);
  259.                         $string1 .= "{$k}={$v}&";
  260.                 }
  261.                 return strtoupper(md5($string1));
  262.         }
  263. }
  264. $mySignArr=array();
  265. $mySignArr['url']=urldecode($fromurl); //通過接口返回的fromurl鏈接地址
  266. $mySignArr['appid']='ZW3456789812X45678901234567890a1'; // 注冊(cè)的appid
  267. $mySignArr['t']=time(); //當(dāng)前時(shí)間戳
  268. $mySignArr['appsecret']='OuHZ552V20hi5ie3HCKTtyez3HR5ukhc'; // 密鑰
  269. $mySignStr=get_sign($signArr); // 根據(jù)參數(shù)計(jì)算出來的簽名
  270. $dataUrl="http://api.zhiwu55.net/v1/catch_data/content/?url={$fromurl}&appid=ZW3456789812X45678901234567890a1&t={$mySignArr['t']}&sign={$mySignStr}";
  271. echo file_get_contents($dataUrl);

  273. -----------------------------------------------------------------------------

  275. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/updatenews_json.html

  277. 接口說明：獲取全網(wǎng)最新的內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  279. -----------------------------------------------------------------------------

  281. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/hotnews_json.html

  283. 接口說明：今日熱搜榜單火爆全網(wǎng)的內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  285. -----------------------------------------------------------------------------

  287. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/toutiao.com_json.html

  289. 接口說明：今日頭條最新內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  291. -----------------------------------------------------------------------------

  293. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/thepaper.cn_json.html

  295. 接口說明：澎拜新聞最新內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  297. -----------------------------------------------------------------------------

  299. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/sohu.com_json.html

  301. 接口說明：搜狐最新內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  303. -----------------------------------------------------------------------------

  305. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/sina.com.cn_json.html

  307. 接口說明：新浪最新內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  309. -----------------------------------------------------------------------------

  311. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/qq.com_json.html

  313. 接口說明：騰訊網(wǎng)最新內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  315. -----------------------------------------------------------------------------

  317. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/myzaker.com_json.html

  319. 接口說明：扎客新聞網(wǎng)最新內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  321. -----------------------------------------------------------------------------

  323. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/guokr.com_json.html

  325. 接口說明：果殼網(wǎng)最新內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  327. -----------------------------------------------------------------------------

  329. 接口地址：http://api.zhiwu55.net/v1/catch_data/batch_run/163.com_json.html

  331. 接口說明：網(wǎng)易最新內(nèi)容，直接訪問即可，返回json數(shù)據(jù)格式，隔一段時(shí)間自動(dòng)更新內(nèi)容

  333. ********/
  334. ?>
  335. </body>
  336. </html>
復(fù)制代碼


回復(fù)

使用道具 舉報(bào)

22

主題

83

回帖

165

積分

應(yīng)用開發(fā)者

智伍應(yīng)用

貢獻(xiàn)
1 點(diǎn)
金幣
50 個(gè)
QQ
沙發(fā)
 樓主| 發(fā)表于 2022-8-25 14:58:48 | 只看Ta
下面的這二個(gè)插件，都是用上面的API接口二次開發(fā)的，大家可以參考看一下。

【Discuz插件】眾大云采集_v9.7.3.zip

320.82 KB, 下載次數(shù): 106

眾大云采集

【Discuz插件】智伍云采集_zhiwu55_v2.0.2.zip

105.58 KB, 下載次數(shù): 108

智伍云采集
回復(fù) 贊

使用道具 舉報(bào)

本版積分規(guī)則

  • 關(guān)注公眾號(hào)
  • 有償服務(wù)微信
  • 有償服務(wù)QQ

手機(jī)版|小黑屋|Discuz! 官方交流社區(qū) ( 皖I(lǐng)CP備16010102號(hào) |皖公網(wǎng)安備34010302002376號(hào) )|網(wǎng)站地圖|star

GMT+8, 2025-7-2 18:44 , Processed in 0.054106 second(s), 11 queries , Redis On.

Powered by Discuz! W1.0 Licensed

Cpoyright © 2001-2025 Discuz! Team.

關(guān)燈 在本版發(fā)帖
有償服務(wù)QQ
有償服務(wù)微信
 返回頂部
快速回復(fù) 返回頂部 返回列表