找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 751|回复: 0
打印 上一主题 下一主题

基于PHP的简单采集数据入库程序

[复制链接]

2617

主题

2617

帖子

7789

积分

论坛元老

Rank: 8Rank: 8

积分
7789
跳转到指定楼层
楼主
发表于 2018-2-14 05:55:47 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式

            说到采集,无非就是远程获取信息->提取所需内容->分类存储->读取->展示
也算是简单"小偷程序"的加强版吧
下面是对应核心代码(别拿去做坏事哦^_^)
所要采集的内容是某游戏网站上的公告,如下图:

可先利用file_get_contents和简单正则获取基本页面信息

整理下基本信息,采集入库:
$value) {//二维数组[2]对应id和[1]刚好一样,利用起key
    $url="http://www.93moli.com/".$arr[2][$key];
    $sql="insert into list(title,url) value ('$value', '$url')";
    mysql_query($sql);
    //echo "$value[/url]"."
";  
  }
   $id++;
   echo "正在采集URL数据列表$id...请稍后...";
   echo "";
}else{
   echo "采集数据结束。";
}
?>
conn.php是数据库连接文件
list.php是本页面
由于要采集的数据是分页显示的,且页面地址是规律递增,所以我用了js跳转代码,利用id传值控制采集的页数,也避免了for循环数目过大。


轻轻松松数据入库,下篇文章写关于具体url采集信息的过程。
            
            
您可能感兴趣的文章:
  • PHP 采集程序 常用函数
  • PHP 采集获取指定网址的内容
  • php file_get_contents函数轻松采集html数据
  • snoopy 强大的PHP采集类使用实例代码
  • 开启CURL扩展,让服务器支持PHP curl函数(远程采集)
  • 基于PHP的cURL快速入门教程 (小偷采集程序)
  • PHP采集利器 Snoopy 试用心得
  • PHP采集类snoopy详细介绍(snoopy使用教程)
  • PHP实现采集抓取淘宝网单个商品信息
  • 利用PHP命令行模式采集股票趋势信息
            
  • 分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    用户反馈
    客户端