网站首页  汉语字词  英语词汇  考试资料  写作素材  旧版资料

请输入您要查询的考试资料:

 

标题 php生成百度sitemap站点地图类函数实例
内容
    问题概述:
    公司网站是问答百科的网站、seo工程师提出需求说根据网站的问题来生成xml文件。每个xml文件包含5000条setmap格式数据。现在线上网站大约有70w条问题,所以说基本生成140个xml文件。还有一个索引文件。比如文件的名称以数字开头的。索引文件包含的内容就是每个xml文件的路径还有名称。
    为什么要每个文件存储5000条数据呢,因为这是mysql的一个界限值、如果每次取多了以后可能会对线上用户访问造成影响,或者速度变慢。每个文件存储5000条数据,但是mysql selsect的时候不能每次取5000条、现在写的是每次取1000条。那这样逻辑就有点复杂。
    实现方法:
    首先取出1000条数据(可以灵活些成活的,方便以后修改),然后循环生成xml格式文件。file_puts_contens写入文件。然后再把生成的xml文件名称、取出问题的最小id、取出问题的最大id、取出问题的条数写出一个索引查询的txt文件当中,格式大概是这个样子的。
    0,3146886,3145887,1000
    发现最后面的条数是1000了吗、第一次select取出1000条数据、然后写入0.xml文件当中。把取出的xml文件名称、最小id、最大id、条数写入到索引查询txt中。第一次写入了1000条数据到0.xml、生成条数为1000。第二次查询的时候select语句会成为。 where id > 取出的最大id(当前mysql为正序查询、如果为倒序、改成小于) limit 1000 这样的话又取出1000、然后修改索引查询txt的最小id、最大id、生成条数加到2000。以此类推等生成条数到了5000的时候再另起一行写入索引文件、类似这样
    0,3146886,3145887,5000
    1,3148886,3147887,1000
    这样写的话就减轻了服务器的压力。
    下面贴出实现代码(风格有点乱):
    具体功能代码如下:
    代码如下:
    <?php
    /*
    * sitemap接口类
    */
    class sitemapaction extends action{
    private static $baseurl = ''; //url地址
    private static $askmobileurl = 'http://m.xxx.cn/ask/'; //问答移动版地址
    private static $askpcurl =; //问答pc地址
    private static $askzonepcurl = ; //问答精选pc链接
    private static $askzonemobileurl = ; //问答精选移动版链接
    //问答setmaps
    public function asksetmap(){
    header('content-type:text/html;charset=utf-8');
    //获取问题列表
    $maxid = 0; //索引文件最大id
    $minid = 0; //索引文件最小id
    $psize = 1000; //数据库每次取数量
    $maxxml = 5000; //xml写入记录数量
    $where = array();
    //读取索引文件
    $index = app_path.'setmapxml/index.txt';
    //关联setmaps路径
    $askxml = ../siteditu/ask/ask.xml;
    if(!file_exists($index)){
    $fp=fopen($index, w+);
    if ( !is_writable($index) ){
    die(文件: .$index. 不可写,请检查!);
    }
    fclose($fp);
    }else{
    //index.txt文件说明 0:xml文件名称(从1开始)、1:文件最大id、2:文件最小id、3:文件当前记录数
    $fp = file($index);
    $string = $fp[count($fp)-1];//显示最后一行
    $arr = explode(',', $string);
    }
    //索引文件数量是否小于$maxxml
    //如果为第一次运行
    if(!$arr[1]){
    $bs=1;
    $filename=0;
    }else{
    if($arr && $arr[3]<$maxxml){
    $filename = $arr[0];
    $psize = $maxxml-$arr[3]>$psize?$psize:($maxxml-$arr[3]);
    $bs = 0;
    }else{
    $filename = $arr[0]+1;
    $bs=1;
    }
    }
    $maxid = empty($arr[1])?0:$arr[1];
    $minid = empty($arr[2])?0:$arr[2];
    echo 文件名称:.$filename..xml.<br/ >;
    echo 最大id:.$maxid.<br />;
    echo 最小id:.$minid.<br />;
    echo xml写入最大记录:.$maxxml.<br />;
    echo 数据库每次读取数量:.$psize.<br />;
    $list = self::$questionobj->getquestionsetmap($where,$maxid,$psize);
    if(count($list)<=0){
    echo 1;exit;
    }
    $record = $arr[3]+count($list); //索引文件写入记录数
    $indexarr = array('filename'=>$filename,'maxid'=>$maxid,'minid'=>$minid,'maxxml'=>$record);
    $start = '<?xml version=1.0 encoding=utf-8 ?> '.chr(10);
    $start.=<urlset xmlns= xmlns:mobile=);
    $start.=</urlset>;
    foreach($list as $k=>$qinfo){
    if($k==0)
    $indexarr['minid']=$qinfo['id'];
    $qinfo['lastmod'] = substr($qinfo['lasttime'],0,10);
    $qinfo['mobielurl'] = self::$askmobileurl.$qinfo['id'].'.html'; //移动版链接
    $qinfo['pcurl'] = self::$askpcurl.$qinfo['id'].'-p1.html'; //pc版链接
    $xml.=$this->askmapmobileurl($qinfo); //移动版
    $xml.=$this->askmappcurl($qinfo); //pc版
    }
    $maxid = end($list);
    $indexarr['maxid'] = $maxid['id'];
    //更新索引文件
    if($bs==0){
    //更新最后一行
    $txt = file($index);
    $txt[count($txt)-1] = $indexarr[filename].','.$indexarr[maxid].','.$indexarr['minid'].','.$indexarr['maxxml'].rn;
    $str = join($txt);
    if (is_writable($index)) {
    if (!$handle = fopen($index, 'w')) {
    echo 不能打开文件 $index;exit;
    exit;
    }
    if (fwrite($handle, $str) === false) {
    echo 不能写入到文件 $index;exit;
    exit;
    }
    echo 成功地写入文件$index;
    fclose($handle);
    } else {
    echo 文件 $index 不可写;exit;
    }
    fclose($index);
    }elseif($bs==1){
    //新加入一行
    $fp = fopen($index,'a');
    $num = count($list);
    $string = $indexarr[filename].','.$indexarr[maxid].','.$indexarr['minid'].','.$num.rn;
    if(fwrite($fp,$string)===false){
    echo 追加新行失败。。。;exit;
    }else{
    echo 追加成功<br />;
    //更新sitemap索引文件
    $xmldata=<?xml version=1.0 encoding=utf-8 ?>.chr(10);
    $xmldata.=<sitemapindex>.chr(10);
    $xmldata.=</sitemapindex>;
    if(!file_exists($askxml))
    file_put_contents($askxml,$xmldata);
    $filelist = file($askxml);
    $filecount = count($filelist);
    $setmapxml = 正常问题链接
    $txt = $this->setmapindex($setmapxml);
    $filelist[$filecount-1]=$txt.</sitemapindex>;
    $newcontent = '';
    foreach($filelist as $v){
    $newcontent.= $v;
    }
    if(!file_put_contents($askxml,$newcontent)) exit('无法写入数据');
    echo '已经写入文档' . $askxml;
    }
    fclose($fp);
    }
    $filename = app_path.'setmapxml/'.$filename.'.xml';
    //更新到xml文件中,增加结尾
    if(!file_exists($filename))
    file_put_contents($filename,$start);
    $xmllist = file($filename);
    $xmlcount = count($filelist);
    $xmllist[$xmlcount-1]=$xml.</urlset>;
    $newxml = '';
    foreach($xmllist as $v){
    $newxml.= $v;
    }
    if(!file_put_contents($filename, $newxml))exit(写入数据错误);
    else
    echo 写入数据成功<br />;
    }
    //问答移动版xml
    private function askmapmobileurl($data){
    $xml = '';
    if(is_array($data)&&!empty($data)){
    $xml .=<url>.chr(10);
    if($data['id'])
    $xml.='<loc>'.$data['mobielurl'].'</loc>'.chr(10);//移动版链接
    $xml.=<mobile:mobile type=mobile/>.chr(10);
    if($data['lastmod'])
    $xml.='<lastmod>'.$data['lastmod'].'</lastmod>'.chr(10);
    $xml.='<changefreq>daily</changefreq>'.chr(10);
    $xml.='<priority>0.8</priority>'.chr(10);
    $xml.=</url>.chr(10);
    return $xml;
    }
    }
    //问答pc版xml
    private function askmappcurl($data){
    $xml = '';
    if(is_array($data)&&!empty($data)){
    $xml.='<url>'.chr(10);
    if($data['id'])
    $xml.='<loc>'.$data['pcurl'].'</loc>'.chr(10);//pc版链接
    if($data['lastmod'])
    $xml.='<lastmod>'.$data['lastmod'].'</lastmod>'.chr(10);
    $xml.='<changefreq>daily</changefreq>'.chr(10);
    $xml.='<priority>0.8</priority>'.chr(10);
    $xml.='</url>'.chr(10);
    return $xml;
    }
    }
    //setmaps索引文件
    private function setmapindex($filename){
    $xml = '';
    $xml.=<sitemap>.chr(10);
    $xml.=<loc>{$filename}</loc>.chr(10);
    $xml.=<lastmod>.date(y-m-d,time()).</lastmod>.chr(10);
    $xml.=</sitemap>.chr(10);
    return $xml;
    }
    }
    ?>
    xml索引文件格式如下:
    代码如下:
    <?xml version=1.0 encoding=utf-8 ?>
    <sitemapindex>
    <sitemap>
    <loc>http://www.xxx.cn/ask/setmapxml/0.xml</loc>
    <lastmod>2014-05-12</lastmod>
    </sitemap>
    <sitemap>
    <loc>http://www.xxx.cn/ask/setmapxml/1.xml</loc>
    <lastmod>2014-05-12</lastmod>
    </sitemap>
    </sitemapindex>
    xml文件格式(每个文件需要存储5000条、现展示1条例子)
    代码如下:
    <?xml version=1.0 encoding=utf-8 ?>
    <urlset xmlns= xmlns:mobile=>
    <url>
    <loc>http://m.xxx.cn/ask/7460.html</loc>
    <mobile:mobile type=mobile/>
    <lastmod>2013-01-11</lastmod>
    <changefreq>daily</changefreq>
    <priority>0.8</priority>
    </url>
    <url>
    </urlset>
    至于sql代码主要就是一个select语句,这里就不贴出来了。
随便看

 

在线学习网考试资料包含高考、自考、专升本考试、人事考试、公务员考试、大学生村官考试、特岗教师招聘考试、事业单位招聘考试、企业人才招聘、银行招聘、教师招聘、农村信用社招聘、各类资格证书考试等各类考试资料。

 

Copyright © 2002-2024 cuapp.net All Rights Reserved
更新时间:2025/5/14 10:57:45