蜘蛛抓取不了内容，sitemap也只有首页一个链接，怎么回事？

问：蜘蛛抓取不了内容，sitemap也只有首页一个链接，怎么回事？

这个网站是代理给乙方做的，现在刚刚拿回来，我模拟蜘蛛抓取都抓取不了内容只有首页，sitemap也只有一个首页的链接，这种情况是程序的问题，还有网站架构的问题呢？怎么解决？www.xxx.cn

解答：小编建议需要如下3点；

1.如果是他们手动添加的  
如果是这样的话，以后网站拓展新页面，你都要在服务器上把这个xml文件替换成新的。  
2.程序生成的  
这样是最好的解决方案，自己添加新的网页栏目，相同的xml文件也会增加一条新记录。记得xml里面的链接按照时间倒叙，保证每次抓取的是最新的。  

3、多个工具看如果都是这样是框架结构和网站代码问题；
解决方案：先咨询对方看是手动加的还是程序加的。程序加的话，那就是程序生成xml规则有问题。手动加的话，让他们改成动态的。或者你每次添加新页面自己要重新替换。  
其他建议：作为程序员角度  
文章内容都是通过ajax调用后台渲染的对seo不友好。祝您好运