抓取动态网页(不要将动态网页和页面内容是否有动感混为一谈(图))

　　抓取动态网页(不要将动态网页和页面内容是否有动感混为一谈(图))

　　所谓动态网页，是指相对于静态网页的网页编程技术。对于静态网页，随着html代码的生成，页面的内容和显示效果基本不会发生变化——除非你修改页面代码。这不是动态网页的情况。虽然页面代码没有改变，但显示的内容会随着时间、环境或数据库操作的结果而改变。

　　值得强调的是，不要将动态网页与动态页面内容混淆。这里所说的动态网页与网页上的各种*敏*感*词*、滚动字幕等视觉动态效果没有直接关系。动态网页也可以是纯文本内容或收录各种*敏*感*词*的内容。这些只是网页的细节。内容的呈现形式，无论网页是否有动态效果，只要是使用动态网站技术生成的网页都可以称为动态网页。

　　简而言之，动态网页是融合了基本的html语法规范、Java、VB、VC等高级编程语言、数据库编程等技术，以实现高效、动态、交互的内容和网站管理风格。因此，从这个意义上说，所有结合HTML以外的高级编程语言和数据库技术的网页编程技术生成的网页都是动态网页。

　　动态网页简述如下：

　　（1)动态网页一般基于数据库技术，可以大大减少网站维护的工作量；

　　（2)网站使用动态网页技术可以实现更*敏*感*词*，如用户注册、用户登录、在线调查、用户管理、订单管理等；

　　（3)Dynamic 网页实际上并不是一个独立存在于服务器上的网页文件，只有在用户请求时服务器才会返回一个完整的网页；

　　（4)动态网页中的“？”对搜索引擎检索有一定的问题，一般搜索引擎无法访问网站数据库中的所有网页，或者出于技术考虑，搜索中国确实可以不抓取网址中“？”后的内容，因此使用动态网页的网站在进行搜索引擎推广时需要做一定的技术处理以满足搜索引擎的要求。

　　四种常用的动态网络技术

　　1、PHP 代表超文本预处理器（Hypertext Preprocessor）。它是当今 Internet 上最流行的脚本语言。它的语法借鉴了 C、Java、PERL 等语言，但它只需要很少的编程知识。您可以使用 PHP 来构建真正的交互式网站。

　　它与HTML语言有很好的兼容性。用户可以直接在脚本代码中添加 HTML 标签，也可以在 HTML 标签中添加脚本代码，以更好地实现页面控制。 PHP提供标准的数据库接口，数据库连接方便，兼容性强；强大的可扩展性；可以进行面向对象编程。

　　2、ASP 是 Active Server Pages（活动服务器页面），是微软开发的超文本标记语言（HTML）、脚本（Script）和 CGI​​（通用网关接口）的组合。它没有提供自己专门的编程语言，但允许用户使用许多现有的脚本语言来编写 ASP 应用程序。 ASP 编程比 HTML 更方便、更灵活。它运行在Web服务器端，运行后将运行结果以HTML格式发送到客户端浏览器。因此，ASP 比一般的脚本语言安全得多。

　　ASP 最大的优点是可以收录 HTML 标签，也可以直接访问数据库，使用 ActiveX 控件的无限扩展，所以在编程上比 HTML 更方便、更灵活。通过使用ASP组件和对象技术，用户可以直接使用ActiveX控件，调用对象方法和属性，以简单的方式实现强大的交互功能。

　　但是ASP技术并不完善，因为它基本上仅限于微软的操作系统平台，主要的工作环境是微软的IIS应用结构，而且由于ActiveX对象具有平台特性，ASP技术不能很容易地工作一个跨平台的网络服务器。

　　aspx 是微软在服务器端运行的动态网页文件。通过IIS分析执行后，就可以得到动态页面了。它是微软推出的一种新的网络编程方法，不是asp的简单升级，因为它的编程方法和asp有很大的不同。它在服务器端编译并执行程序代码。 ASP 使用脚本语言。每次发出请求，服务器都会调用脚本解析引擎来解析和执行程序代码，可以使用 more 它是用两种语言编写的，完全编译执行，比 ASP 要快。而且，这不仅仅是速度问题，还有很多优点。

　　3、JSP 是Java Server Pages（Java Server Pages），它是由于1999年6月推出的新技术，是基于Java Servlet和整个Java（Java）系统的Web开发技术。

　　JSP和ASP在技术上有很多相似之处，但是两者来自不同的技术规范组织，所以ASP一般只用在Windows NT/2000平台上，而JSP可以运行在85%以上的服务器上，并且基于JSP技术的应用比基于ASP的应用更易于维护和管理，因此被很多人认为是未来最有前途的动态网站技术。

　　4、CGI（通用网关接口）是一种较早的用于构建动态网页的技术。当客户端向 Web 服务器上指定的 CGI 程序发送请求时，Web 服务器会启动一个新的进程来执行一些 CGI 程序，程序执行完毕后，将结果以一个网页。

　　CGI 的优点是可以用多种语言编写，例如 C、C++、VB 和 Perl。语言的选择有很大的灵活性。最常用的 CGI 开发语言是 Perl。

　　动态网页的优势

　　1、增强的性能。它是在服务器上运行的已编译的公共语言运行时代码。与之前解释的不同，可以使用早期绑定、实时编译、原生优化和开箱即用的缓存服务。这相当于在编写代码行之前显着提高了性能。

　　2、世界级的工具支持。该框架补充了 Visual Studio 集成开发环境中的大量工具箱和设计器。 WYSIWYG 编辑、拖放服务器控件和自动部署只是这个强大工具提供的部分功能。

　　3、力量和灵活性。由于它基于公共语言运行时，因此 Web 应用程序开发人员可以利用整个平台的强大功能和灵活性。 .NET 框架类库、消息处理和数据访问解决方案都可以从 Web 无缝访问。它也与语言无关，因此您可以选择最适合应用程序的语言，或者将应用程序拆分为多种语言。此外，公共语言运行时的交互性确保在迁移到基于 COM 的开发方面的现有投资得以保留。

　　动态网页的缺点

　　1、首先，动态网页在访问速度上没有优势

　　动态网页首先获取用户的指令，然后网页将指令带到数据库中，找到指令对应的数据，然后传递给服务器。通过服务器的编译，将动态页面编译成标准的HTML代码传递给用户浏览，这样用户就可以看到网页了。问题出现了。每次访问一个网页，都必须经过这样一个过程。这个过程至少需要几秒钟。随着访问量的增加，页面加载速度会变慢，这也是服务器的负担。 从用户的角度来看，网页加载缓慢，没有响应。下次谁会访问你的网站。

　　静态网页很简单。静态网页实际上是存在的，它是直接加载到客户端浏览器中显示的，无需服务器编译。

　　可见动态网页在访问速度上没有优势。

　　2、在搜索引擎收录中不占优势

　　以上是从服务器和用户体验的角度，以下是从搜索引擎收录的角度。动态网页是用户输入指令后形成的页面。这个页面不存在，搜索引擎只会抓取现成的，不会自己输入，所以网站在搜索引擎收录中没有优势。搜索引擎仍然喜欢静态页面。但是，搜索引擎也在不断改进和发展。到目前为止，大多数搜索引擎都支持动态页面的抓取。