选择我们，所有数据都是你的！
选择我们，所有数据都是你的！
因特网中有海量的有用数据，但大多数信息都是以无结构的文本形式存在，使得信息聚合和重用非常困难。 Web数据抓取（采集）是一种将非结构化内容转换为结构化数据（例如，Excel文档、MySQL数据库）的技术。
简单地说，Web数据抓取（Web scraping， 也叫Web数据采集）指的是批量、快速从网站上提取信息的一种计算机软件技术。Web数据抓取程序模拟浏览器的行为，能将可以在浏览器上显示的任何数据提 取出来，因此也称为屏幕抓取（Screen scraping）。Web数据抓取的最终目的是将非结构化的信息从大量的网页中抽取出来以结构化的方式存储（CSV、JSON、XML、ACCESS、 SQLITE、MSSQL、MYSQL等等）。
一个Web数据抓取（采集）项目大致可以分为如下三步：
1）爬取目标网站并下载相关页面。
2）从下载的页面中提取感兴趣的数据元素（我们称之为字段，例如 名称、地址等）。
3）将提取的数据（字段）以结构化的形式存储（例如，CSV，MySQL等等）。
任何业务运营成功的基础是拥有大量的目标用户和专业数据，谁能把握用户，谁就能占得先机。Web数据抓取服务可以帮您迅速获得大量的目标用户和专业数据，使您在降低运营成本的同时，迅速抢占先机，占领制高点。 许多的客户都直接从我们的服务或者定制软件中获益。
许多的客户都直接从我们的服务中获益。
您能把我们的服务用于以下方面：
• 产生您的潜在客户列表
• 从您的竞争对手中收集您感兴趣的信息
• 抓取新兴业务数据
• 建立您自己的产品目录
• 整合行业信息，辅助经营决策
• 建立垂直搜索引擎
• Web系统自动化
• 舆情监控等等
简单：您不需要使用任何的软件，只需要告诉我们您的目标网站和你感兴趣的内容。
弹性：您能从任何的网站上获取任何数据，特别是动态网站上的数据。
快捷：对于一个需要20个人工作日完成的工作，我们能在数小时内完成。
定制：针对不同的目标网站定制采集程序，灵活应对不同的异构网站。
精确：抽取结果的每一列都是您所需要的，不多也不少。
低价：您可以节省无法以金钱来计量的时间和精力，以及数倍于所付费用的人工和设备投入！
从公共网站上采集数据是很常见的（实际上，“百度”、“谷歌”的数据也来源于采集）和合法的。我们进行采集的前提是假设客户将会合法、合理地使用数据，并且客户已获取目标数据源的访问授权。同时我们保留权利拒绝任何人将数据用于非法目的或我们认为不合理的用途。
任何你能在浏览器中看到的数据都可以被抓取，只是难度会有所不同。以下几点因素会使得采集工作变得困难，从而费用也将更高。
■ 限制单个IP的访问数量。
■ 不一致的页面结构。
■ 数据被加密了，需要解析。
■ 数据被JavaScript动态加载。
■ 数据在Flash中展现。
■ 海量的数据。
采集工具具有局限性：
■ 很多场景都不能适用。比如，登录采集、Ajax动态加载数据、联合采集、需要上下文逻辑、数据加密等等。
■ 操作上具很大的难度。要求客户能够自己分析网站和页面结构，客户通常需要自己编写复杂的提取规则。
■ 不能对采集结果的二次处理。
我们提供的是定制采集服务，即根据目标网站的实际情况以及客户的需求，编写采集脚本，能够处理各种复杂的情况（数据加密、连接限制）和上下文逻辑，从而能够得到最完美的采集结果。
不。任何反动、色情、博彩性质的网站我们都拒绝采集。
费用主要取决于目标网站的复杂程度，点击这里查看我们的基本收费标准。如果一个网站规模较小、结构良好、数据在HTML中清晰可见，我们的收费应该在1000元以内。
我们也出售一些采集好的数据库（比如大众点评网，口碑网的数据），价格会比定制采集的费用少很多。
时间主要取决于目标网站的规模，一个简单的网站可能在一天内即可采集完成，但是一个大的网站可能会耗费数周的时间。在项目开始之前我们会给你一个估计时间。
你只需要在这里提交你的项目，我们会在一个工作日内跟你取得联系。你也可以直接联系我们的在线客服。
在项目的开始，我们会收取项目总额30%的预付款，交付数据时结算尾款。
我们支持多种支付途径：支付宝、银行汇款、PayPal，详情请查看这里。
我们的退款原则是：
■ 如果一个项目无法完成当然是无条件退款。
■ 如果在我们开始开发前你想取消一个项目，你也可以得到退款。
■ 如果你的需求在项目开始之后变化了，我们可以重新谈价格。
■ 我们的数据采集程序主要采用开源、免费、跨平台并支持多线程的Python语言开发。
■ 对于大型采集项目我们通常采用亚马逊云主机和阿里云云主机。我们同时在西安电信大厦托管了多台服务器。
■ 解析JavaScript我们采用Webkit技术。
■ 我们也熟悉其它开发语言：PHP，Ruby。
如果你对Web数据采集技术感兴趣，如果你想通过挑战各种难题学到新技术，我们很乐意收到你的简历hello@webscraping.cn。
