认识 Scrapy 专家

以下公司提供 Scrapy 的支持合同和咨询服务,还可以开发定制的爬虫以满足您的需求

Zyte 由 Scrapy 的创建者创立,目前是支持 Scrapy 开发的最大公司。我们提供市场领先的网页数据提取产品和服务,Zyte API、Zyte DataScrapy CloudZyte API 是我们的旗舰解决方案,它可以自动处理封禁、提取数据、渲染页面、自动化浏览器操作、生成屏幕截图、管理会话和 Cookie、报告和分析使用情况,并提供透明的按网站计价。

Web Scraping Solutions 专注于建立和维护可靠的数据源、开发全面的网页抓取项目以及提供长期的项目维护。了解他们如何支持您的数据需求,并与他们预约通话

ScrapeOps 是一个用于网页抓取的 DevOps 工具,当您安装 scrapeops-scrapy 扩展时,它提供了一套用于您的 Scrapy 项目的监控、错误跟踪、警报、调度和部署工具。ScrapeOps 还在 The Scrapy Playbook 上发布 Scrapy 指南和教程。

Arbisoft 深入挖掘大型网站的多个层次,收集有价值的数据,为全球领先企业提供支持。它提供实时抓取和定制构建的全托管蜘蛛。6 年多来的优质服务,他们的 Python 工程师已将 Scrapy 视为他们的首选工具。

Datahut 提供涵盖电子商务、内容发现、潜在客户生成、舆情挖掘等不同业务领域的 Scrapy 咨询服务。他们以最常见的格式提供干净且可立即使用的数据。

SayOne 使用 Scrapy 为其网页抓取和可视化服务提供支持。他们拥有强大的抓取专家团队,专门从事抓取、信息提取和应用程序集成。他们还提供网页和移动应用程序开发。在此处阅读更多关于他们的数据抓取服务的信息 此处

Lambert Labs 专注于使用 Scrapy 从网络上聚合结构化和非结构化文本、图像和视频。它将 Scrapy 与 Selenium 结合使用,实时抓取 JavaScript 渲染的网站。Lambert Labs 还提供网页开发、自动化测试、数据科学和 DevOps。

Tryolabs 是一家精品开发工作室,专门构建具有机器学习组件的 Python 应用程序。他们将 Scrapy 嵌入到其客户的应用程序以及他们自己的产品中。

Intoli 使用 Scrapy 提供定制的网页抓取解决方案,提供客户用于支持其核心产品、潜在客户生成和竞争对手研究的数据。他们专注于高级服务,例如跨站点数据聚合、用户登录和绕过验证码。

使用 Scrapy 的公司

查看谁正在使用 Scrapy 开展业务并对世界产生影响。
(您应该出现在此列表中吗? Fork 此 GitHub 存储库,添加自己,然后发送拉取请求!)


Zyte 由 Scrapy 的创建者创立,提供领先的网页数据提取产品和服务。他们的旗舰解决方案 Zyte API 提供了自动处理封禁、数据提取、页面渲染、浏览器操作自动化、屏幕截图生成、会话和 Cookie 管理以及使用情况报告和分析的功能。它还具有透明的按网站计价功能。


Web Scraping Solutions 专注于建立和维护可靠的数据源、开发全面的网页抓取项目以及提供长期的项目维护。了解他们如何支持您的数据需求,并与他们预约通话


Parsely: 使用 Scrapy 从数百个新闻网站抓取文章。其 CTO 在 此演讲 中谈到了 Scrapy。


DirectEmployers Foundation: 使用 Scrapy 从许多网站抓取职位发布,这些职位发布在 My.jobs 网站上。


Flax: 是一家位于剑桥(英国)的搜索咨询公司,使用 Scrapy 为其解决方案提供抓取需求 (博客文章)


Médialab Sciences Po: 位于巴黎,正在使用 Scrapy 为社会科学研究人员开发一个网络挖掘工具 (此处公告)


Lyst: 使用 Scrapy 抓取和抓取他们索引的时尚网站。


ScraperWiki: 是一家位于利物浦的数据服务公司,提供定制的数据抓取和聚合解决方案,使用 Scrapy 作为核心技术 (博客文章)


Data.Gov.Uk: 英国政府数据聚合网站 (推文)


Oposicionesaldia: 使用 Scrapy 收集西班牙职位发布、奖学金和在线免费课程的数据。


Iberestudios: 使用 Scrapy 收集西班牙硕士学位、博士学位和研究生学位的数据。


Dealshelve: 使用 Scrapy 从许多网站抓取每日特价。


CareerBuilder: 使用 Scrapy 从许多网站抓取职位信息。


GrabLab: 是一家俄罗斯公司,专门从事网页抓取、数据收集和网页自动化任务。


SimpleSpot: 使用 Scrapy 构建其地理定位信息服务。


Monetate: 每天使用 Scrapy 收集其客户的目录信息。


the urge 是一款时尚搜索引擎,专注于使用人工智能帮助购物者找到他们想要的时尚。他们大规模使用 Scrapy 抓取零售商网站以获取时尚产品信息。


Alistek: 通过抓取各种数据源(包括网络和离线数据源),使用 Scrapy 更新其基于 OpenERP 的后台系统中与合作伙伴相关的信息。


Zhitongba: 是一家试图帮助人们在中国大城市更好地通勤的公司。他们使用 Scrapy 从多个来源抓取拼车信息。


Offertazo: 使用 Scrapy 从许多西班牙网站抓取优惠信息。


Lionseek: 是一款搜索引擎,使用 Scrapy 在论坛中查找待售商品。


Stilivo: 是一款发现购物网站,使用 Scrapy 从电子商务网站收集产品信息。


Mapado: 使用 Scrapy 在网络上查找本地活动。


Zopper: 使用 Scrapy 抓取数百个电子商务门户网站,以对在线销售的产品进行分类。


WP Rocket: 使用 Scrapy 预加载所有客户网站的缓存。


Competera: 是一项价格情报服务,使用 Scrapy 每天从超过一百万个产品页面收集价格、可用性和促销数据。


Jobijoba: 每天使用 Scrapy 从许多招聘网站抓取职位信息。在法国、几个欧洲国家、俄罗斯、墨西哥和澳大利亚开展业务。


Data Quarry: 设计数据抓取器专门解决电子商务用户的需求,并提供自定义的 Scrapy 开发。


El Útero de Marita: 秘鲁领先的新闻博客使用 Scrapy 从秘鲁政府机构下载公共文件,用于数据新闻。


Shimply: 正在建立世界上最大的在线市场,连接卖家和买家。每天解析超过 500 个大小网站。 (推文)


Allclasses: 使用 Scrapy 从休闲到高级教育网站收集超过 100,000 个在线和本地课程,为教育提供更多便利。


MonkeyLearn: 是一个云平台,允许任何公司使用机器学习从非结构化文本中提取相关数据。它使用 Scrapy 获取数据来训练其算法。


neu.land GmbH: 使用 Scrapy 抓取客户网站,以便识别可能的优化措施,以使网站更快、更易访问和更用户友好。


LavoWeb: 使用 Scrapy 抓取电子商务网站,进行 SEO 审核和 Magento 迁移。


SayOne: 使用 Scrapy 为其客户抓取数据,从而为他们开发更多以客户为中心的应用程序。


Videdressing.com: 使用 Scrapy 抓取和收集时尚产品、服装和配饰的数据。


Up Hail: 对出租车服务做了许多网站对其他旅行费用所做的工作——实时比较它们以找到最优惠的价格。使用 Scrapy 抓取和抓取出租车和交通网站以收集费率、覆盖区域和优惠信息 (博客文章)


Allogarage: Allogarage 是法国领先的汽车修理厂比较公司。使用 Scrapy 抓取和抓取汽车制造商网站以收集汽车经销商的名称、地址、电话和时间表。 (推文)


TheWebFollower: 使用 Scrapy 抓取在不同网站上发布的最新马拉雅拉姆语博客、新闻、文章和故事。 (推文)


Cocon.Se: 一个工具,可以像爬虫一样显示您的网站。使用 Scrapy 制作数据收集算法原型,为机器学习和数据可视化生成特定数据集。 (博客文章)


WatchPatrol: 使用 Scrapy 从网络上最受欢迎的手表爱好者论坛聚合二手和新手表的私人销售列表。


PolitePol: 用于创建任何网页的 RSS Feed 的在线工具。使用 Scrapy 解析和处理源页面。此网站有开源 版本,您可以完全免费地查看和使用。


Retail Shake: 是一款全自动的每日商业竞争对手监控解决方案。
我们正在使用 Scrapy 提供 360° 监控:从定价到产品比较、价格基准、促销优惠、地理定位库存监控等。


Lapis Data Analytics: 我们的团队 在开发自定义蜘蛛和构建数据管道方面拥有丰富的经验。联系我们 以获取专业的网络数据抓取解决方案。


Simplicity: 使用 Scrapy 从城市网站抓取和抓取数据。这些数据也部分使用 Scrapy 进行处理,然后在 Simplicity 应用程序中显示给市民,无论是在 Android 还是 IOS 上。


Public.Law: 使用 Scrapy 从官方来源创建 法律词典其他法律应用程序。我们的 Scrapy 代码抓取的数据 是开源的。


Qwurty: 使用 Scrapy 在网络上抓取链接,并将链接元数据合并到社交网络中,供用户查看、分享和评论。


GroupBWT 是一家专门开发数据抓取解决方案的公司,包括电子货架监控、数据聚合器、仓库和价格比较系统。在任务中使用 Scrapy 并从网络上收集基本数据。


Improwised: 使用 Scrapy 帮助小型企业整合来自不同列表平台的评论。

想要成为此列表的一部分吗?

Fork 此 GitHub 存储库,添加自己,然后发送拉取请求!