精品为您呈现,快乐和您分享!

移动端

收藏本站

OK下载站

当前位置: 首页 > 软件下载 > 网络工具

trico爬虫云原生v1.0官方版

trico爬虫云原生v1.0官方版

类型:网络工具 语言:简体

大小:105.2M 更新时间:2019-08-05

推荐指数:

应用简介


trico爬虫云原生不需要发布和部署。具有强大的集群支持和多用户协同管理平台的支持。它还可以灵活调度任务并顺利爬取海量数据。它是一个云数据采集平台。 trico爬虫云原生可以提供商品和房价。快递物流、气象等行业百万级数据信息采集服务。









trico爬虫云原生不需要发布和部署。具有强大的集群支持和多用户协同管理平台的支持。它还可以灵活调度任务并顺利爬取海量数据。它是一个云数据采集平台。 trico爬虫云原生可以提供商品和房价。快递物流、气象等行业百万级数据信息采集服务。



trico爬虫云原生



基本介绍



我们的爬虫被称为“Trico Crawler Cloud Native”。它是一个不需要发布和部署、具有强大的集群支持和多用户协作管理平台支持、可以灵活调度任务、平滑爬取海量数据的云数据采集平台。Trico爬虫语言可以处理复杂的逻辑数据结构。编写自定义爬取片段并将其上传到Trico。 Trico将帮助您部署片段代码,并根据最优调度原则将任务投递到Trico的爬虫集群上。剩下的您只需要等待Trico 给您的服务回电并给您想要的结果即可。当然,您也可以选择将数据发送到您的邮箱,以便更高效、更轻松地查看简单数据。



特征



Trico爬虫云原生可以提供商品、房价、快递物流、天气、新闻、咨询、知识库、文献、媒体广告、股票基金、汽车、医药等各行业的百万级数据信息采集服务。视线即可采集,无论是看图通话还是贴吧论坛,支持各业务渠道的爬虫,满足各种采集需求。目前,杭州淘粉吧、海虎等公司正在爬取国内外数百家电商官网(亚马逊、雅诗兰黛、东湾、诺德斯特龙、曼凯德、梅西百货、艾草、Escentual、聚划算、淘客等)的数据源,全面覆盖电商行业产品品类选择。通过简单的设置,即可快速、准确地获取数据。此外,一些商家还以极快的速度爬取北美等城市的房产信息源。



软件特点



抓取碎片



编写自定义爬取片段并将其上传到Trico。 Trico将帮助您部署片段代码,并根据最优调度原则将任务投递到Trico的爬虫集群上。剩下的您只需要等待Trico 给您的服务回电并给您想要的结果即可。当然,您也可以选择将数据发送到您的邮箱,以便更高效、更轻松地查看简单数据。



无需发布部署



强大的集群支持



Trico爬虫语言处理



复杂的逻辑数据结构



指示



在将Segment(yml语法的代码片段)提交给Trico进行部署之前,您可以选择在本地构建Trico服务来验证和调试您的Segment。



第1 步:下载/安装Docker



首先将docker下载到你使用的机器上(Mac版/Windows版),并安装(Mac版/Windows版)。



第二步:拉取镜像并启动容器



我们已经在镜像中添加了trico运行所需的环境。只需要通过以下代码拉取镜像并通过docker运行即可。



sudo docker pull tricooffical/kenerl



sudo docker run -d -p 8080:8080 -p 9010:9010 -it tricooffical/kenerl



第3 步:使用编辑器



打开编辑器,左下角的kenerl变成绿色,表示连接成功。输入相应的脚本,点击RUN按钮运行。



16f5d4b8f889a998_600_0.jpeg