使用PHP抓取工具将数据索引到ElasticSearch

I want to index crawled websites to ElasticSearch but i don't know can i index crawled information to ElasticSearch with php crawler. I know that Apache nutch can index crawled websites to ElasticSearch but i don't know anything about php crawlers!
Is there any php crawler that it's performance good and can index crawled websites to ElasticSearch?
Help me to choose php crawler for my project that i can integrate it with ElasticSearch.
Can i use Apache nutch with php web application?

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

1条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
dqf35839 2014-02-13 10:31
关注
Check it out :

PHPCrawl

Korotkin-Solutions/PHP-Crawler

OrphanCrawler

I suppose, the best it's to use PHP crawler, as You could control index private content and detect modifications more precisely.
解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

Spring boot Elasticsearch 导入数据到索引库提示数据空 elasticsearch java spring 中文分词搜索引擎
2020-10-07 23:41

回答 1 已采纳看看数据有没有问题，是不是有不可以为空的字段。找到报错的地方（SkuinfoServiceImpl的42行），看看是什么没有取到值。
elasticsearch kibana开发工具创建索引报错 elasticsearch java
2022-03-29 17:48

回答 1 已采纳盲猜8.0删除了自定义type，7.x自定义type就会警告不要使用除_doc以外的type了，这玩意几个版本之前就不推荐使用了，去掉你的type1就行了
使用elasticsearch作为hbase的二级索引 elasticsearch hbase
2017-09-02 07:23

回答 3 已采纳一个作为基础存储，一个作为数据索引。根据你的业务需求，判断哪些需要建立二级索引，存入 es数据库,建立索引与hbase的关联外键，可以实现实时搜索
elasticsearch-:es全文索引练习使用
2021-05-11 05:53

1.准备一台centos7.0服务器并安装elasticsearch 安装JAVA环境 yum install java-1.8.0-openjdk 安装elasticsearch 下载 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.3.0.tar.gz ...
如何使用ElasticSearch索引搜索单词的一部分 elasticsearch lucene php
2016-02-12 06:18

回答 2 已采纳 You can simply try using a wildcard first: curl http://localhost:9200/my_idx/my_type/_search?q=Do
将数组或对象从php发送到Elasticsearch elasticsearch php
2017-12-05 10:34

回答 1 已采纳 You may use elasticsearch-php, the official PHP client for Elasticsearch. (See the documentation).
win10下如何将oracle表中的数据导入到ElasticSearch6.8.1中。 elasticsearch lucene 中文分词全文检索搜索引擎
2019-07-26 16:05

回答 2 已采纳 https://blog.csdn.net/chroje/article/details/80412967
ChatGPT 和 Elasticsearch：OpenAI 遇见私有数据（二）
2023-04-28 21:00

Elastic 中国社区官方博客的博客结合 Elasticsearch 的搜索相关性和 OpenAI 的 ChatGPT 的问答功能来查询你的数据。在此博客中，你将了解如何使用 Elasticsearch 将 ChatGPT 连接到专有数据存储，并为你的数据构建问答功能。
架构问题：通过ElasticSearch搜索引擎查询到的数据有必要返回数据库吗 elasticsearch java
2021-09-27 12:03

回答 1 已采纳 MySQL开启binlog，以binlog同步的形式把数据同步到ES，举例搜索商品列表就把用到的数据都同步过去直接查ES，但是列表点进去的详情页就可以查MySQL，这样列表即使短时数据不一致其实问题也
使用Elasticsearch的Symfony Ajax搜索栏 ajax elasticsearch php symfony
2019-04-07 11:50

回答 1 已采纳 The finder of Elastichsearch is showing 10 results by default. If you want to change it you have t
如何使用这种架构在Elastic Search中复制索引？ elasticsearch
2019-08-06 08:54

回答 1 已采纳 The concept you're after is an index alias. The basic workflow would be: Import today's data int
ES(elasticsearch)搜索引擎结合java 使用
2020-12-17 16:29

八拍不动山的博客 ES(elasticsearch)搜索引擎结合java 使用官方文档地址： https://www.elastic.co/guide/en/elasticsearch/client/java-rest/7.x/java-rest-high.html 重点概念：文件索引块是因为使用了倒排索引倒排索引：例如 ...
php全文搜索elasticsearch elasticsearch php
2016-11-03 05:38

回答 1 已采纳 match query doesn't support wildcard query by default, so you have to use wildcard instead of that
elasticsearch&SpringBoot集成elasticsearch
2021-12-22 17:02

RNIZ的博客认识elasticsearch 搜索引擎搜索引擎依托于多种技术，如网络爬虫技术、检索排序技术、网页处理技术、大数据处理技术、自然语言处理技术等，为信息检索用户提供快速、高相关性的信息服务。搜索引擎技术的核心模块...
Springboot整合Elasticsearch搜索引擎+vue页面
2019-11-15 11:15

心向光明顶的博客 ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java语言开发的，并作为Apache许可条款下的开放源码发布，是一种流行的企业级...
没有解决我的问题, 去提问

悬赏问题

¥15 如何获取烟草零售终端数据
¥15 数学建模招标中位数问题
¥15 phython路径名过长报错不知道什么问题
¥15 深度学习中模型转换该怎么实现
¥15 HLs设计手写数字识别程序编译通不过
¥15 Stata外部命令安装问题求帮助！
¥15 从键盘随机输入A-H中的一串字符串，用七段数码管方法进行绘制。提交代码及运行截图。
¥15 TYPCE母转母，插入认方向
¥15 如何用python向钉钉机器人发送可以放大的图片？
¥15 matlab（相关搜索：紧聚焦）

使用PHP抓取工具将数据索引到ElasticSearch

1条回答 默认 最新

悬赏问题

1条回答默认最新