可搜索的文件? 是的你可以。 选择AsciiDoc的另一个原因

Elasticsearch是一个基于Apache Lucene的灵活,功能强大的开源,分布式实时云搜索和分析引擎,可提供全文搜索功能。 它是面向文档且无架构的。

Asciidoctor是一个纯Ruby处理器,用于将AsciiDoc源文件和字符串转换为HTML 5DocBook 4.5和其他格式。 除了Asciidoctor Ruby部分之外,还有一个Asciidoctor-java-integration项目,该项目使我们可以从Java调用Asciidoctor函数,而无需注意正在执行Ruby代码。

在这篇文章中,我们将了解如何在AsciiDoc文档上使用Elasticsearch ,以使其可通过其标题信息或内容进行搜索。

让我们添加所需的依赖项:

<dependencies><dependency><groupId>junit</groupId><artifactId>junit</artifactId><version>4.11</version><scope>test</scope></dependency><dependency><groupId>com.googlecode.lambdaj</groupId><artifactId>lambdaj</artifactId><version>2.3.3</version></dependency><dependency><groupId>org.elasticsearch</groupId><artifactId>elasticsearch</artifactId><version>0.90.1</version></dependency><dependency><groupId>org.asciidoctor</groupId><artifactId>asciidoctor-java-integration</artifactId><version>0.1.3</version></dependency></dependencies>

Lambdaj库用于将AsciiDoc文件转换为json文档。

现在我们可以启动一个Elasticsearch实例,在我们的例子中,它将是一个嵌入式实例。

node = nodeBuilder().local(true).node();

下一步是解析AsciiDoc文档标题,读取其内容并将其转换为json文档。

存储在Elasticsearch中json文档的示例可以是:

{"title":"Asciidoctor Maven plugin 0.1.2 released!","authors":[{"author":"Jason Porter","email":"example@mail.com"}],"version":null,"content":"= Asciidoctor Maven plugin 0.1.2 released!.....","tags":["release","plugin"]
}

而对于一个AsciiDoc文件转换成JSON文件,我们将使用由Elasticsearch 的Java API提供了以编程方式创建JSON文件XContentBuilder类。

package com.lordofthejars.asciidoctor;import static org.elasticsearch.common.xcontent.XContentFactory.*;
import java.io.File;
import java.io.FileInputStream;
import java.io.FileNotFoundException;
import java.io.IOException;
import java.util.List;import org.asciidoctor.Asciidoctor;
import org.asciidoctor.Author;
import org.asciidoctor.DocumentHeader;
import org.asciidoctor.internal.IOUtils;
import org.elasticsearch.common.xcontent.XContentBuilder;import ch.lambdaj.function.convert.Converter;public class AsciidoctorFileJsonConverter implements Converter<File, XContentBuilder> {private Asciidoctor asciidoctor;public AsciidoctorFileJsonConverter() {this.asciidoctor = Asciidoctor.Factory.create();}public XContentBuilder convert(File asciidoctor) {DocumentHeader documentHeader = this.asciidoctor.readDocumentHeader(asciidoctor);XContentBuilder jsonContent = null;try {jsonContent = jsonBuilder().startObject().field("title", documentHeader.getDocumentTitle()).startArray("authors");Author mainAuthor = documentHeader.getAuthor();jsonContent.startObject().field("author", mainAuthor.getFullName()).field("email", mainAuthor.getEmail()).endObject();List<Author> authors = documentHeader.getAuthors();for (Author author : authors) {jsonContent.startObject().field("author", author.getFullName()).field("email", author.getEmail()).endObject();}jsonContent.endArray().field("version", documentHeader.getRevisionInfo().getNumber()).field("content", readContent(asciidoctor)).array("tags", parseTags((String)documentHeader.getAttributes().get("tags"))).endObject();} catch (IOException e) {throw new IllegalArgumentException(e);}return jsonContent;}private String[] parseTags(String tags) {tags = tags.substring(1, tags.length()-1);return tags.split(", ");}private String readContent(File content) throws FileNotFoundException {return IOUtils.readFull(new FileInputStream(content));}}

基本上,我们通过调用startObject方法来启动新对象, field方法来添加新字段以及startArray来启动数组来构建json文档。 然后,将使用此生成器以json格式呈现等效对象。 请注意,我们使用的是从Asciidoctor类返回头从AsciiDoc文件属性没有阅读和渲染整个文档readDocumentHeader方法。 最后,内容字段设置为所有文档内容。

现在我们准备开始为文档建立索引。 注意populateData方法接收一个Client对象作为参数。 该对象来自Elasticsearch Java API ,表示与Elasticsearch数据库的连接。

import static ch.lambdaj.Lambda.convert;
//....private void populateData(Client client) throws IOException {List<File> asciidoctorFiles = new ArrayList<File>() {{add(new File("target/test-classes/java_release.adoc"));add(new File("target/test-classes/maven_release.adoc"));}};List<XContentBuilder> jsonDocuments = convertAsciidoctorFilesToJson(asciidoctorFiles);for (int i=0; i < jsonDocuments.size(); i++) {client.prepareIndex("docs", "asciidoctor", Integer.toString(i)).setSource(jsonDocuments.get(i)).execute().actionGet();}client.admin().indices().refresh(new RefreshRequest("docs")).actionGet();
}private List<XContentBuilder> convertAsciidoctorFilesToJson(List<File> asciidoctorFiles) {return convert(asciidoctorFiles, new AsciidoctorFileJsonConverter());
}

重要的是要注意,算法的第一部分是通过使用先前的转换器类和Lambdaj项目的convert方法所有我们的AsciiDoc文件(在本例中为两个)转换为XContentBuilder实例。

如果您愿意,可以在https://github.com/asciidoctor/asciidoctor.github.com/blob/develop/news/asciidoctor-java-integration-0-1-3-中查看本示例中使用的两个文档。 release.adoc和https://github.com/asciidoctor/asciidoctor.github.com/blob/develop/news/asciidoctor-maven-plugin-0-1-2-released.adoc 。

下一部分是在一个索引中插入文档。 这是通过使用prepareIndex方法完成的,该方法需要一个索引名称( docs ),一个索引类型( asciidoctor )和要插入的文档的ID 。 然后我们调用setSource方法,该方法将XContentBuilder对象转换为json ,最后通过调用execute()。actionGet() ,将数据发送到数据库。

仅由于我们使用的是Elasticsearch的嵌入式实例(在生产中不需要此部分),才需要最后一步,该实例通过调用refresh方法刷新索引。

之后,我们可以开始查询Elasticsearch以从我们的AsciiDoc文档中检索信息。

让我们从一个非常简单的示例开始,该示例返回所有插入的文档:

SearchResponse response = client.prepareSearch().execute().actionGet();

接下来,我们将搜索Alex Soto编写的所有文档,在本例中是其中一个。

import static org.elasticsearch.index.query.QueryBuilders.matchQuery;
//....
QueryBuilder matchQuery =  matchQuery("author", "Alex Soto");QueryBuilder matchQuery =  matchQuery("author", "Alexander Soto");

请注意,我正在搜索字段作者字符串Alex Soto ,该字符串仅返回一个。 另一个文档由Jason编写。 但是有趣的是,如果您搜索Alexander Soto ,那么将返回相同的文档。 Elasticsearch非常聪明,可以知道AlexAlexander是非常相似的名字,因此它也返回了文档。

更多查询,如何查找由Alex而不是Soto撰写的文档。

import static org.elasticsearch.index.query.QueryBuilders.fieldQuery;//....QueryBuilder matchQuery =  fieldQuery("author", "+Alex -Soto");

在这种情况下,当然不会返回任何结果。 请注意,在这种情况下,我们使用字段查询而不是术语查询,并且使用+和–符号来排除和包括单词。

您也可以找到所有包含title上 释放的单词的文档。

import static org.elasticsearch.index.query.QueryBuilders.matchQuery;//....QueryBuilder matchQuery =  matchQuery("title", "released");

最后,让我们找到所有谈论0.1.2版本的文档,在这种情况下,只有一个文档谈论它,另一个文档谈论0.1.3。

QueryBuilder matchQuery = matchQuery("content", "0.1.2");

现在我们只需要将查询发送到Elasticsearch数据库即可,这是通过使用prepareSearch方法完成的。

SearchResponse response = client.prepareSearch("docs").setTypes("asciidoctor").setQuery(matchQuery).execute().actionGet();SearchHits hits = response.getHits();for (SearchHit searchHit : hits) {System.out.println(searchHit.getSource().get("content"));
}

请注意,在这种情况下,我们通过控制台打印AsciiDoc内容,但是您可以使用asciidoctor.render(String content,Options options)方法将内容呈现为所需格式。

因此,在本文中,我们看到了如何使用Elasticsearch为文档建立索引,如何使用Asciidoctor-java-integration项目AsciiDoc文件中获取一些重要信息,以及最后如何对插入的文档执行一些查询。 当然, Elasticsearch中还有更多种查询,但是本文的目的并不是要探索Elasticsearch的所有可能性。

另外,请注意使用AsciiDoc格式编写文档有多么重要。 您无需花费太多精力就可以为文档建立搜索引擎。 另一方面,请设想使用任何专有的二进制格式(例如Microsoft Word)来实现相同的所有代码 因此,我们已经说明了使用AsciiDoc而不是其他格式的另一个原因。

参考: 可搜索的文件? 是的你可以。 从我们的JCG合作伙伴 Alex Soto 选择 “ One Jar To Rule All All”博客的另一个原因 。

翻译自: https://www.javacodegeeks.com/2013/06/searchable-documents-yes-you-can-another-reason-to-choose-asciidoc.html

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/367980.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

如何判断两个时间段是否有交集

给定两个左闭右开时间段 [A, B)、[X, Y)&#xff0c;如何判断它们是否有交集&#xff1f; 由于时间可以转换为时间戳&#xff0c;时间戳是一个数字&#xff0c;所以我们可以将问题转换为&#xff1a;如何判断两个左闭右开的数字区间是否有交集。 结论是如果 X < B AND A <…

Jquery 获取table当前行内容

$("a[namecheckOriginal]").click(function () { var parent $(this).parent().parent().find("td"); var moduleEnum parent.eq(7).text(); if(moduleEnum""){ } alert(moduleEnmu);}); 转载于:https://www.cnblogs.com/austi…

CSS3 iphone式开关的推荐写法

话说这个问题纠结了近一个小时&#xff0c;为什么呢&#xff1f;看看就知道了。 在公司的商旅Web移动版本项目上有这么一个交互&#xff0c;需要模仿iphone自带的开关&#xff0c;好吧&#xff0c;肯定没什么问题。 Tip&#xff1a;请使用Chrome查看以下案例 嗯&#xff0c;问…

android play gif,Play.gif image in android without using webview

问题I tried like this, which i found on the net to play gif images:private class MYGIFView extends View {Movie movie;InputStream is null;long moviestart;public MYGIFView(Context context) {super(context);// Provide your own gif animation fileis context.ge…

erp 维护费 要交吗_erp系统每年都要缴费吗

erp系统每年都要缴费吗日期&#xff1a;2020-12-29 03:32:04 浏览量&#xff1a;次企业实现企业管理系统必须选择合适的时机&#xff0c;成功实现企业管理系统的最佳时期是在企业的兴盛期及呆滞期&#xff0c;在创业期和衰退期上企业管理系统是很难成功的。在兴盛期及呆滞期&am…

监视和检测Java应用程序中的内存泄漏

因此&#xff0c;您的应用程序内存不足&#xff0c;您日夜不停地分析应用程序&#xff0c;以期捕获对象中的内存漏洞。 后续步骤将说明如何监视和检测您的内存泄漏&#xff0c;以确保您的应用程序安全。 1.怀疑内存泄漏 如果您怀疑有内存泄漏&#xff0c;可以使用一种方便的方…

表单的隔行换色

<!DOCTYPE html><html lang"en"><head> <meta charset"UTF-8"> <title>表单隔行换色</title> <script> window.οnlοadfunction () {//1.获取表格 var tbleEle document.getElementById("tb1"); //…

点a链接写邮件小技巧

无意间发现这个技巧&#xff0c;分享一下&#xff01; 当点击mailto的邮件链接的时候&#xff0c;需要填写标题和内容&#xff0c;如果你想规定一个邮件标题格式&#xff0c;那这个可以帮助你。 代码&#xff1a; <a href"mailto:haozidaqianduan.com?subject投稿&a…

python字典的值可以是字典吗_python字典的值可以是字典吗

字典是python里的一种数据类型&#xff0c;特点是元素的无序性&#xff0c;和键key的唯一性。字典的创建方法是{key&#xff1a;values}&#xff0c;字典里的键key只能是不可变的数据类型(整型&#xff0c;字符串或者是元组)&#xff0c;值values可以是任何数据类型。字典里的一…

javascript 分时函数 分批次添加DOM节点 timeChunk

创建1000个webqq的qq好友列表, 一个好友用一个节点来表示 * timeChunk var timeChunk function(a, fn, sz, done) {var obj, t, len a.length;var start function() {for (var i 0; i < Math.min(sz || 1, a.length); i) {var obj a.shift();fn.call(this, obj);}}retu…

android webview sql database,websql在openDatabase报version mismatch错误,请问怎么解决?

在js里使用dataBase window.openDatabase(dbname, 1.0, dbdesc, dbsize, function() {});创建websql的时候经常报一下错误&#xff1a;unable to open database, version mismatch, 1.0 does not match the currentVersion of 重现场景&#xff1a;1、卸载hbuileder基座。2、使…

Neo4j Java Rest绑定入门(Heroku部署)

信不信由你&#xff0c;最近几天是我第一次尝试使用Neo4j的Java Rest Binding 。 我先前在Heroku上的Flavorwocky应用程序使用了Grails Neo4j插件以及其他一些东西&#xff0c;包括工作&#xff0c;嵌入式Neo4j规则。 但是&#xff0c;当部署到Heroku时&#xff0c;嵌入式不会…

前端性能优化规则

规则1-------减少HTTP请求 规则2-------使用内容发布网络 规则3-------添加Expires头控制缓存 规则4-------压缩组件 规则5-------将样式表放在顶部 规则6-------将脚步放在底部 规则7-------避免css表达式 规则8-------使用外部javaScript和CSS 规则9-------减少DNS查找 规则1…

uvm 形式验证_这究竟属于下一代验证的方法、语言还是工具?||路科验证

来源&#xff1a;内容由 公众号 路科验证 &#xff08;ID&#xff1a;Rocker-IC&#xff09;编辑部 原创&#xff0c;谢谢&#xff01;首先声明&#xff0c;便携式激励标准(PortableStimulus Standard, PSS)不是一种方法论&#xff0c;而是一种语言。使用语言我们可以有序地传递…

解读浮动闭合最佳方案:clearfix

之前给大家介绍两种浮动闭合的办法 &#xff0c;得知很多同学都在使用下面的骨灰级解决办法&#xff1a; .clear{clear:both;height:0;overflow:hidden;} 上诉办法是在需要清除浮动的地方加个div.clear或者br.clear&#xff0c;我们知道这样能解决基本清浮动问题。 但是这种…

redis 版的 hello world

为 redis 添加一个命令&#xff0c;效果如下图&#xff1a; 在 Server.h 中加入命令处理函数的声明&#xff1a; void meCommand(client *c); 在 Server.c 的命令表中加入&#xff1a; struct redisCommand redisCommandTable[] {{"me",meCommand,1,"rF",…

android commit apply,关于SharedPreference的commit和apply和ANR

看的SharedPreferencesImpl.java 办法呢 有人是不用apply直接自己异步commit. 也有人用反射把那个QueuedWork的sFinishers变量弄成empty.文档上说的commit和apply, Unlike commit,which writes its preference out to persistent storage synchronously, apply commits its cha…

从Datomic出发,革命性的非NoSQL数据库

我终于设法了解了当今最不寻常的数据库之一&#xff0c;Datomic&#xff0c;并希望与您分享。 感谢Stuart Halloway和他的工作室&#xff01; 为什么&#xff1f;&#xff01;&#xff1f; 我们将很快看到&#xff0c;Datomic与传统的RDBMS数据库以及各种NoSQL数据库有很大的不…

unity中单位是米还是厘米_401场地清理是什么,由施工单位做还是甲方做?造价中如何体现?...

场地清理是对公路用地范围及借土场范围内施工场地的清理、拆除和挖掘&#xff0c;以及必要的平整场地等有关作业。一、工作内容根据路基工程项目分表可以看出场地清理主要包括三方面内容&#xff1a;1、清理与拆除(1)清除表土路基范围内的树根、腐殖土、草皮或地表土不符合路基…

432 4.3.2 STOREDRV.Deliver; recipient thread limit exceeded

432 4.3.2 STOREDRV.Deliver; recipient thread limit exceeded 最近几天Hub-Mailbox服务器时不时就CPU超过90%。在任务管理器里面看到edgetransport占用大量CPU。进入EMC的队列查看器&#xff0c;看到邮箱数据库堵塞&#xff0c;队列上万。 堵塞的邮件大多是收件人自动回复、退…