什么是mongodb,zookeeper,redis,solr

MongoDB[1] 是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。

数据采集与预处理：FlumeNG实时日志收集系统，支持在日志系统中定制各类数据发送方，用于收集数据；Zookeeper是一个分布式的，开放源码的分布式应用程序协调服务，提供数据同步服务。数据存储：Hadoop作为一个开源的框架，专为离线和大规模数据分析而设计，HDFS作为其核心的存储引擎，已被广泛用于数据存储。

Java框架可以简化开发难度，更便于我们开发程序。所以学好Java框架还是比较重要的。Java的框架主要有：SpringMVC、Spring、Mybatis、Dubbo、Maven、RabbitMQ、Log4j、Ehcache、Redis、Shiro。不过这十个我们不需要都学会，只要学会其中四五个比较常用的就可以。SpringMVC。

大数据技术是指大数据的应用技术，涵盖各类大数据平台、大数据指数体系等大数据应用技术。大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

架构设计之:分布式分层

分布式理论：概念与挑战分布式系统的核心是将业务分解为独立组件，分布在不同的节点上，每个组件共同协作。它的特点包括分布性、对等性、并发性和缺乏全局时钟。然而，这也带来了通信异常、网络分区和节点故障等问题。

分层结构在计算机世界中无处不在，网络的7层通信协议是一种分层结构；计算机硬件、操作系统、应用软件也可以看作是一种分层结构。在大型网站架构中也采用分层结构，将网站软件系统分为应用层、服务层、数据层。分割 如果说分层是将软件在横向方面进行切分，那么分割就是在纵向方面对软件进行切分。

分布式架构是指通过将应用程序中不同的任务分配到多个计算机和服务器上，以实现更高级别的计算能力。分布式架构的设计目的是提高应用程序的可伸缩性、可靠性和可用性。

总之分布式设计思路比较多，还有可以支持网站线上服务器配置实时更新的分布式配置；分布式环境下实现并发和协同的分布式锁；支持云存储的分布式文件系统等。

es和search的区别是什么?

功能区别：ES 是一种搜索引擎，而其他搜索引擎可能具有不同的特点和功能。例子：- Solr is another search engine.（Solr 是另一种搜索引擎。）开发语言区别：ES 是使用 Java 开发的，而其他搜索引擎可能使用不同的开发语言。

search接介词of侧重“寻找的对象”； 接介词for侧重“寻找的目的”。

es是英语单词elastic search的缩写，意为“弹性搜索”。它是一个开源的全文搜索和分析引擎，最初是由Elastic公司开发的。它能够帮助用户快速地搜寻和分析大量的数据，包括文本、数字、地理位置等各种形式的数据。es被广泛应用于企业、网站、电子商务平台等多个领域。es有许多优秀的特点和优势。

SearchURI中也可以使用和和 Query DSL 类型的布尔操作符，不过具体的使用规则略有不同，具体的规则如下：需要注意的是， “＋” 号在url中会被解析为空格，要使用encode后的结果才可以，我们需要用%2B来替代一下。

solr的索引数据可以存放到数据库吗

1、在solr与tomcat整合文章中，我用的索引库是mycore，现在就以这个为例。

2、属于全文型数据库的有：Elasticsearch、Apache Solr、Sphinx、Microsoft SQL Server Full-Text Search、Oracle Text。Elasticsearch：一个开源的分布式搜索引擎，具有强大的全文搜索、分析和实时数据处理功能。

3、commit操作时会将数据写入到tlog中，然后tlog会将数据的修改反映在索引库中。遇到应用非正常关闭的情况，在应用启动时，系统会将tlog中未操作的数据先写入到索引库中。如果tlog中有大量的未操作的数据，系统启动时恢复的时间会很长。在commit完成后，是否开启新的searcher，以便能够搜索到新的数据。

4、特点不同 全文搜索引擎：以各类数据如文本、声音、图像等为对象，提供按数据的内容而不是外在特征来进行的信息检索，其特点是能对海量的数据进行有效管理和快速检索。目标索引类搜索引擎：使用自动索引软件来搜集和标记网页资源，并将这些资源存入数据库。

全文型数据库有哪些?

属于全文型数据库的有：Elasticsearch、Apache Solr、Sphinx、Microsoft SQL Server Full-Text Search、Oracle Text。Elasticsearch：一个开源的分布式搜索引擎，具有强大的全文搜索、分析和实时数据处理功能。

全文型数据库包括但不限于Elsevier ScienceDirect、IEEE Xplore、ACM Digital Library、SpringerLink、Wiley Online Library、PubMed Central、Google Scholar、JSTOR等。 Elsevier ScienceDirect：这是一个提供科学、技术和医学领域全文文章的数据库。

全文数据库包括中国知网、Sciencedirect、万方数据知识服务平台、中国科技期刊数据库、中国期刊全文数据库。中国知网 由清华同方光盘股份有限公司、清华大学中国学术期刊电子杂志社、光盘国家工程研究中心联合建设的综合性文献数据库。