在互联网的开放和快速传播的背景下，民众越来越喜欢在网上表达意见。在这种背景下，舆情分析解决方案应运而生，帮助政府和企业对其所关心的业务产生洞察。细节请戳下面链接~~~https://forum.huaweicloud.com/thread-8993-1-1.html

在互联网的开放和快速传播的背景下，民众越来越喜欢在网上表达意见。在这种背景下，舆情分析解决方案应运而生，帮助政府和企业对其所关心的业务产生洞察。细节请戳下面链接~~~https://forum.huaweicloud.com/thread-8993-1-1.html

本帖最后由 ES_Siyu 于 2018-6-13 10:29 编辑在互联网的开放和快速传播的背景下，民众越来越喜欢在网上表达意见。因此在以下四个层面上，舆情产品逐渐兴起，为各类行业提供相关分析服务。 16354 舆情解决方案的业务流程大致如下。如果为政府机关等提供服务，则涉及到舆论监控，广播宣传等；如果为互联网企业，则会有竞品分析，口碑检测等业务，帮助客户对市场，用户和产品产生洞察等。 16355 技术上，云搜索服务在整个舆情分析解决方案所处的位置如下 16356 而华为云 云搜索服务能胜任舆情分析中的关键一环的原因如下： 16357 如果各位小伙伴们想快速体验，享受舆情分析后带来的洞察，欢迎戳下面链接~~~ https://www.huaweicloud.com/product/es.html

一些小伙伴在使用云服务时，经常会碰到价格算不清，计费方式搞不明白的情况。云搜索服务创建集群时将实例与存储分开提示，清晰明了，帮您了解每一分钱的真实去处~~ 这篇文章将用一个例子给大家展示，并教你省钱秘笈。 假设我们要创建一个云搜索集群，规格如下： 15740 1 创建集群收费提示 15741 在云搜索计费中，对于计算和存储采取不同的收费。 15759 可以看到： 集群价格/小时 = 计算价格/小时 + 存储价格/小时 在这种计费模式下，用户使用多少就付多少。消费明细可以在创建集群页面的底部显示。用户先使用，后付钱，系统每小时出一个账单。 在这种模式，每月和每年的消费是： 15743 也就是说，使用云搜索服务一年总共需要花费67977.6元，其中计算为61495.2元，存储为6482.4。 2 省钱秘笈 --- 折扣套餐云搜索服务针对长时间使用的用户，还有套餐优惠活动，对计算资源具有非常大的优惠，但不面向存储资源。 基本规则：在对应的节点计算规格下，将以一个优惠的价格提供每月750小时的使用时长。可以购买多个数量，并且如果包年，套餐将免费送两个月使用。 解释：750小时足够涵盖一个节点一个月的用量（750/24=31.25天） 15744 在这种模式，每月和每年的消费是：15745 也就是说，使用云搜索服务，在套餐优惠下，一年仅需要花费37734.6元，其中计算为31252.2元，存储为6482.4元。 可以看到，使用一年的套餐后，计算资源比之前便宜了近50%！ 3 总结 最后，我们将对比“按需计费”和“套餐计费”。15746 可以看到，购买套餐，一年收费总价将便宜44%！ 4 存储说明 许多小伙伴都发消息问存储打折情况。云搜索目前不提供存储包周期折扣，主要原因如下： （1） 存储包月优惠力度有限 （2） 云搜索支持单独磁盘扩容（不会中断业务），按需的灵活性更能满足客户的需求，帮助用户减少没必要的资源浪费 下面，我们将以具体的数字的来说明。 （1） 存储包月优惠力度 假设用户硬盘使用高I/O，使用量为1000GB。此时如果按需一个月需要352.8，而包月价位350。因此如果用户采取存储包月，也仅仅优惠了7.9%。所以可以看到，包月并不能带来太多优惠。 18155 （2） 避免没必要的资源浪费 在通常的业务场景中，用户的数据都是随时间增多。假设用户预计一年存储需求量为4000GB，那么简单分为以下两种场景： • 用户一开始就购买了4000GB包年 • 用户一开始只购买了1000GB按需，然后以后每个季度扩容1000GB，最终年底达到4000GB 此时花费明细如下： 18156 从表格可以看出，按需扩容一年下来反而比包年便宜14000-10584=3416元！归根结底，是按需收费和扩容避免了用户的资源浪费，最终反而能帮助客户减少开支，节约费用。

本帖最后由 lixinlong 于 2018-5-14 16:26 编辑如何使用数据迁移服务从OBS加载数据到云搜索服务

https://bbs.huaweicloud.com/blogs/78fbd980543011e89fc57ca23e93a89f

本帖最后由 ES_Siyu 于 2018-5-3 20:09 编辑实际中，日志通常会记录系统、应用程序和安全等信息。通过分析日志，开发和运维人员可以了解服务器信息和定位问题，进而进行错误纠正。 但是日志通常分散存在不同设备，依次登录每台机器查看日志将会特别低效。因此，业界常用ELK将日志进行集中化管理，并用其强大的检索和聚合能力进行日志分析。 其中:· Elasticsearch是一个开源分布式搜索引擎，支持近乎实时搜索，具有强大的检索和聚合能力，RESTful接口等优势· Logtash是一个负责对日志进行收集，过滤，传输的开源工具· Kibana是一个对搜索和分析的可视化的开源工具 在这篇文章，我们将基于华为云云搜索（https://www.huaweicloud.com/product/es.html）进行ELK平台的搭建。 为简化方便，下图展示了ELK的基本架构。 14758 其中：· 被采集日志的服务器在华为云· Logstash部署在被采集日志的服务器上· Elasticsearch和Kibana都在云搜索集群上· 云搜索集群和服务都在同一VPC、子网和安全网下· Elasticsearch，Kibana和Logstash选用的版本都是5.5.1。· 服务器选用的是CENTOS系统 在这篇文章，我们分析的日志数据（Apache Log）格式如下： 14710 1 申请云搜索服务详细步骤请参照：https://static.huaweicloud.com/upload/files/pdf/20180115/20180115101401_17315.pdf申请的云搜索集群中，包含E（Elasticsearch）和K（Kibana），能够极大帮助用户减少部署等琐碎工作。创建成功后，能够看到集群列表，包含访问地址等信息。14711 2 在服务器上部署Logstash 2.1 安装JavaLogstash的运行依赖于Java环境，因此推荐使用最近版本的Java。在这里，我们使用Java1.8。具体步骤请自行搜索安装。 2.2 安装Logstash在这里我们需要下载Logstash：https://www.elastic.co/downloads/past-releases/logstash-5-5-1我们选用RPM包，通过服务器上EIP拷贝到各台服务器。执行下列命令，安装Logstash14712移动配置文件到logstash目录。本例中Logstash被安装到/usr/share/logstash/,而配置文件在/etc/logstash/。这里请根据用户的具体情况来操作。14713其中配置文件包含：14715 2.3 添加Logstash配置文件新建文件14717输入内容14718其中· input指明了数据的来源。此处设为文件。· filter对日志进行了提取和处理，将非结构化信息转换为结构化信息· output指明了数据的输出。此处设为Elasticsearch，ip地址能在云搜索的集群列表中查看。14757 2.4 启动Logstash14719 3 使用Kibana3.1 在云搜索集群页面点开Kibana 14721 3.2 查看导入数据 14722 我们看到原本的非结构化的信息被很好地解析成了不同字段，包括IP，时间，请求等信息。 3.3 添加索引模式 点击“Management”，添加index pattern。这里我们的索引名为“Logstash-*”，时间字段为“@timestamp”.14724 3.4 添加可视化 在这里我们将统计用户访问的http状态码分布，以检测服务器运行的稳定程度。点击“Visualize”，接着点击“Create a visualization” 14725 选择饼状图“Pie” 14726 点击选择“logstash-*”14727配置信息· 这里我们采用上一年的数据，因此选择“Previousyear”，可以在右上角看到这个选项。· 在“SliceSize”，选择“Aggregation”为“Unique Count”，“Field”为“host”。这是让出现相同ip的状态码只算一次。· 在“SplitSlices”，选择“Aggregation”为“Terms”，“Field”为“status”。这是让饼状图按照状态码来统计。· 在这张图，我们饼状图采用环装设计，这可以在左边栏点击“Options”，勾选“Donut”。 查看可视化结果14728

   小E最近一直在使用华为云的云搜索服务。让他很开心的是，华为云的云搜索服务，可以自定义自己的词库来做分词、停词。让他更意想不到的是，修改词库还可以热更新，不用重启即可生效。但是，词库中的词从哪里来，哪些才是有用的词，这真是让小E头疼的事情。小E每天苦读海量文章，才能从中找出几个自己认为还不错的词。突然，小E灵机一动：数据！词语不就是在数据中！小E不愧是混迹于大数据IT界的老手，三下五除二搞出来了一个词语提取小工具。下面，我们一起看看小E怎么使用他的小工具的。第一步，小E找到一篇最近大火的复仇者联盟的电影新闻，把它拷贝到小工具(文章很长也可以存储在txt文件后上传)。14332第二步，小E点击“Submit”，后台就开始通过各种大数据算法计算。不一会，结果就显示出来啦。14333恩~~~看来提词效果还不错，我们再来看看有没有其他一些有趣的结果呢14334我们发现像“迪士尼”，“漫威”这样的词也能被很好地发现。{:4_96:}这样，小E在使用华为云的云搜索服务的时候，可以把这些新发现的词语加入词库，方便分词，提高搜索结果了呢~进一步，小E发现，如果用这个工具分析下一篇文章，“迪士尼”或“漫威”可能会重复出现。为了更有效率，小E又添加了一个过滤功能14346这样，把已发现的词放在这里，下一次就不会出现，每次都能发现新词啦~~~我们看下结果14335“迪士尼”和“漫威”就真的没出现了哦{:9_90:}各位大佬看官，看到这里，是不是在想这样的工具要花多少钱才能用呢？我们的回答是：免费！免费！免费！没错，你没有看错~快戳下面链接，和小E一起感受新词发现的乐趣吧~词语提取工具    

14018