经验总结:总结收集日志的几种方法

　　经验总结:总结收集日志的几种方法

　　介绍

　　到目前为止，我们已经看到采集

日志的方式有很多种。甚至，我们有很多种方法来采集

相同的日志。在今天的文章中，我将对其进行简要回顾。

　　由 Filebeat 采集

　　Filebeat是最常用的日志采集

方式。使用Filebeat，我们还有以下方法：

　　按模块采集

　　为了更方便的使用Filebeat采集数据，Elastic提供了模块供使用：

　　我们可以使用以下命令获取支持的模块：

　　 ./filebeat modules list

　　通过模块的使用，我们可以生成相应的ingest pipelines、dashboards、index patterns、index templates、ILM等，这些模块是我们会经常用到的模块。开箱即用的工具。

　　这种方法的路径是 Filebeat => Elasticsearch。关于模块的使用，可以参考《Beats：Beats入门教程（一）》一文。

　　使用Filebeat的输入日志采集

　　即使是通过上面介绍的模块方式采集

的日志，我们也可以使用这种方式来实现。但是，我们需要自己创建仪表板、摄取管道、索引模板、生命周期管理策略等。其实这是一种比较流行的回执采集

方式，特别是对于那些模块不支持的自定义日志。

　　

" />

　　采集

这些数据的方式是：Filebeat => Elasticsearch。我们可以阅读之前的文章《Beats：通过Filebeat将日志传递给Elasticsearch》。

　　完成 Filebeat 和 Logstash

　　我们知道Logstash可以用来清洗数据，可以使用Logstash来丰富数据和外部数据库。另一方面，Logstash的使用提供了缓冲的作用，特别是对于产生大量日志的情况。

　　该方法采集到的路径为：Filebeat => Logstash => Elasticsearch。可以看我之前的文章《Logstash：Logstash入门教程（二）》，或者《Logstash：将Apache日志导入Elasticsearch》一文。

　　通过 Kafaka 采集

数据

　　对于大量数据，Kafaka 是一种比较常见的解决方案。它充当缓冲区：

　　详细阅读请参考《Elastic：用Kafka部署Elastic Stack》一文。

　　通过 Logstash 采集

　　在某些情况下，我们甚至可以直接使用Logstash来采集

日志数据。关于Logstash和Filebeat的区别，可以看《Beats：Elastic Beats介绍及与Logstash的比较》一文。

　　该方法的采集路径为：Logstash => Elasticsearch。可以阅读《Logstash：数据转换、分析、抽取、丰富和核心操作》、《Elastic：使用Elastic Stack分析Spring Boot微服务日志（一）》两篇文章。

　　通过 Elastic Agent 采集

　　随着Elastic Stack的发展，Elastic在最新发布的版本中更推崇使用Elastic Agent来采集

日志。

　　关于使用Elastic Agent的日志采集方式，我们也分为两类：

　　

" />

　　支持的集成

　　为了方便大家的使用，Elastic也提供了类似开箱即用模块的解决方案。在最新版本中，我们使用提供的集成来完成日志采集

。

　　我们可以阅读以下文章来理解：

　　自定义日志

　　在很多情况下，我们的日志可能不属于 Elastic 提供的集成类别。那么我们如何将这些日志采集

到Elasticsearch中呢？事实上，Elastic 提供了一个叫做 Custom Logs 的集成，专门处理这个繁琐的需求。如果您想了解更多相关信息，请阅读文章“可观察性：如何使用 Elastic Agent 将自定义日志摄取到 Elasticsearch”。

　　直接在客户端写入日志到Elasticsearch

　　我们也可以直接在客户端以编程方式将日志写入 Elasticsearch。请阅读文章：

　　使用其他非 Elastic Stack 解决方案

　　其实结合Elastic Stack还有很多其他的解决方案，比如：

　　以上，我们列举了上面我能想到的方法。在实际使用中，开发者可能有更多的方法。如果还有更多，请告诉我。我会把这一切写下来。

　　文末

　　嗨，我们来互动吧！

　　喜欢这篇文章吗？

　　欢迎留下你想说的话，留言100%被选中！

　　核心方法:SEO关键词研究

　　关键词研究可能是SEO最重要的部分，除非您知道自己关键词目标是什么，否则您将无法开始营销活动，也无法评估成本和回报，除非您知道自己在竞争什么。

　　开始

　　关键词研究是关于了解用户在搜索信息时使用的单词，这通常包括了解关键词的搜索量以及这些单词的竞争程度。

　　关键词研究是搜索引擎优化和搜索营销的关键部分。因为如果使用得当，他可以帮助我们在开发网站和构建内容时提供路径。根据搜索查询的数量，关键词可分为头部、身体、长尾。一般来说，关键词的单词越多，竞争越少，相对激烈，更容易获得良好的排名

　　据说，一般来说，因为这个定律不是绝对的，所以会发生意外。下面是一些长尾关键词与主体和头部关键词的难度指数对比。

　　这个案例是一个长尾关键词容易竞争的点

　　在此示例中，长尾与头部一样困难关键词

　　这个例子是长尾关键词更难竞争

　　关键词难度

　　数据是通过SEOmoz的关键词难度工具获得的，根据经验，一般包括品牌的长尾关键词更难竞争，9/10的长尾关键词一般比主体和头部更容易关键词

　　2 视角

　　SEO一般可以分为两个目标：

　　获取流量并增加转化次数

　　很多SEO的坏处是过分强调获得流量而不是转化。这并不是说获得流量是错误的，而是关于您网站的目标。例如，对于电子商务网站来说，获得高转化价值的流量大于纯流量。在广告或媒体行业，眼球可能更为重要，只有获得流量才是正确的。

　　所以我们需要考虑：

　　更高的流量会直接带来更高的收入吗？或者，您是否想确保从具有更好转化指标的关键词获得流量？关键词的价值

　　根据以上两点，关键词的值可以基于以下两个维度：

　　每月搜索量、收入潜力或与竞争水平相关的转化率

　　谷歌的关键字工具可用于查找相关的每月搜索量，但它没有提供更多信息。AdWords™ 提供了关键词程度的竞争，但您需要了解这些已经在这些关键词搜索结果中排名的网站的权威性。chrome的Mozbar扩展名，这个工具可以给我一些详细的数据。但对于更复杂的分析，建议使用 SerpIQ，如下图所示

　　

" />

　　SEOmoz有一个名为关键字排名的报告，如下图所示

　　但他没有提供更详细的信息，以及SerpIQ，一种提供平均竞争指数的工具。

　　和搜索的意图

　　搜索每个位置的竞争索引

　　这些搜索结果网站的网页排名

　　反向链接数量

　　然后是域名的年龄

　　研究搜索者的意图

　　在优化转化率方面，了解目标受众的搜索意图至关重要。对关键词进行分类并根据不同的渠道和来源进行分析可以帮助我们了解用户的搜索意图。

　　开始学习

　　这里会用到的工具很多，谷歌提供的谷歌关键词工具一定少不了。使用此工具时，请记住选择完全匹配

　　以下是结果

　　给出这些关键词的搜索量和竞争水平，然后导出，通过Übersuggest获得更多关键词搜索建议

　　

" />

　　如下图所示

　　这非常有用，因为它可以根据实际搜索行为捕获与目标关键字相关的所有潜在排列。您现在可以向下钻取到短语并选择要添加到列表中的子关键字。然后单击“获取”按钮生成一个允许您复制和粘贴的模态窗口。将您选择的相关关键字粘贴回Google关键字工具并重新运行以获取更多关键字数据的好处。提示：我发现当您一次输入少于 10 个关键字时，Google 关键字工具会提供更多建议关键字。

　　Wordtracker还有一个关键字建议工具虽然要真正从中获得任何果汁，你需要注册一个付费计划：/还有各种工具可以在付费搜索和自然搜索之间提供关键字使用和竞争力——其中一些非常好。SEMrush–为您提供有关搜索量，平均每次点击成本，竞争页面数量，相关关键字，排名结果，甚至当前购买广告空间的公司（单击放大）的奇妙见解。

　　SpyFu – 提供搜索量、每天的点击次数及其平均每日费用、当前对关键字出价的实际广告客户数量以及正在运行的实际 AdWord 广告（点击放大）。

　　– 是我快速了解风景的最爱之一。它非常快速地（通过使用选项卡）使您可以访问有关PPC广告，相关关键字短语，付费和自然竞争对手以及我的最爱的数据;拼写错误！您是否知道关键字研究每月估计有 110，000 次搜索！请参阅下面的仪表板屏幕截图（单击以放大）。

　　验证重大机遇

　　一旦你在Excel中有一个好的列表，重要的是要了解你的大机会，或者正如我的团队所说的那样;你的金票。首先，您需要通过Google趋势运行热门查询来了解季节性波动（点击放大）：

　　注意随时间推移的平均兴趣指数，因为它可能有点令人困惑; 这里的 100 代表有史以来最高的搜索量，它不是搜索次数的整数。所以你正在寻找的是目前的兴趣并没有完全下降，从图表来看，关键词研究的当前搜索量似乎比2010年8月下降了约50%。接下来，你使用一些第三方石蕊测试来了解一个话题到底有多受欢迎，一个安全的赌注是使用世界上最受欢迎的百科全书Wikipedia.Domas Mituzashas建立了一个统计引擎来跟踪维基百科的页面浏览量。在过去的90天里，我们可以看到这个词已经被浏览了7，554次（帽子提示Glen Allsoppfor分享了这一点）。点击放大。

　　创建关键字评估模型

　　评估关键词的相对机会还是很困难的。如果没有大量的数据存储和对竞争格局的详细见解，很容易将大量时间和金钱投入到定位永远不会带来稳定回报的关键字上。为了避免这种情况，而是只关注有排名和赚钱的地方，我认为最好使用评估方法。有许多方法，从复杂的公式（包括许多不同的启发式）到更简化的模型，旨在让您了解机会。

　　虽然我正在研究我的模型的缩减版本以赠送，但它还没有完全准备好——所以在这篇文章中，我们将使用平均简化版本。这比其他任何东西都更像是一个晴雨表，这些数据不应该用于制作商业案例，而只是为了给你一种机会感。我将使用SerpIQ的关键字竞争力评分，但您也可以使用SEOmoz的关键字难度评分或类似的东西来做到这一点。对机会进行评分需要一些简单的数学运算。

　　因此，对于此版本，我们将通过乘以竞争分数的反向折扣率（1减去竞争力指数百分比）来打折每月搜索量。对于这个例子，我将坚持我们的根短语，关键字研究，并使用其他2个密切相关的变体：

　　使用我们的快速和肮脏的评估模型（确切的每月搜索量 x （1 – CI%），我们得到：关键字研究机会得分 （4，400 x （1-.68））= 1，408 关键字研究工具机会得分 （720 x （1-.

　　65））= 252 关键字研究软件机会得分 （480 x （1-.56））= 211.2 显示（快速记住）即使关键字研究在竞争方面要困难得多， 在搜索流量定位关键字方面，它仍然是明显的赢家。这很有用，因为它考虑了与每月搜索量相关的机会，然后根据平均竞争对流量潜力进行折扣。

　　闭环

　　进行成功的关键字研究的一部分是每月留出时间来分析有效的方法，并相应地调整您的内容和链接策略。你在哪里看到SERP中最快的运动？某些术语在前 10/30/50 个位置之间的移动速度是否比其他术语快？哪些关键字最快到达第 1 页？最快进入前 5 名？问自己这些问题，请在下面的评论中与我分享您的想法——让我知道你的假设，或者更好的是你的

　　实际数据;分享你的研究，告诉我什么有效，什么无效，我很想和你聊天。