博客视频音乐美图软件
技术思绪摘录旅行笔记
五、.NET5 WebApi 日志利用Logstash收集到Elasticsearch中 原创声明
利用Logstash收集到Elasticsearch中，好处就是对代码没有侵入性，我的代码中，无需关心ELK的逻辑，也不关心日志的处理方式，我只产生日志即可

一、ELK日志归集之Elasticsearch安装（CentOS 7.5）

二、ELK日志归集之LogStash安装（CentOS 7.5）

三、ELK日志归集之Kibana安装（CentOS 7.5）

四、.NET5 WebApi 直接输出到Elasticsearch

五、.NET5 WebApi 日志利用Logstash收集到Elasticsearch中


1、创建.NET5 WebApi项目

2、配置日志文件输出目录，假设输出到/opt/logs/

image.png

3、创建一个配置文件

>cd /opt/apps/logstash-7.14.0/config/
>vim netcore.conf

填写以下内容：

input {
	file{
		path => "/opt/logs/*.txt"
		codec => json
		start_position => "beginning"
		type => "yb-log"
	}
}

output {
	if [type] == "yb-log" { 
        elasticsearch {
            hosts => ["http://10.3.1.171:9200"]
            index => "yb-log-%{+YYYY.MM.dd}"
        }
    }
	
	stdout{
		codec => rubydebug
	}
}

保存退出

4、再次启动Logstash服务

>./logstash -f ../config/netcore.conf

会看到正在疯狂的把我们的日志文件处理并读取到es中

image.png

5、进入Kibana中查看，可以看到索引管理已经看到我们的日志前缀了

image.png6、新建索引模式，discover中查看

image.png

7、这样找日志快得多，对代码还没有侵入性。

以上主要是演示logstash从指定文件夹中归集日志，其他的项目是一样的操作。


CarsonIT 微信扫码关注公众号 策略、创意、技术

上一篇 下一篇

留下您的脚步

 

最近评论

查看更多>>

.NET MYSQL ELECTRON 算法 LINUX C# HTML EF CODEFIRST JAVASCRIPT WEBAPI 二维码 .NET6 ORM ELK ELASTICSEARCH 日志归集 工具 SQLSERVER LOGSTASH .NET5 JENKINS 持续集成 自动化部署 CENTOS EFCORE MONGODB HTTPS CANVAS KIBANA

站点统计

总文章数：275 总分类数：18 总评论数：88 总浏览数：128.37万

精选推荐

阅读排行

获取一个企业的基本信息

获取一个企业的基本信息

天眼查是一款 “都能用的商业安全工具”，实现了企业信息、企业发展、司法风险、经营风险、经营状况、知识产权等40种数据维度查询（企业工商信息、法律诉讼、法院公告、商标专利、向外投资、分支机构、变更信息、债券、网站备案、著作权、招投标、失信、经营异常、企业年报、招聘及新闻动态等），深度商业“关系梳理”，专业信用报告呈现等功能。适合金融、投资、律师、咨询、记者、商务等人士。
首次发布网站IIS注册

首次发布网站IIS注册

首次发布网站IIS注册，IIS必须注册才可以使用，否则会出现找不到文件的错误提示，本文主要记录了注册的命令
给你的二维码加个图标吧-213kb

给你的二维码加个图标吧-213kb

平时需要将自己的博客或者文章分享出去，就生成二维码，需要有点逼格，得加个logo，但是每次都去找在线网站生成，又很麻烦，于是乎
Visual Studio生成注释的插件GhostDoc，支持2022

Visual Studio生成注释的插件GhostDoc，支持2022

GhostDoc为Visual Studio中的C#代码编辑器安装了一个新的命令。在编辑源文件时，只需将光标置于要添加文档的方法或属性内部，然后通过热键（默认为Ctrl+Shift+D）或右键菜单中的Document this菜单项调用命令，GhostDoc就会插入一段XML格式的注释。你也许会想到在方法或属性前面键入"///"时的类似效果，但是后者只能创建一段空的注释构造，而GhostDoc则能够生成大部分实用的注释。
C#Windows10任务栏开发Thumbnail Toolbars（缩略图、工具栏按钮）

C#Windows10任务栏开发Thumbnail Toolbars（缩略图、工具栏按钮）

Win10任务栏有缩略图功能，也有操作功能，体验度很高，那么我们要让我们的程序带上任务栏按钮，不用打开主界面就能直接操作，这篇文章就记录一下Winform如何实现？
百度论语

百度论语

百度（纳斯达克：BIDU），全球最大的中文搜索引擎、最大的中文网站。1999年底,身在美国硅谷的李彦宏看到了中国互联网及中文搜索引擎服务的巨大发展潜力，抱着技术改变世界的梦想，他毅然辞掉硅谷的高薪工作，携搜索引擎专利技术，于 2000年1月1日在中关村创建了百度公司。百度的使命：用科技让复杂的世界更简单；百度的核心价值观：简单可依赖；
三、Microsoft.EntityFrameworkCore之一对多关系

三、Microsoft.EntityFrameworkCore之一对多关系

在日常开发中，经常用到CodeFirst模式进行开发，那么我们需要了解基本的EFCore的使用和其原理，本次系列包括EFCore的迁移、关系描述，主要是以我个人经验向大家讲解，希望学习EFCore的同学们，能一看就知道关系描述应该怎么配置。
你不懂我，我不怪你

你不懂我，我不怪你

每个人都有一个死角，自己走不出来，别人也闯不进去。我把最深沉的秘密放在那里。你不懂我，我不怪你。
C#创建windows本地服务

C#创建windows本地服务

C#创建windows本地服务，学习一下如何让系统服务帮你处理长期需要处理的事情，怎么创建服务项目，怎么安装和卸载。
Navicat 15.0.18 数据库开发工具

Navicat 15.0.18 数据库开发工具

Navicat Premium 是一套数据库开发工具，让你从单一应用程序中同时连接 MySQL、MariaDB、MongoDB、SQL Server、Oracle、PostgreSQL 和 SQLite 数据库。它与 Amazon RDS、Amazon Aurora、Amazon Redshift、Microsoft Azure、Oracle Cloud、MongoDB Atlas、阿里云、腾讯云和华为云等云数据库兼容。你可以快速轻松地创建、管理和维护数据库。
GDI+将图片以圆形画到背景上

GDI+将图片以圆形画到背景上

我遇到多次需要将图片以圆形的方式画到背景图上，比如头像、图标等，本文就记录了完整的解决方案。
Apple Ipad Pro宣传片

Apple Ipad Pro宣传片

Apple Ipad Pro宣传片，主要听标准的英文，我一句没听懂
Hangfire任务调度从入门到实践

Hangfire任务调度从入门到实践

Hangfire是一个任务调度的组件，自带面板，可以操作正在运作的任务，可以看到执行情况，而且使用起来简单，Hangfire不受特定.NET应用程序类型的限制，只要是.NET Framework 4.5以上，Newtonsoft.Json library ≥ 5.0.1，有一个mysql或者mssql数据库即可。而且最新的支持.NET Core,这篇文章主要记录一下如何在.NET Core 3.1中用mysql来帮助Hangfire实现持久化。
真正重要的是顺势而为

真正重要的是顺势而为

雷军说：“我至少悟透了成功的关键，聪明的人、勤奋的人；这世界上多的去了，这是成功的前置条件，有这些不保证你成功；真正重要的是顺势而为。”，看了这个视频，我想说：愿我今后有一天，眼中有故事，脸上无沧桑，归来仍是少年。
我猜到了会装逼，没想到这么自然

我猜到了会装逼，没想到这么自然

创意无限啊，我是一条广告，我猜到了肯定会装逼，没想到这么自然，大家笑一笑即可
百度编辑器抓取图片引发的思考和解决方案

百度编辑器抓取图片引发的思考和解决方案

百度编辑器用的很多，其中比较让人头疼的就是图片问题，基本使用没有任何问题，而且功能强大，接口比较完善；就是整个编辑器有点重，调用接口给编辑器赋值的话，内容里面的图片有时候是不会抓取的，这个有点烦。
.NET C# 检查网络文件是否存在

.NET C# 检查网络文件是否存在

检查本地文件就不说了，每个语言都有，这篇文章记录下，如何用C#语言判断远程文件是否存在。
支付密码输入自定义键盘

支付密码输入自定义键盘

自定义键盘的应用场景很多，也很多地方都能看到，目的是为了让输入更准确更安全，不再需要额外的去判断其他字符，好处还是有很多，自定义键盘还要阻止手机默认键盘的弹出。
Canvas制作非常简洁大气的图案

Canvas制作非常简洁大气的图案

借鉴VUE作者的博客首页，收藏一下这个效果，代码简洁，但是效果震撼。
身份证号码格式验证

身份证号码格式验证

身份证号码的验证，在多出领域都会遇到，以下将给出web端js验证的代码，其中可以验证是否符合格式，并且能返回性别和出生年月日信息，方便更多使用场景。
疫情数据关注工具-支持全平台版本(12月15停止更新，一个时代的结束)

疫情数据关注工具-支持全平台版本(12月15停止更新，一个时代的结束)

疫情形式严峻，我十分关心每天的疫情动态，但是我发现无论是百度的疫情动态，还是腾讯的动态，数据都不完整，而且腾讯的风险地区更新不及时，导致经常看到错误数据。
.NET WebApi配置Swagger详细教程

.NET WebApi配置Swagger详细教程

Swagger可以根据xml文件生成api接口文档，前后端节约沟通时间，减少对接成本，是一个非常好的解决方案；本文主要记录一下，Vs2019从0开始，搭建一个WebApi最终利用Swagger看到相关接口，并解决Swagger汉化的问题，解决Swagger在.net Webapi中控制器名称标注问题。
《灵笼》白月魁 壁纸

《灵笼》白月魁 壁纸

国漫《灵笼》特别篇播出，作为第一季的大结局剧情，灵笼在最后一话的特别篇中终于把地面神秘人物白月魁的身份信息给揭露了出来，原来之前马克队长猜得没有错，当时在下到地面采集物资的时候，看到的女子其实就是白月魁小队，她们是生活在地面的人类，但是从本质而言，似乎已经和人类有所区别。
Hangfire任务调度从入门到实践

Hangfire任务调度从入门到实践

Hangfire是一个任务调度的组件，自带面板，可以操作正在运作的任务，可以看到执行情况，而且使用起来简单，Hangfire不受特定.NET应用程序类型的限制，只要是.NET Framework 4.5以上，Newtonsoft.Json library ≥ 5.0.1，有一个mysql或者mssql数据库即可。而且最新的支持.NET Core,这篇文章主要记录一下如何在.NET Core 3.1中用mysql来帮助Hangfire实现持久化。
EFcore+MySql 数据迁移的时候，怎么给表结构加注释？

EFcore+MySql 数据迁移的时候，怎么给表结构加注释？

Microsoft.EntityFrameworkCore是一个非常不错的设计，当一套系统里面出现太多的SQL，其实已经不合理了，所以EF让开发者不再接触SQL，而是直接以对象形式操作数据库，EF来负责Sql代码生成和执行，通常在开发中，有根据数据表结构来生成实体的，也有根据实体生成数据库的，就是所谓的DbFirst和CodeFirst，这篇文章主要说一下CodeFirst的应用，用的是MySql数据库。
可能是最简单的控制台输出二维码

可能是最简单的控制台输出二维码

二维码使用场景很广泛，最近遇到需要在控制台输出二维码，但是其中遇到一些问题，导致代码正常，但是显示确不正常，本文给出的代码已经完全解决了这些问题，而且非常简洁。
.NET5 WebApi 实现JWT及其验证实战

.NET5 WebApi 实现JWT及其验证实战

Json web token (JWT), 是为了在网络应用环境间传递声明而执行的一种基于JSON的开放标准（(RFC 7519).该token被设计为紧凑且安全的，特别适用于分布式站点的单点登录（SSO）场景。JWT的声明一般被用来在身份提供者和服务提供者间传递被认证的用户身份信息，以便于从资源服务器获取资源，也可以增加一些额外的其它业务逻辑所必须的声明信息，该token也可直接被用于认证，也可被加密。本文只是举个例子，可以这么整，如果要用于生产环境，可能得再封装一下，注释都加的齐全，没用过的可以看看。
Resharper 2021.3.2-VS2022可用的扩展插件

Resharper 2021.3.2-VS2022可用的扩展插件

ReSharper是一个JetBrains公司出品的著名的代码生成工具。其能帮助Microsoft Visual Studio成为一个更佳的IDE，它包括一系列丰富的能大大增加C#和Visual Basic .net开发者生产力的特征。使用ReSharper，你可以进行深度代码分析，智能代码协助，实时错误代码高亮显示，解决方案范围内代码分析，快速代码更正，一步完成代码格式化和清理，业界领先的自动代码重构，高级的集成单元测试方案，和强大的解决方案内导航和搜索。实质上，ReSharper特征可用于C#，VB.NET，XML，ASP.NET，XAML，和构建脚本。ReSharper还为C#和VB.NET提供了增强的交叉语言功能，它使开发者可以有效的控制.net混合项目。
阿里云对象存储OSS使用STS临时授权给Browser.js

阿里云对象存储OSS使用STS临时授权给Browser.js

阿里云对象存储OSS（Object Storage Service）是阿里云提供的海量、安全、低成本、高可靠的云存储服务。其数据设计持久性不低于99.9999999999%（12个9），服务可用性（或业务连续性）不低于99.995%。OSS具有与平台无关的RESTful API接口，您可以在任何应用、任何时间、任何地点存储和访问任意类型的数据。如果你的应用场景仅仅是网站上传个图片、视频这些，那么阿里云OSS和七牛云的作用是一样的。
C# 对比两个实体类指定字段是否被修改并得出修改记录

C# 对比两个实体类指定字段是否被修改并得出修改记录

需求来源：一条数据被编辑之后，日志要记录下改动了什么项，从什么改成什么了，还得可以指定某些字段，比如用户表，只要改了用户名，就记录一下日志，业务可以根据是否有修改来发送通知啊或者启用禁用啊这些操作。
利用PinYinConverter实现汉字转拼音，支持多音字

利用PinYinConverter实现汉字转拼音，支持多音字

汉字转拼音的需求不多，但是遇到了再去写，稍显麻烦，索性写一个辅助类放着，这里利用了Microsoft.International.Converters.PinYinConverter类库，多音字则以多种组合的方式返回给开发者。
倩女幽魂套图

倩女幽魂套图

倩女幽魂套图，收藏了，这个工作室画的很好，惊艳，美观
可能是最简单的手机号码生成算法

可能是最简单的手机号码生成算法

如果用算法来生成手机号，需要怎么做呢？实际场景中经常会用到手机号，那么手机号有那些，知道了规则，那么生成就知道如何下手了，这篇文章就介绍了如何生成手机号码。
MongoDb 4.2.7 配置复制（副本集replSet）实现主从同步（Windows）

MongoDb 4.2.7 配置复制（副本集replSet）实现主从同步（Windows）

MongoDB在4.0之后，增加了事务，说明Mongodb生态越来越丰富，将来肯定可以满足更多的应用场景，在用了事务之后，操作数据的时候报错，提示实例需要是副本集，这篇文章就说一下，什么是副本集，能干啥？
Postman的一个小技巧 Pre-request Script的使用

Postman的一个小技巧 Pre-request Script的使用

Postman一款非常流行的API调试工具。其实，开发人员用的更多。因为测试人员做接口测试会有更多选择，例如Jmeter、soapUI等。不过，对于开发过程中去调试接口，Postman确实足够的简单方便，而且功能强大。
NPOI导出Excel，包含一个或者多个sheet表

NPOI导出Excel，包含一个或者多个sheet表

NPOI是指构建在POI 3.x版本之上的一个程序，NPOI可以在没有安装Office的情况下对Word或Excel文档进行读写操作。NPOI是一个开源的C#读写Excel、WORD等微软OLE2组件文档的项目。他导出的文件和你电脑右键创建的office文件一样原生，不会提示格式不符，重要的是不依赖office组件。
5年后，我们为什么要从 Entity Framework 转到 Dapper 工具？

5年后，我们为什么要从 Entity Framework 转到 Dapper 工具？

向来有争议的话题都是公说公的理，婆说婆的理，Entity Framework的爱好者对此可以说是嗤之以鼻，不屑一顾，而Dapper爱好者则是举双手赞成，阅之大快人心。每个人不同的阅历，社会经验，甚至对简繁的偏见都会影响对此事的看法，凡事都有优劣，取其精华而弃之糟泊，方为上策。这篇文章则将目光聚焦到Dapper。
红包算法的一种

红包算法的一种

很多场景算红包的要求：根本问题就是指定的钱，指定的个数，红包发完，钱不剩余，最小红包1分钱，最大也需要限制。
百度网盘简易下载助手 网速拉满小插件

百度网盘简易下载助手 网速拉满小插件

这个插件可以实现百度网盘全速的下载，缺点是每次只能下载一个文件，非常好用
将文件流上传阿里云OSS，大小为啥是0kb？还报错..

将文件流上传阿里云OSS，大小为啥是0kb？还报错..

最近用.NET Core生成海报图，然后上传到阿里云OSS的时候，发现传上去之后，阿里云大小显示0，无法查看。真是GDI+一顿操作猛如虎。

友情打赏

请打开您的微信,扫一扫

开源中国 CSDN社区 技术博客 microsoft .net 博客园

© 1994-2024 yangshaofeng. All Rights Reserved.
蜀ICP备16016433号-1
川公网安备 51010702003150号