ASP.NET Core 实战：使用 NLog 将日志信息记录到 MongoDB

 一、前言

　　在项目开发中，日志系统是系统的一个重要组成模块，通过在程序中记录运行日志、错误日志，可以让我们对于系统的运行情况做到很好的掌控。同时，收集日志不仅仅可以用于诊断排查错误，由于日志同样也是大量的数据，通过对这些数据进行集中分析，可以产生极大的价值。
　　在微服务的系统架构中，由于一个系统会被拆成很多个功能模块，每个模块负责不同的功能，对于日志系统的要求也会更高，比较常见的有 eflk(elasticsearch + filebeat + logstash + kibana) 方案，而对于我们这种单体应用来说，由于程序的代码比较集中，所以我们主要采用手写日志帮助类或是使用第三方组件的形式进行日志信息的记录。

　　系列目录地址：asp.net core 项目实战
　　仓储地址：https://github.com/lanesra712/grapefruit.vucore

 二、step by step

　　1、为什么选择 nlog 和 mongodb

　　在 asp.net core 中，巨硬为我们提供了一个 ilogger 接口，通过 ilogger 接口，我们可以很方便的将日志信息输出到控制台中，不过，在控制台中查看日志信息会显得不太方便，因此，我们可以通过实现该接口或是直接使用第三方的框架来实现将日志信息记录到别的存储介质中。

　　在 .net framework 时代，对于第三方的日志框架的选择，绝大多数童鞋首选的都会是 log4net 这一根据 log4j 移植的日志框架，不过，由于 log4net 目前已经接近有3年的时间没更新了，所以就不在考虑范围内。综合比较下官方文档中推荐的几款第三方日志框架，最终还是选择 nlog 这一目前使用人数相对来说比较多的框架，毕竟用户多的话，遇到什么问题也好找资料。

　　通常，我们会将日志信息记录到 txt or log 文件中，虽然你可以通过修改日志布局让日志信息具有良好的可读性，不过在信息多的情况下查阅时还是会显得不太方便。因为不仅做到对于错误信息做到记录，还需要记录程序在运行时的访问日志，所以将日志信息写入到关系型数据库中就不是特别合适了。

　　而 mongodb 作为一个文档型的 nosql 数据库，相比于传统的关系型数据库，nosql 数据库具有更好的扩展性、以及能提供更出色的性能，因此，我最终选择将日志信息记录到 mongodb 中。当然，最主要的原因还是目前在工作中有开始尝试用 mongodb 存储用户上传的文件，在找资料的过程中看到有使用 mongodb 存储日志的案例，grapefruit.vucore 既然作为一个学习项目，所以就要多尝试尝试啊。

　　2、安装 mongodb（windows）

　　因为是第一次使用 mongodb，所以我们需要提前安装 mongodb server，我是直接安装到我的开发机上(windows 10)，所以这里只是演示如何在 windows 上进行 mongodb 的安装与配置，如何在 linux or docker 中进行安装配置，我将在后面的文章中进行演示。毕竟，这个项目的最终准备通过 docker 部署到 linux 上的，总在 windows 上玩是不合适滴。

　　首先，打开 mongodb 官网获取到我们的安装包下载地址（mongodb community download），选择 server tab 后按照我们的操作系统选择安装包下载即可。

　　双击下载好的 msi 文件，开始安装，这里我选择 complete（完整）安装，如果你想要指定安装的组件和安装的位置，你可以选择 custom（自定义安装）。

　　在 mongodb 之前的版本中，如果我们需要将 mongodb server 作为 windows 服务，需要我们在安装完成之后进行配置，但是从 mongodb 4.0 开始，我们就可以在安装期间直接配置和启动我们的 mongodb 作为 windows 服务了，当我们安装成功后就会自动启动 mongodb 服务。嗯，相信我，如果你上网搜索 windows 下的 mongodb 安装，你会发现 90% 的文章因为是针对 mongodb 之前版本的，都会在安装完成之后需要你指定日志地址、指定存储地址，配置 windows 服务啊，而如果你和我一样，安装的是 mongodb 4.0 以上的版本，这些统统都不要，是不是很超值。

　　这里勾选上 install mongod as a service，当我们安装完成后就会自动启动 mongodb 服务，同时，对于这里的配置项，我们不做任何的改动。

　　service name：创建的 windows 服务名称，如果已经存在了，则需要更换名称

　　data directory：存储数据的目录

　　log directory：存储 mongodb log 日志的目录

　　点击 next 之后，安装程序会询问你是否需要安装 mongodb compass，mongodb compass 是官方的一个可视化管理工具，毕竟总是用黑乎乎的 shell 还是不太方便的，这里看你自己的需求，决定是否安装这个工具。

　　当我们安装完成后，mongodb 的服务也就已经启动了，此时，你就可以连接上你的 mongodb server 了，这里我是使用 navicat 进行连接。对于这个服务，你同样可以在计算机管理中对这个服务进行管理。

　　在默认情况下，当我们安装好 mongodb 后是不允许远程访问以及不存在任何的用户权限的。而这些，在我们正式使用中都是需要考虑的。

　　首先，配置我们的 mongodb server 以允许用户进行远程访问。找到程序安装路径下面的 mongod.cfg 文件（如果你使用的是默认配置，则该文件位于 c:\program files\mongodb\server\4.0\bin），修改 bindip 属性值为 0.0.0.0，重启 mongodb 服务，确保 27017 端口外界可以访问后，则可以远程访问我们的 mongodb 服务。

　　当我们允许远程访问我们的 mongodb 服务后，我们更应该为 mongodb 配置权限。与我们经常使用的 sql server 或是 mysql 不同，mongodb 中的权限是针对每一个数据库的，也就是说我们需要为使用到的数据库创建用户并配置权限。

　　打开 navicat，连接安装好的 mongodb 服务。

　　第一步将默认数据库切换到 admin 数据库，创建一个管理员用户，这里我就将管理员用户的角色设置为 root 用户。

//切换到 admin 数据库
use admin

//创建一个管理员用户
db.createuser(
   {
     user: "user name",
     pwd: "user password",
     roles: [ { role: "root", db: "admin" } ]
   }
)

　　当我们创建好管理员用户后，我们就可以为数据库配置用户与权限了。右击连接名称，新建一个数据库 grapefruitvucore，切换到 grapefruitvucore 数据库后，新建一个可以读写的用户 grapefruit。用户都创建完成后，关闭我们的 mongodb 连接。

//切换到 admin 数据库
use grapefruitvucore

//创建一个管理员用户
db.createuser(
   {
     user: "grapefruit",
     pwd: "grapefruit",
     roles: [ { role: "readwrite", db: "grapefruitvucore" } ]
   }
)

　　当用户已经创建完成之后，我们就可以修改配置文件，启用权限控制。还是在 mongod.cfg 中，取消 security 节点的注释，添加授权配置，修改完成后，重启服务，此时，mongodb 就必须通过账户密码登录了。

　　当服务重启之后，如果你还是按照之前的方式连接，则会提示你权限不足，你需要修改 navicat 的连接配置。将验证方式修改成 password，输入账户、密码，并指定需要登录的数据库，重新连接即可。

　　ps：这里，我使用账户、密码登录进入 grapefruitvucore 后，右侧的连接下面是没有显示这个数据库的，但这个数据库是真实存在的，不晓得这是个啥问题。

　　mongodb 内置的用户角色权限：

　　read：允许用户读取授权的数据库

　　readwrite：允许用户读写授权的数据库

　　dbadmin：允许用户在授权的数据库中执行管理操作，如索引创建、删除，查看统计或访问system.profile

　　useradmin：允许用户向 system.users 集合写入，可以在指定数据库里创建、删除和管理用户

　　clusteradmin：只在 admin 数据库中可用，赋予用户所有分片和复制集相关函数的管理权限。

　　readanydatabase：只在 admin 数据库中可用，赋予用户所有数据库的读权限

　　readwriteanydatabase：只在 admin 数据库中可用，赋予用户所有数据库的读写权限

　　useradminanydatabase：只在 admin 数据库中可用，赋予用户所有数据库的 useradmin 权限

　　dbadminanydatabase：只在 admin 数据库中可用，赋予用户所有数据库的 dbadmin 权限。

　　root：只在admin数据库中可用。超级账号，超级权限

　　3、使用 nlog 记录日志信息

　　当我们安装配置好 mongodb 后，有了存储日志信息的介质，我们就可以使用 nlog 来记录我们的程序日志信息了。首先，我们需要为项目中添加对于 nlog 的引用，右击 grapefruit.webapi 打开管理 nuget 程序包页面或是使用程序包管理器控制台选中默认项目为 grapefruit.webapi，添加 nlog、nlog.web.aspnetcore、nlog.mongo。

install-package nlog
install-package nlog.web.aspnetcore
install-package nlog.mongo

　　nlog 和 nlog.web.aspnetcore 为 asp.net core 添加了对于 nlog 的平台支持，在 nlog 中，我们可以通过继承 nlog.targets.targetwithlayout 来为 nlog 添加更多的输出介质支持，而 nlog.mongo 就是为 nlog 添加输出日志信息到 mongodb 的支持。嗯，尝试了自己写，一直有问题，最后还是用的别人写好的，哈哈哈，水平太菜。

　　当我们添加好引用后，在 grapefruit.webapi 下添加一个 nlog 的配置文件 nlog.config（文件名全部需要小写），右键 nlog.config，打开属性窗口，将复制到输出目录修改成较新才复制或是总是复制都可以。

　　在配置文件中，nlog 节点必须是 xml 文件的根节点，同时包含三个主要的子节点：extensions、targets、rules。

　　extensions：当你不仅仅只使用 nlog 这一个基础的 dll ，并使用了一些基于 nlog 扩展的工具时，你就需要在 extensions 节点下面添加引用的程序集名称。例如，这里，我添加了 nlog.web.aspnetcore 这个程序集从而达到 nlog 对于 asp.net core 的支持，以及添加了 nlog.mongo 这个程序集用来将日志信息输出到 mongodb 中。

　　targets：targets 节点下包含了我们需要输出的日志的信息内容以及日志信息的布局，例如，这里我按照日期输出两个文件 nlog-all-date.log 和 nlog-own-date.log，分别记录所有的日志信息以及我们自定义记录的信息。因为我们是需要将日志信息写入 mongodb 中的，这里我也添加了一个子节点用来设置写入 mongodb 数据库中的数据字段。

　　rules：rules 节点是将需要记录的日志级别关联到记录日志的方式上。这里，我是将只要是 trace 以上的都进行日志记录。

<?xml version="1.0" encoding="utf-8"?>
<nlog xmlns="http://www.nlog-project.org/schemas/nlog.xsd"
      xmlns:xsi="http://www.w3.org/2001/xmlschema-instance"
      autoreload="true"
      internalloglevel="info"
      internallogfile="c:\temp\grapefruitvucore\internal-nlog.txt">

  <!-- enable asp.net core and mongodb layout renderers -->
  <extensions>
    <add assembly="nlog.web.aspnetcore"/>
    <add assembly="nlog.mongo"/>
  </extensions>

  <!--internal-nlog:nlog启动及加载config信息-->
  <!--nlog-all:所有日志记录信息-->
  <!--nlog-own:自定义日志记录信息-->

  <!-- the targets to write to -->
  <targets>
    <!-- write logs to file  -->
    <target xsi:type="file" name="allfile" filename="c:\temp\grapefruitvucore\nlog-all-${shortdate}.log"
            layout="日志记录时间：${longdate}${newline}日志级别：${uppercase:${level}}${newline}日志来源：${logger}${newline}日志信息：${message}${newline}错误信息：${exception:format=tostring}${newline}==============================================================${newline}" />

    <!-- another file log, only own logs. uses some asp.net core renderers -->
    <target xsi:type="file" name="ownfile-web" filename="c:\temp\grapefruitvucore\nlog-own-${shortdate}.log"
            layout="日志记录时间：${longdate}${newline}日志级别：${uppercase:${level}}${newline}日志来源：${logger}${newline}日志信息：${message}${newline}错误信息：${exception:format=tostring}${newline}url: ${aspnet-request-url}${newline}action: ${aspnet-mvc-action}${newline}==============================================================${newline}" />

    <!-- write log to mongodb-->
    <target xsi:type="mongo"
            name="mongo" databasename="grapefruitvucore"
            collectionname="logs"
            connectionstring="mongodb://grapefruit:grapefruit@localhost:27017/grapefruitvucore"
            cappedcollectionsize="26214400">
      <property name="longdate" layout="${longdate}" bsontype="datetime" />
      <property name="level" layout="${level}" />
      <property name="logger" layout="${logger}"/>
      <property name="message" layout="${message}" />
      <property name="exception" layout="${exception:format=tostring}" />
      <property name="url" layout="${aspnet-request-url}" />
      <property name="action" layout="${aspnet-mvc-action}" />
      <property name="username" layout="${windows-identity}" />
    </target>

  </targets>

  <!-- rules to map from logger name to target -->
  <rules>
    <!--all logs, including from microsoft-->
    <logger name="*" minlevel="trace" writeto="allfile" />

    <!--skip non-critical microsoft logs and so log only own logs-->
    <logger name="microsoft.*" maxlevel="info" final="true" />
    <!-- blackhole without writeto -->
    <logger name="*" minlevel="trace" writeto="ownfile-web" />

    <!--add logs to mongodb-->
    <logger name="*" minlevel="trace" writeto="mongo"/>
  </rules>
</nlog>    

　　当我们设置好配置文件后就可以在 program.cs 中启用 nlog 去记录日志。运行我们的项目后，就可以查看记录的日志信息了，这里我在 txt 文件中和 mongodb 中都有记录日志信息，具体看你自己的需求了。

public class program
{
    public static void main(string[] args)
    {
        //加载日志配置信息文件后去捕获所有的错误
        var logger = nlogbuilder.configurenlog("nlog.config").getcurrentclasslogger();
        try
        {
            logger.info("init log api information");
            createwebhostbuilder(args).build().run();
        }
        catch (exception ex)
        {
            logger.error(ex, "stop log information because of exception");
        }
        finally
        {
            logmanager.shutdown();
        }
    }

    public static iwebhostbuilder createwebhostbuilder(string[] args) =>
        webhost.createdefaultbuilder(args)
            .usestartup<startup>()
            .configurelogging(logging =>
            {
                logging.clearproviders();//移除其它已经注册的日志处理程序
                logging.setminimumlevel(microsoft.extensions.logging.loglevel.trace);//记录最小日志级别
            })
            .usenlog();//注入 nlog 服务
}

　　另外，在 appsettings.json 中指定的 logging 配置会覆盖任何对于 setminimumlevel 方法的调用。因此，你可以删除配置文件中的 default 属性，或是根据你自己的需要进行调整。

{
    "logging": {
        "loglevel": {
            "default": "trace",
            "microsoft": "information"
        }
    }
}

 三、总结

 　　本章主要是演示如何在 windows 上安装 mongodb server 以及在 asp.net core 项目中使用 nlog 将日志信息记录到 mongodb 中。在我们使用这些这些第三方开源框架时，可能会遇到很多问题，当你无法解决的时候，项目的 issue 是个好地方，多搜搜，很大可能你就会得到解决方案。