// // LogServiceClientExtensions.cs // // Author: // MiNG // // Copyright (c) 2018 Alibaba Cloud // // Permission is hereby granted, free of charge, to any person obtaining a copy // of this software and associated documentation files (the "Software"), to deal // in the Software without restriction, including without limitation the rights // to use, copy, modify, merge, publish, distribute, sublicense, and/or sell // copies of the Software, and to permit persons to whom the Software is // furnished to do so, subject to the following conditions: // // The above copyright notice and this permission notice shall be included in // all copies or substantial portions of the Software. // // THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR // IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY, // FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE // AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER // LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM, // OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN // THE SOFTWARE. using System; using System.Collections.Generic; using System.Threading.Tasks; using Aliyun.Api.LogService.Domain.Config; using Aliyun.Api.LogService.Domain.Log; using Aliyun.Api.LogService.Domain.LogStore; using Aliyun.Api.LogService.Domain.LogStore.Index; using Aliyun.Api.LogService.Domain.LogStore.Shard; using Aliyun.Api.LogService.Domain.LogStore.Shipper; using Aliyun.Api.LogService.Domain.MachineGroup; using Aliyun.Api.LogService.Domain.Project; using Aliyun.Api.LogService.Infrastructure.Protocol; using Aliyun.Api.LogService.Utils; namespace Aliyun.Api.LogService { public static class LogServiceClientExtensions { #region LogStore /// /// 在 Project 下创建 Logstore。 /// /// client实例。 /// Logstore 的名称,在 Project 下必须唯一。 /// 数据的保存时间,单位为天,范围1~365(额外需求请提交工单)。 /// 该 Logstore 的 Shard 数量,单位为个,范围为 1~10。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task CreateLogStoreAsync(this ILogServiceClient client, String logstoreName, Int32 ttl, Int32 shardCount, String project = null) => client.CreateLogStoreAsync(new CreateLogStoreRequest(logstoreName, ttl, shardCount) { ProjectName = project }); /// /// 删除 Logstore,包括所有 Shard 数据,以及索引等。 /// /// client实例。 /// Logstore 的名称,在 Project 下必须唯一。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task DeleteLogStoreAsync(this ILogServiceClient client, String logstoreName, String project = null) => client.DeleteLogStoreAsync(new DeleteLogStoreRequest(logstoreName) { ProjectName = project }); /// /// 更新 Logstore 的属性。目前只支持更新 TTL和shard 属性。 /// /// client实例。 /// Logstore 的名称,在 Project 下必须唯一。 /// 数据的保存时间,单位为天,范围1~365(额外需求请提交工单)。 /// 该 Logstore 的 Shard 数量,单位为个,范围为 1~10。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task UpdateLogStoreAsync(this ILogServiceClient client, String logstoreName, Int32 ttl, Int32 shardCount, String project = null) => client.UpdateLogStoreAsync(new UpdateLogStoreRequest(logstoreName, ttl, shardCount) { ProjectName = project }); /// /// 查看 Logstore 属性。 /// /// client实例。 /// Logstore 的名称,在 Project 下必须唯一。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetLogStoreAsync(this ILogServiceClient client, String logstoreName, String project = null) => client.GetLogStoreAsync(new GetLogStoreRequest(logstoreName) { ProjectName = project }); /// /// 接口列出指定 Project 下的所有 Logstore 的名称。 /// /// client实例。 /// 用于请求的 Logstore 名称(支持部分匹配)。 /// 返回记录的起始位置,默认值为 1。 /// 每页返回最大条目,默认 500(最大值)。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> ListLogStoreAsync(this ILogServiceClient client, String logstoreName = null, Int32 offset = ListLogStoreRequest.DefaultOffset, Int32 size = ListLogStoreRequest.DefaultSize, String project = null) => client.ListLogStoreAsync(new ListLogStoreRequest { LogstoreName = logstoreName, Offset = offset, Size = size, ProjectName = project }); #region Shard /// /// 列出 Logstore 下当前所有可用 Shard。 /// /// client实例。 /// 日志库名称 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task>> ListShardsAsync(this ILogServiceClient client, String logstoreName, String project = null) => client.ListShardsAsync(new ListShardRequest(logstoreName) { ProjectName = project }); /// /// 分裂一个指定的 readwrite 状态的 Shard。 /// /// client实例。 /// 日志库名称 /// Shard ID /// split 切分位置 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task>> SplitShardAsync(this ILogServiceClient client, String logstoreName, Int32 shardId, String splitKey, String project = null) => client.SplitShardAsync(new SplitShardRequest(logstoreName, shardId, splitKey) { ProjectName = project }); /// /// 合并两个相邻的 readwrite 状态的 Shards。在参数中指定一个 shardid,服务端自动找相邻的下一个 Shard。 /// /// client实例。 /// 日志库名称 /// Shard ID /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task>> MergeShardsAsync(this ILogServiceClient client, String logstoreName, Int32 shardId, String project = null) => client.MergeShardsAsync(new MergeShardRequest(logstoreName, shardId) { ProjectName = project }); /// /// 根据时间获得游标(cursor)。 /// /// client实例。 /// 日志库名称 /// Shard ID /// 时间点(UNIX下秒数),或 begin,end /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetCursorAsync(this ILogServiceClient client, String logstoreName, Int32 shardId, String from, String project = null) => client.GetCursorAsync(new GetCursorRequest(logstoreName, shardId, from) { ProjectName = project }); #endregion Shard #region Shipper /// /// 查询日志投递任务状态。 /// /// client实例。 /// 日志库名称,同一 Project 下唯一。 /// 日志投递规则名称,同一 Logstore 下唯一。 /// 日志投递任务创建时间区间。 /// 日志投递任务创建时间区间。 /// 默认为空,表示返回所有状态的任务,目前支持 success/fail/running 等状态。 /// 返回指定时间区间内投递任务的起始数目,默认值为 0。 /// 返回指定时间区间内投递任务的数目,默认值为 100,最大为 500。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetShipperStatusAsync(this ILogServiceClient client, String logstoreName, String shipperName, DateTimeOffset from, DateTimeOffset to, String status = null, Int32 offset = GetShipperRequest.DefaultOffset, Int32 size = GetShipperRequest.DefaultSize, String project = null) => client.GetShipperStatusAsync(new GetShipperRequest(logstoreName, shipperName, (Int32)from.ToUnixTimeSeconds(), (Int32) to.ToUnixTimeSeconds()) { Status = status, Offset = offset, Size = size, ProjectName = project }); /// /// 重新执行失败的日志投递任务。 /// /// client实例。 /// 日志库名称,同一 Project 下唯一。 /// 日志投递规则名称,同一 Logstore 下唯一。 /// 需要重试的任务ID。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task RetryShipperTaskAsync(this ILogServiceClient client, String logstoreName, String shipperName, IEnumerable taskIds, String project = null) => client.RetryShipperTaskAsync(new RetryShipperRequest(logstoreName, shipperName, taskIds) { ProjectName = project }); /// /// 重新执行失败的日志投递任务。 /// /// client实例。 /// 日志库名称,同一 Project 下唯一。 /// 日志投递规则名称,同一 Logstore 下唯一。 /// 需要重试的任务ID。 /// 异步响应结果。 /// /// /// 由于此方法存在变长参数,不支持使用可选参数覆盖 project,需要覆盖 project参数请使用 /// 版本。 /// public static Task RetryShipperTaskAsync(this ILogServiceClient client, String logstoreName, String shipperName, params String[] taskIds) => client.RetryShipperTaskAsync(new RetryShipperRequest(logstoreName, shipperName, taskIds)); #endregion Shipper #region Index /// /// 开启日志库索引。 /// /// client实例。 /// Logstore 的名称,在 Project 下必须唯一。 /// 全文索引,对于日志中value的索引属性,全文索引和字段查询必须至少配置一类。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// /// 为空 public static Task CreateIndexAsync(this ILogServiceClient client, String logstoreName, IndexLineInfo line, String project = null) { Ensure.NotNull(line, nameof(line)); return client.CreateIndexAsync(new CreateIndexRequest(logstoreName, line) { ProjectName = project }); } /// /// 开启日志库索引。 /// /// client实例。 /// Logstore 的名称,在 Project 下必须唯一。 /// 字段查询,对于具体字段的value索引属性,全文索引和字段查询必须至少配置一类。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// /// 为空 public static Task CreateIndexAsync(this ILogServiceClient client, String logstoreName, IDictionary keys, String project = null) { Ensure.NotEmpty(keys, nameof(keys)); return client.CreateIndexAsync(new CreateIndexRequest(logstoreName, keys) { ProjectName = project }); } /// /// 开启日志库索引。 /// /// client实例。 /// Logstore 的名称,在 Project 下必须唯一。 /// 全文索引,对于日志中value的索引属性,全文索引和字段查询必须至少配置一类。 /// 字段查询,对于具体字段的value索引属性,全文索引和字段查询必须至少配置一类。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// /// 同时为空 public static Task CreateIndexAsync(this ILogServiceClient client, String logstoreName, IndexLineInfo line, IDictionary keys, String project = null) { if (line == null && keys.IsEmpty()) { throw new ArgumentException("line and keys cannot be both empty."); } return client.CreateIndexAsync(new CreateIndexRequest(logstoreName, line, keys) { ProjectName = project }); } /// /// 开启日志库索引。 /// /// client实例。 /// Logstore 的名称,在 Project 下必须唯一。 /// 字段查询构建器。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// /// 为空或没有任何keys被构建 public static Task CreateIndexAsync(this ILogServiceClient client, String logstoreName, Action keysBuilder, String project = null) { IDictionary keys; if (keysBuilder != null) { var builder = new IndexKeysBuilder(); keysBuilder(builder); keys = builder.Build(); } else { keys = null; } return client.CreateIndexAsync(logstoreName, keys, project); } /// /// 开启日志库索引。 /// /// client实例。 /// Logstore 的名称,在 Project 下必须唯一。 /// 全文索引,对于日志中value的索引属性,全文索引和字段查询必须至少配置一类。 /// 字段查询构建器。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// /// 同时为空 public static Task CreateIndexAsync(this ILogServiceClient client, String logstoreName, IndexLineInfo line, Action keysBuilder, String project = null) { IDictionary keys; if (keysBuilder != null) { var builder = new IndexKeysBuilder(); keysBuilder(builder); keys = builder.Build(); } else { keys = null; } return client.CreateIndexAsync(logstoreName, line, keys, project); } #endregion Index #endregion LogStore #region Log /// /// 向指定的 LogStore 写入日志数据。目前仅支持写入 PB 格式的 日志数据。写入时有两种模式: /// /// /// 负载均衡模式(LoadBalance): 自动根据 Logstore 下所有可写的 shard 进行负载均衡写入。该方法对写入可用性较高(SLA: 99.95%),适合写入与消费数据与 shard 无关的场景,例如不保序。 /// /// /// 根据 Key 路由 shard 模式(KeyHash):写入时需要传递一个 Key,服务端自动根据 Key 选择当前符合该 Key 区间的 Shard 写入。例如,可以将某个生产者(例如 instance)根据名称 Hash 到固定 Shard 上,这样就能保证写入与消费在该 Shard 上是严格有序的(在 Merge/Split 过程中能够严格保证对于 Key 在一个时间点只会出现在一个 Shard 上,参见 shard 数据模型)。 /// /// /// /// client实例。 /// 日志库名称。 /// 一组日志。 /// (可选)标记日志应该路由到哪个 shard 的标记。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task PostLogStoreLogsAsync(this ILogServiceClient client, String logstoreName, LogGroupInfo logGroup, String hashKey = null, String project = null) => client.PostLogStoreLogsAsync(new PostLogsRequest(logstoreName, logGroup) { HashKey = hashKey, ProjectName = project }); /// /// 根据游标、数量获得日志。获得日志时必须指定 shard。 /// 如果在 storm 等情况下可以通过 LoghubClientLib 进行选举与协同消费。 /// 目前仅支持读取 PB 格式 LogGroupList 数据。 /// /// client实例。 /// 日志库名称 /// Shard ID /// 游标,用以表示从什么位置开始读取数据,相当于起点。 /// 返回的 loggroup 数目,范围为 0~1000。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> PullLogsAsync(this ILogServiceClient client, String logstoreName, Int32 shardId, String cursor, Int32 count, String project = null) => client.PullLogsAsync(new PullLogsRequest(logstoreName, shardId, cursor, count) { ProjectName = project }); /// /// GetLogs 接口查询指定 Project 下某个 Logstore 中的日志数据。还可以通过指定相关参数仅查询符合指定条件的日志数据。 /// 当日志写入到 Logstore 中,日志服务的查询接口(GetHistograms 和 GetLogs)能够查到该日志的延时因写入日志类型不同而异。日志服务按日志时间戳把日志分为如下两类: /// /// 实时数据:日志中时间点为服务器当前时间点 (-180秒,900秒]。例如,日志时间为 UTC 2014-09-25 12:03:00,服务器收到时为 UTC 2014-09-25 12:05:00,则该日志被作为实时数据处理,一般出现在正常场景下。 /// 历史数据:日志中时间点为服务器当前时间点 [-7 x 86400秒, -180秒)。例如,日志时间为 UTC 2014-09-25 12:00:00,服务器收到时为 UTC 2014-09-25 12:05:00,则该日志被作为历史数据处理,一般出现在补数据场景下。 /// /// /// 其中,实时数据写入至可查询的最大延时为3秒(99.9%情况下1秒内即可查询)。 /// /// client实例。 /// 需要查询日志的 Logstore 名称。 /// 查询开始时间点(精度为秒,从 1970-1-1 00:00:00 UTC 计算起的秒数)。 /// 查询结束时间点(精度为秒,从 1970-1-1 00:00:00 UTC 计算起的秒数)。 /// 查询日志主题。 /// 查询表达式。关于查询表达式的详细语法,请参考 查询语法。 /// 请求返回的最大日志条数。取值范围为 0~100,默认值为 100。 /// 请求返回日志的起始点。取值范围为 0 或正整数,默认值为 0。 /// 是否按日志时间戳逆序返回日志。true 表示逆序,false 表示顺序,默认值为 false。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetLogsAsync(this ILogServiceClient client, String logstorename, DateTimeOffset from, DateTimeOffset to, String topic = null, String query = null, Int32 line = GetLogsRequest.DefaultLine, Int32 offset = GetLogsRequest.DefaultOffset, Boolean reverse = GetLogsRequest.DefaultReverse, String project = null) => client.GetLogsAsync(new GetLogsRequest(logstorename, (Int32)from.ToUnixTimeSeconds(), (Int32) to.ToUnixTimeSeconds()) { Topic = topic, Query = query, Line = line, Offset = offset, Reverse = reverse, ProjectName = project }); /// /// 统计Project下所有日志。 /// /// 该接口的query是一个标准的SQL查询语句。 /// 查询的Project,在请求的域名中指定。 /// 查询的logstore,在查询语句的from条件中指定。logstore相当于SQL中的表。 /// 在查询的SQL条件中,必须指定要查询的时间范围,时间范围由__date__(timestamp类型)来指定,或__time__(int 类型,单位是unix_time)来指定。 /// 如上所述,该接口一次调用必须要在限定时间内返回结果,每次查询只能扫描指定条数的日志量。如果一次请求需要处理的数据量非常大的时候,该请求会返回不完整的结果(并在返回结果中的 x-log-progress 成员标示是否完整)。如此同时,服务端会缓存 15 分钟内的查询结果。当查询请求的结果有部分被缓存命中,则服务端会在这次请求中继续扫描未被缓存命中的日志数据。为了减少您合并多次查询结果的工作量,服务端会把缓存命中的查询结果与本次查询新命中的结果合并返回给您。因此,日志服务可以让您通过以相同参数反复调用该接口来获取最终完整结果。因为您的查询涉及的日志数据量变化非常大,日志服务 API 无法预测需要调用多少次该接口而获取完整结果。所以需要用户通过检查每次请求的返回结果中的x-log-progress成员状态值来确定是否需要继续。需要注意的是,每次重复调用该接口都会重新消耗相同数量的查询 CU。 /// /// /// client实例。 /// 查询sql条件。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetProjectLogsAsync(this ILogServiceClient client, String query, String project = null) => client.GetProjectLogsAsync(new GetProjectLogsRequest(query) { ProjectName = project }); /// /// GetHistograms 接口查询指定的 Project 下某个 Logstore 中日志的分布情况。还可以通过指定相关参数仅查询符合指定条件的日志分布情况。 /// 当日志写入到 logstore 中,日志服务的查询接口(GetHistograms 和 GetLogs)能够查到该日志的延时因写入日志类型不同而异。日志服务按日志时间戳把日志分为如下两类: /// /// 实时数据:日志中时间点为服务器当前时间点 (-180秒,900秒]。例如,日志时间为 UTC 2014-09-25 12:03:00,服务器收到时为 UTC 2014-09-25 12:05:00,则该日志被作为实时数据处理,一般出现在正常场景下。 /// 历史数据:日志中时间点为服务器当前时间点 [-7 x 86400秒, -180秒)。例如,日志时间为 UTC 2014-09-25 12:00:00,服务器收到时为 UTC 2014-09-25 12:05:00,则该日志被作为历史数据处理,一般出现在补数据场景下。 /// /// /// 其中,实时数据写入至可查询的延时为3秒。 /// /// client实例。 /// 需要查询日志的 Logstore 名称。 /// 查询开始时间点(精度为秒,从 1970-1-1 00:00:00 UTC 计算起的秒数)。 /// 查询结束时间点(精度为秒,从 1970-1-1 00:00:00 UTC 计算起的秒数)。 /// 查询日志主题。 /// 查询表达式。关于查询表达式的详细语法,请参考 查询语法。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetHistogramsAsync(this ILogServiceClient client, String logstorename, DateTimeOffset from, DateTimeOffset to, String topic = null, String query = null, String project = null) => client.GetHistogramsAsync(new GetLogHistogramsRequest(logstorename, (Int32)from.ToUnixTimeSeconds(), (Int32) to.ToUnixTimeSeconds()) { Topic = topic, Query = query, ProjectName = project }); #endregion Log #region MachineGroup /// /// 根据需求创建一组机器,用以日志收集下发配置。 /// /// client实例。 /// 机器分组名称。 /// 机器标识类型,分为 ip 和 userdefined 两种。 /// 具体的机器标识,可以是 IP 或 userdefined-id。 /// 机器分组类型,默认为空。 /// 机器分组的 topic,默认为空。 /// 机器分组所依赖的外部管理标识,默认为空。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task CreateMachineGroupAsync(this ILogServiceClient client, String groupName, String machineIdentifyType, IEnumerable machineList, String groupType = null, String groupTopic = null, String externalName = null, String project = null) => client.CreateMachineGroupAsync(new CreateMachineGroupRequest(groupName, machineIdentifyType, machineList) { GroupType = groupType, GroupAttribute = groupTopic == null && externalName == null ? null : new MachineGroupAttributeInfo { GroupTopic = groupTopic, ExternalName = externalName }, ProjectName = project }); /// /// 删除机器组,如果机器组上有配置,则 Logtail 上对应的配置也会被删除。 /// /// client实例。 /// 机器分组名称。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task DeleteMachineGroupAsync(this ILogServiceClient client, String groupName, String project = null) => client.DeleteMachineGroupAsync(new DeleteMachineGroupRequest(groupName) { ProjectName = project }); /// /// 更新机器组信息,如果机器组已应用配置,则新加入、减少机器会自动增加、移除配置。 /// /// client实例。 /// 机器分组名称。 /// 机器标识类型,分为 ip 和 userdefined 两种。 /// 具体的机器标识,可以是 IP 或 userdefined-id。 /// 机器分组类型,默认为空。 /// 机器分组的 topic,默认为空。 /// 机器分组所依赖的外部管理标识,默认为空。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task UpdateMachineGroupAsync(this ILogServiceClient client, String groupName, String machineIdentifyType, IEnumerable machineList, String groupType = null, String groupTopic = null, String externalName = null, String project = null) => client.UpdateMachineGroupAsync(new UpdateMachineGroupRequest(groupName, machineIdentifyType, machineList) { GroupType = groupType, GroupAttribute = groupTopic == null && externalName == null ? null : new MachineGroupAttributeInfo { GroupTopic = groupTopic, ExternalName = externalName }, ProjectName = project }); /// /// 列出 MachineGroup 信息。 /// /// client实例。 /// 返回记录的起始位置,默认为 0。 /// 每页返回最大条目,默认 500(最大值)。 /// 用于过滤的机器组名称(支持部分匹配)。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> ListMachineGroupAsync(this ILogServiceClient client, String groupName = null, Int32 offset = ListMachineGroupRequest.DefaultOffset, Int32 size = ListMachineGroupRequest.DefaultSize, String project = null) => client.ListMachineGroupAsync(new ListMachineGroupRequest { GroupName = groupName, Offset = offset, Size = size, ProjectName = project }); /// /// 查看具体的 MachineGroup 信息。 /// /// client实例。 /// 机器分组名称。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetMachineGroupAsync(this ILogServiceClient client, String groupName, String project = null) => client.GetMachineGroupAsync(new GetMachineGroupRequest(groupName) { ProjectName = project }); /// /// 将配置应用到机器组。 /// /// client实例。 /// 机器分组名称。 /// 日志配置名称。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task ApplyConfigToMachineGroupAsync(this ILogServiceClient client, String groupName, String configName, String project = null) => client.ApplyConfigToMachineGroupAsync(new ApplyConfigToMachineGroupRequest(groupName, configName) { ProjectName = project }); /// /// 从机器组中删除配置。 /// /// client实例。 /// 机器分组名称。 /// 日志配置名称。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task RemoveConfigFromMachineGroupAsync(this ILogServiceClient client, String groupName, String configName, String project = null) => client.RemoveConfigFromMachineGroupAsync(new RemoveConfigFromMachineGroupRequest(groupName, configName) { ProjectName = project }); /// /// 获得 MachineGroup 下属于用户并与 Server 端连接的机器状态信息。 /// /// client实例。 /// 用于过滤的机器组名称(支持部分匹配)。 /// 返回记录的起始位置,默认为 0。 /// 每页返回最大条目,默认 500(最大值)。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> ListMachinesAsync(this ILogServiceClient client, String groupName, Int32 offset = ListMachinesRequest.DefaultOffset, Int32 size = ListMachinesRequest.DefaultSize, String project = null) => client.ListMachinesAsync(new ListMachinesRequest(groupName) { Offset = offset, Size = size, ProjectName = project }); /// /// 获得 MachineGroup 上已经被应用的配置名称。 /// /// client实例。 /// 机器分组名称。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetAppliedConfigsAsync(this ILogServiceClient client, String groupName, String project = null) => client.GetAppliedConfigsAsync(new GetAppliedConfigsRequest(groupName) { ProjectName = project }); #endregion MachineGroup #region Config /// /// 在 Project 下创建日志配置。 /// /// client实例。 /// 日志配置名称, Project 下唯一。 /// 输入类型,现在只支持 file。 /// 输入详情。 /// 输出类型,现在只支持 LogService。 /// 输出详情。 /// Logtail 配置日志样例,最大支持 1000 字节。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task CreateConfigAsync(this ILogServiceClient client, String configName, String inputType, ConfigInputDetailInfo inputDetail, String outputType, ConfigOutputDetailInfo outputDetail, String logSample = null, String project = null) => client.CreateConfigAsync(new CreateConfigRequest(configName, inputType, inputDetail, outputType, outputDetail) { LogSample = logSample, ProjectName = project }); /// /// 在 Project 下创建日志配置。 /// /// client实例。 /// 日志配置名称, Project 下唯一。 /// /// 日志类型,现在只支持 common_reg_log。 /// 日志所在的父目录,例如 /var/logs/。 /// 日志文件的Pattern,例如 access*.log。 /// 是否打开本地缓存,在服务端之间链路断开的情况下,本地可以缓存 1GB 日志。 /// 日志时间格式, 如 %Y/%m/%d %H:%M:%S。 /// 日志首行特征(正则表达式),由于匹配多行日志组成一条 log 的情况。 /// 日志对提取正则表达式。 /// 日志提取后所生成的 Key。 /// 用于过滤日志所用到的 key,只有 key 的值满足对应 filterRegex 列中设定的正则表达式日志才是符合要求的。 /// 和每个 filterKey 对应的正则表达式, filterRegex 的长度和 filterKey 的长度必须相同。 /// Topic 生成方式,支持以下四种类型: /// /// 用于将日志文件路径的某部分作为 topic,如 /var/log/(.*).log。 /// none,表示 topic 为空。 /// default,表示将日志文件路径作为 topic。 /// group_topic,表示将应用该配置的机器组 topic 属性作为 topic。 /// /// /// true 代表监控目录永不超时,false 代表监控目录 30 分钟超时,默认值为 true。 /// 当设置 preserve 为 false 时,指定监控不超时目录的深度,最大深度支持 3。 /// 支持两种类型:utf8、gbk。 /// Logtail 配置日志样例,最大支持 1000 字节。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task CreateFileToLogServiceConfigAsync(this ILogServiceClient client, String configName, String logstoreName, String logType, String logPath, String filePattern, Boolean localStorage, String timeFormat, String logBeginRegex, String regex, IEnumerable key, IEnumerable filterKey, IEnumerable filterRegex, String topicFormat = null, Boolean preserve = ConfigInputDetailInfo.DefaultPreserve, Int32 preserveDepth = default, String fileEncoding = null, String logSample = null, String project = null) => client.CreateConfigAsync( configName, "file", new ConfigInputDetailInfo(logType, logPath, filePattern, localStorage, timeFormat, logBeginRegex, regex, key, filterKey, filterRegex) { TopicFormat = topicFormat, Preserve = preserve, PreserveDepth = preserveDepth, FileEncoding = fileEncoding }, "LogService", new ConfigOutputDetailInfo(logstoreName), logSample, project); /// /// 列出 Project 下所有配置信息,可以通过参数进行翻页。 /// /// client实例。 /// 返回记录的起始位置,默认为 0。 /// 每页返回最大条目,默认 500(最大值)。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> ListConfigAsync(this ILogServiceClient client, Int32 offset = ListConfigRequest.DefaultOffset, Int32 size = ListConfigRequest.DefaultSize, String project = null) => client.ListConfigAsync(new ListConfigRequest { Offset = offset, Size = size, ProjectName = project }); /// /// 列出 config 应用的机器列表。 /// /// client实例。 /// 日志配置名称。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetAppliedMachineGroupsAsync(this ILogServiceClient client, String configName, String project = null) => client.GetAppliedMachineGroupsAsync(new GetAppliedMachineGroupsRequest(configName) { ProjectName = project }); /// /// 获得一个配置的详细信息。 /// /// client实例。 /// 日志配置名称。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetConfigAsync(this ILogServiceClient client, String configName, String project = null) => client.GetConfigAsync(new GetConfigRequest(configName) { ProjectName = project }); /// /// 删除特定 config,如果 config 已被 应用到机器组,则 Logtail 配置也会被删除。 /// /// client实例。 /// 日志配置名称。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task DeleteConfigAsync(this ILogServiceClient client, String configName, String project = null) => client.DeleteConfigAsync(new DeleteConfigRequest(configName) { ProjectName = project }); /// /// 更新配置内容,如果配置被应用到机器组,对应机器也会同时更新。 /// /// client实例。 /// 日志配置名称, Project 下唯一。 /// 输入类型,现在只支持 file。 /// 输入详情。 /// 输出类型,现在只支持 LogService。 /// 输出详情。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task UpdateConfigAsync(this ILogServiceClient client, String configName, String inputType, ConfigInputDetailInfo inputDetail, String outputType, ConfigOutputDetailInfo outputDetail, String project = null) => client.UpdateConfigAsync(new UpdateConfigRequest(configName, inputType, inputDetail, outputType, outputDetail) { ProjectName = project }); #endregion Config #region Project /// /// 创建project。 /// /// client实例。 /// project的名称,全局唯一。 /// project描述。 /// 异步响应结果。 /// public static Task CreateProjectAsync(this ILogServiceClient client, String projectName, String projectDesc) => client.CreateProjectAsync(new CreateProjectRequest(projectName, projectDesc)); /// /// 获取指定区域Project列表。 /// /// client实例。 /// 用于过滤返回结果的project名称(支持部分匹配)。 /// 请求结果的起始位置,默认为0。 /// 每次请求返回结果最大数量,默认500(最大值)。 /// 异步响应结果。 /// public static Task> ListProjectAsync(this ILogServiceClient client, String projectName = "", Int32 offset = ListProjectRequest.DefaultOffset, Int32 size = ListProjectRequest.DefaultSize) => client.ListProjectAsync(new ListProjectRequest { ProjectName = projectName, Offset = offset, Size = size }); /// /// 获取当前Project信息。 /// /// client实例。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task> GetProjectAsync(this ILogServiceClient client, String project = null) => client.GetProjectAsync(new GetProjectRequest { ProjectName = project }); /// /// 删除当前Project。 /// /// client实例。 /// 项目名,此参数将覆盖 client 中默认设置。 /// 异步响应结果。 /// public static Task DeleteProjectAsync(this ILogServiceClient client, String project = null) => client.DeleteProjectAsync(new DeleteProjectRequest { ProjectName = project }); #endregion } }