数据中台赋能云成本管理(1):创建账单项目
背景
在成本管家中,SLS提供了云产品账单的数据,通过SLS强大的分析和可视化能力,帮助客户分析云产品账单,优化成本。在发布后在客户中间引起强烈的反馈,不少客户要求在账单中增加实例名,Tag,资源用量等信息,通过更多维度数据做分账。客户对分账有比较强烈的需求,通过把账单分配到不同的部门,让不同部门各自完成自己的成本优化工作。为了满足客户的分账需求,我们在成本管家二期中引入了更加丰富的账单数据,本篇文档,讲介绍如何通过代码一步创建账单数据。
授权SLS成本管家获取账单数据
点击授权链接,同意SLS成本管家获取账单数据。
通过Java SDK创建账单数据
1. 引入Pom依赖
<dependency> <groupId>com.aliyun.openservices</groupId> <artifactId>aliyun-log</artifactId> <version>0.6.45</version> </dependency>
2. 复制程序
创建类文件bill_ingestion_creator
import com.aliyun.openservices.log.Client; import com.aliyun.openservices.log.common.AliyunBSSSource; import com.aliyun.openservices.log.common.Dashboard; import com.aliyun.openservices.log.common.Ingestion; import com.aliyun.openservices.log.common.IngestionConfiguration; import com.aliyun.openservices.log.common.JobSchedule; import com.aliyun.openservices.log.common.JobScheduleType; import com.aliyun.openservices.log.common.JobState; import com.aliyun.openservices.log.common.LogStore; import com.aliyun.openservices.log.exception.LogException; import com.aliyun.openservices.log.request.CreateDashboardRequest; import com.aliyun.openservices.log.request.CreateIngestionRequest; import com.aliyun.openservices.log.request.ListIngestionRequest; import com.aliyun.openservices.log.response.ListIngestionResponse; import java.io.ByteArrayOutputStream; import java.io.IOException; import java.io.InputStream; import java.net.HttpURLConnection; import java.net.URL; import java.util.Date; public class bill_ingestion_creator { static String endpoint = "cn-chengdu.log.aliyuncs.com"; static String accessId = ""; // 修改成你的AccessId static String accessKey = ""; // 修改成你的accessKey static String aliuid = ""; // 修改成你的aliuid static String getIngestionName() { return "ingestion-" + (int) (new Date().getTime() / 1000); } private static Ingestion createIngestion() { Ingestion ingestion = new Ingestion(); String jobName = getIngestionName(); ingestion.setName(jobName); ingestion.setState(JobState.ENABLED); ingestion.setDisplayName("BSS-test"); IngestionConfiguration configuration = new IngestionConfiguration(); configuration.setLogstore("aliyun_bill"); AliyunBSSSource source = new AliyunBSSSource(); source.setHistoryMonth(7); source.setRoleARN("acs:ram::" + aliuid + ":role/AliyunLogAccessingBSSRole"); configuration.setSource(source); ingestion.setConfiguration(configuration); JobSchedule schedule = new JobSchedule(); schedule.setInterval("10m"); schedule.setType(JobScheduleType.FIXED_RATE); schedule.setRunImmediately(true); ingestion.setSchedule(schedule); return ingestion; } public static void main(String args[]) throws LogException { Ingestion ingestion = createIngestion(); String project = "bill-sls-" + aliuid; String logstore = "aliyun_bill"; Client client = new Client(endpoint, accessId, accessKey); String index = downFile("index"); try { client.CreateProject(project, "bill analysis"); } catch (LogException e) { e.printStackTrace(); } try { client.CreateLogStore(project, new LogStore("aliyun_bill", 3000, 5)); } catch (LogException e) { e.printStackTrace(); } try { client.CreateIndex(project, logstore, index); } catch (LogException e) { e.printStackTrace(); } String dashboards[] = {"dashboard_sls", "dashboard_oss", "dashboard_ecs", "bill_summary_cn", "bill_detail_cn", "bill_optimize_cn"}; for (String dashboardName : dashboards) { Dashboard dashboard = new Dashboard(); String config = downFile(dashboardName); dashboard.FromJsonString(config); try { client.createDashboard(new CreateDashboardRequest(project, dashboard)); } catch (Exception e) { e.printStackTrace(); } } ListIngestionResponse response1 = client.listIngestion(new ListIngestionRequest(project)); if(response1.getResults().size()> 0) { System.out.println("ingestion is already created,don't recreate"); } else { client.createIngestion(new CreateIngestionRequest(project, ingestion)); } response1 = client.listIngestion(new ListIngestionRequest(project)); for (Ingestion ingestion1 : response1.getResults()) { System.out.println("bill ingestion:" + ingestion1.getName() + ", project:" + project + ", logstore :" + ingestion1.getConfiguration().getLogstore()); } } public static String downFile(String fileName) { try { URL url = new URL("http://logdemo.oss-cn-beijing.aliyuncs.com/bill_logstore/" + fileName); HttpURLConnection conn = (HttpURLConnection) url.openConnection(); conn.setConnectTimeout(3 * 1000); InputStream inputStream = conn.getInputStream(); byte[] buf = readInputStream(inputStream); return new String(buf); } catch (Exception e) { e.printStackTrace(); } return ""; } public static byte[] readInputStream(InputStream inputStream) throws IOException { byte[] buffer = new byte[1024]; int len = 0; ByteArrayOutputStream bos = new ByteArrayOutputStream(); while ((len = inputStream.read(buffer)) != -1) { bos.write(buffer, 0, len); } bos.close(); return bos.toByteArray(); } }
3. 修改账号参数
在上述程序中,修改以下三个参数,分别是accessId, accessKey, aliuid。
static String accessId = ""; // 修改成你的AccessId static String accessKey = ""; // 修改成你的accessKey static String aliuid = ""; // 修改成你的aliuid
查看账单数据
以上操作完成后,等待一分钟,即可进入sls控制台,选择bill-sls-开头的账单即可。
- 在logstore列表中选择aliyun_bill,即可查看账单原始数据。
- 在dashboard中选择对应的报表,即可查看系统SLS提供的内置报表。
账单原始数据:
账单日期 BillingDate: 2020-02-05 计费项 BillingItem: 流出流量 计费类型 BillingType: 其它 消费单位 CostUnit: 未分配 货币 Currency: CNY 现金券抵扣 DeductedByCashCoupons: 0.0 代金券抵扣 DeductedByCoupons: 0.0 预存卡抵扣 DeductedByPrepaidCard: 0.0 资源包抵扣 DeductedByResourcePackage: 0 实例配置 InstanceConfig: iz:华东 1 可用区 F;实例规格名称:ecs.xn4.small;CPU:1;内存:1024;磁盘:1;带宽:512000;OS:UBUNTU;是否io优化:io_optimized_only 实例ID InstanceID: i-bp14putxkqvmal310ian 实例描述 InstanceSpec: ecs.xn4.small 公网IP InternetIP: 47.96.36.117 内网IP IntranetIP: 10.80.65.37 发票抵扣 InvoiceDiscount: 0.0 付费类型 Item: PayAsYouGoBill 单价 ListPrice: 0.800000 单价单位 ListPriceUnit: 元/Mbps 昵称 NickName: iZbp14putxkqvmal310ianZ OutstandingAmount: 0.0 OwnerID: 1340796328858956 付费金额 PaymentAmount: 0.0 税前金额 PretaxAmount: 0.0 税前原始金额 PretaxGrossAmount: 0.009 产品ProductCode: ecs 产品详情 ProductDetail: 云服务器ECS-按量付费 产品名称 ProductName: 云服务器 ECS 产品类型 ProductType: 地域 Region: 华东1(杭州) 资源组 ResourceGroup: 默认资源组 服务周期 ServicePeriod: 86400 订阅类型 SubscriptionType: PayAsYouGo 标签 Tag: key:department value:mayunlei 使用量 Usage: 0.011000 使用量单位 UsageUnit: Mbps 地域 Zone: cn-hangzhou-f __source__: instance_bill
进行自定义分析
在实例账单分析中,各个企业的分账模式各不相同,有的采用TAG方式,有的在实例名称中定义责任人,有的在昵称中定义责任人,不同的方式如何进行分账管理,请参考本系列接下来的文章。
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
阿里工程师开发弹幕新玩法,网友不淡定了……
阿里妹导读: 如果你在追剧时喜欢看弹幕、发弹幕,那你一定知道有些剧里弹幕甚至比剧情还要精彩,比如上过热搜的出自《东宫》的那一句“谈恋爱吗?灭你全族的那种”。正是由于这些神一般的网友频频曝出精句,让某些剧集精彩程度翻了几倍,甚至有大量网友来追剧是被弹幕吸引来的。今天,阿里文娱高级开发工程师 神灭介绍一种弹幕新玩法,让弹幕的可玩性更高。 喜欢用优酷看视频发弹幕的同学应该已经发现,最新版本上很多剧都上线了全新的基于AI人脸识别的跟随弹幕,以往的普通弹幕或高级弹幕都是在播放器顶端自右向左以跑马灯式的效果展示,而这种跟随弹幕是以气泡样式挂在人物头像旁边,随着人物移动而移动。这种跟随弹幕可玩性更高,有才网友可发挥余地更大,下面就列举几个例子。 结合人物动作的玩法: 结合人物所处场景的玩法: 自编自导人物对话: 从几个视频demo中可以看出,相比普通弹幕,这种跟随弹幕是以一种类似剧中人物的内心OS的方式展示出来的,与视频无割离感,更有趣更新颖更精彩,有更多玩法。 本文主要讲诉一下跟随弹幕是如何展示的,从构架图开始讲解实现流程;再由开发过程中遇到的棘手问题,分享技术策略;最后分享未来规划。 一、跟随弹...
- 下一篇
图解kubernetes容器探活机制核心实现状态管理
k8s为实现容器探活worker的管理构建了一个Manager组件,该组件负责底层探活worker的管理,并且缓存当前的容器的状态,并对外同步容器的当前状态,今天我们就来分析下其部分核心组件 1. 核心原理实现 Manager缓存的状态主要是会被kubelet、状态组件消费,并且在Pod同步状态的时候,会通过当前Manager里面的探测状态来更新Pod的容器的就绪与启动状态的更新,让我们一起看看Manager自身的一些关键实现吧 2. 探活结果管理 即prober/results/results_manager组件,其主要作用是:存储探测结果和通知探测结果 2.1 核心数据结构 cache负责容器的探测结果的保存,updates则负责对外更新状态的订阅,其通过新的结果和cache中的状态进行对比,从而决定是否对外通知 // Manager implementation. type manager struct { // 保护cache sync.RWMutex // 容器ID->探测结果 cache map[kubecontainer.ContainerID]Result...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- SpringBoot2整合Redis,开启缓存,提高访问速度
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- Hadoop3单机部署,实现最简伪集群
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- SpringBoot2更换Tomcat为Jetty,小型站点的福音
- CentOS8编译安装MySQL8.0.19