搜索[数仓建模]结果-低调大师优秀个人博客

精选列表

搜索[数仓建模]，共10009篇文章

流式湖仓增强，Hologres + Flink构建企业级实时数仓

在实时数仓中，从数仓的角度来说，肯定具有分层需求。怎么样能够形成一个比较好用的方案呢？如何去解决一个实时数仓分层的问题？如果能解决这些问题，我们就能够让数据在数仓的各个层次之间自由地流动。

2024-01-03

对话 Databend Labs 联合创始人王吟：大模型浪潮里，云数仓是宠儿 | 极新企服直播实录

王吟 Databend Labs 联合创始人王吟在谈到云数仓等领域时侃侃而谈，他的答案既包含了对云数仓重要性的肯定，又表达了对其复杂性的深刻认识。

2024-05-16

阿里巴巴下一代云分析型数据库AnalyticDB入选Forrester Wave™ 云数仓评估报告解读

前言近期, 全球权威IT咨询机构Forrester发布"The Forrester WaveTM: CloudData Warehouse Q4 2018"研究报告，阿里巴巴分析型数据库(AnalyticDB)成功入选！AnalyticDB作为阿里巴巴自主研发的PB级实时云数据仓库，全面兼容MySQL协议以及SQL:2003 语法标准，可以毫秒级针对万亿级数据进行即时的多维分析透视和业务探索，帮客户将整个数据分析和价值化从传统的离线分析带到下一代的在线实时分析模式。本文将深入解读AnalyticDB成功入选背后的核心产品以及带来的客户价值。核心能力一：快和实时分析型数据库AnalyticDB在瞬间即可对万亿级别的数据进行实时的多维度分析透视，快速发现数据价值。AnalyticDB对复杂SQL查询速度相比传统的关系型数据库快10倍

2018-11-19

使用harbor配置私仓

这里配置成192.168.1.104； ui_url_protocol：用户访问私仓时使用的协议，默认时http，这里配置成https； harbor_admin_password：harbor的管理员账户密码

2017-11-08

新冠疫情预测建模记录

lgamma(n+1) + k*np.log(p) + n*np.log(1-p) 上述公式定义了对疫情传染人数趋势的一个假设公式顾名思义，他将疫情的传染人数曲线看作二元对数分布使用SIR和SEIR构建模型是否恰当呢

2020-03-15

HBase建模、使用以及优化

HBase建表的基本准则常见rowKey设计遇到的问题以及相应的解决方案建模案例分析：电商中宝贝点击量建模示例 HBase客户端的使用 HBase优化 HBase连续分页问题查询的参考解决方案分享的目的

2018-07-10

作战模型的建模与仿真

装备研发的前期认证一直缺乏科学性，我们根据互联网的公开材料研究了一下如何使用顶层架构的方法论进行装备的建模与仿真，让国防顶层架构的核心要求能够投射到实际装备上去，使得研发出的装备的体系化层度高，服务于我们的核心战略目标

2017-11-22

SOA业务规划和建模简介

我撰写的关于SOA业务规划和建模简介，PDF格式，可在文后点击“附件下载”阅读全文。

2017-10-31

快手湖仓一体升级：从 ClickHouse 到 Apache Doris 的湖仓分离向湖仓一体演进实践

一句话摘要：快手使用 Apache Doris 将湖仓分离架构升级为湖仓一体，关键能力包括 Doris 直接访问湖仓数据、元数据/数据缓存优化、自动物化服务（KwaiMTMV）与物化视图透明改写。

2026-08-19

实时数仓|基于Flink1.11的SQL构建实时数仓探索实践

实时数仓主要是为了解决传统数仓数据时效性低的问题，实时数仓通常会用在实时的OLAP分析、实时的数据看板、业务指标实时监控等场景。

2020-08-17

实时数仓混沌演练实践

二、演练范围为了能更细致反应出混沌演练情况，根据演练的内容不同，将实时数仓混沌分为两部分：技术侧和业务侧。

2023-09-22

FineDataLink 实时数仓价值解析：把实时数仓从拼装题变成配置题

实时数仓的建设，最耗工程能力的往往不是"数据存哪、怎么查"，而是数据进仓之前的那段链路——业务库的变更怎么实时进来、进来的数据怎么清洗转换、实时链路里的脏数据怎么拦住、加工好的结果怎么供出去。

2026-09-11

centos进程、线程状态 tomcat线程数并发数查看

多进程的（使用 CLONE_THREAD, 类似 NPTL pthreads）； + 位于后台的进程组； 2、线程查看 ps -Lf pid、ps -T -p pid 、top -Hp pid 查看线程数ps

2017-12-08

数学建模，正在迎来SCI论文时代

过去四年，数模竞赛最火的"赛后项目"，是把论文转成EI会议——改个格式、交上版面费就能发表。

2026-10-08

用 WorkBuddy 通过 MCP 连接 Rhino 建模

本文记录了一次完整的实战过程：用 WorkBuddy AI 助手通过 MCP（Model Context Protocol）协议连接 Rhino 8，从测试连通性、创建基础几何体，到搜索资料、编写脚本、调试排错，最终构建出一个包含 6 个图层、485 个构件的广州塔（小蛮腰）参数化模型。

2026-07-22

Reformer 模型 - 突破语言建模的极限

Reformer 如何在不到 8GB 的内存上训练 50 万个词元 Kitaev、Kaiser 等人于 20202 年引入的 Reformer 模型是迄今为止长序列建模领域内存效率最高的 transformer

2023-12-27

基于宽表的数据建模应用

导读：本文介绍了在互联网产品快速迭代的趋势下，一层数仓宽表模型替代经典数仓的技术方案，并从互联网业务变化特性、经典数仓模型存在的问题、宽表模型原理及优缺点、宽表应用效果等角度进行了较为全面的分析，最终通过宽表建模实现了节约数仓存储

2022-06-16

OpenExpressApp对建模支持的初步计划

在年度总结和计划：去年4个1，今年5个1中我提到2010下半年我将着手开发元模型引擎，由于7月份主要花在给OEA增加UI自动化测试上，所以现在才能着手对OpenExpressApp信息系统开发平台提高建模支持

2017-11-13

6步教你搞定网络威胁建模

开始之前开始威胁建模过程之前，我们要了解以下基本概念? 风险是基于对组织机构构成的威胁。威胁关注的是有价值的资源。什么是威胁建模威胁建模是一种结构化方法，用来识别、量化并应对威胁。

2017-07-18

OpenStack成为NFV标准构建模块

OpenStack正在成为领先的通信服务提供商（CSP）NFV部署的基础设施编排中的实际标准，为了实现开源和开放架构的优势（即避免厂商锁定），CSP正在克服OpenStack部署的挑战（如技术不成熟和不断发展的标准）。缺乏NFV管理和编排（MANO）仍然是主要的障碍。 NFV和OpenStack OpenStack是构建和管理云计算平台的一系列开源软件工具的集合，它使得服务提供商跨计算和存储对数据中心资源池进行配置和编排。CSP能够通过NFV部署不同类型的数据中心，而不是典型的大型企业或超级规模的云。它们的计算能力分布在包括集中式核心、聚合点和局部存在点（PoP）的层中。CSP的OpenStack实现必须高度可靠，并且能够在数百个分布在不同大小的数据中心上分配工作负载。领先CSP的OpenStack实现领先的CSP最新发布的报告表明，他们对NFV部署中重要组成部分OpenStack的大力支持。根据OpenStack基金会的报告，CSP是OpenStack部署增长最快的部分。OpenStack是很多新兴NFV标准的关键因素，包括：CORD和OPNFV。 Verizon Verizon（与Big Switch、Dell、Red Hat合作）在其位于美国的5个数据中心实现了OpenStack云部署，该公司的NFV项目开始于2015年，依赖于提供满足公司复杂网络需求的超大规模功能和灵活性的核心和POD架构。该公司在美国其他数据中心和汇聚站点进行额外部署，2016年在其他国家的数据中心进行部署。Verizon计划在边缘网络部署改进过的数据中心设计。Verizon公司表示，计划在未来3年内将其有线和无线网络元素大部分实现虚拟化（使用NFV和OpenStack），其中包括了数以万计的服务器规模部署。 AT&T AT&T希望通过利用NFV、SDN、OpenStack、OpenDaylight、Open vSwitch等技术在接下来的几年中实现其网络75%的虚拟化。AT&T的NFV云已经包括了10个OpenStack项目，并计划在2016年年底之前推出3个云产品。AT&T利用开源代码（包括OpenStack），期望达到将云资源的部署时间从几个月缩短到几天时间的目标。 AT&T做了大量的工作来优化OpenStack，包括扩展OpenStack以提高可靠性（运营商级可靠性），使其能够应用于新的全球网络。AT&T还使用OpenStack工具开发终端用户资源管理器，这将给AT&T的用户带来自主服务的功能，实现网络按需服务。 AT＆T使用NFV和OpenStack实现的其他功能包括允许自动配置网络功能和区域发现服务的应用程序目录，区域发现服务是一种预留系统，使应用程序可以在网络上的各个地理区域运行。其他的支持和实施OpenStack的大型CSP包括：NTT、SK电信、中国移动、中国联通、XO Communications、德国电信、瑞士电信、英国电信、Telefonica、Comcast、Time Warner Cable（时代华纳）。 OpenStack对NFV的好处领先的CSP在部署OpenStack时，正在寻找与其他大型数据中心部署相同的优势，他们希望降低部署成本（CAPEX）和运维成本（OPEX），并提高基于云计算资源创新的灵活性和速度。大型CSP特别希望消除厂商锁定，这也是他们对OpenStack感兴趣的一个关键因素。他们对OpenStack感兴趣的其他原因包括：开源项目中固有的创新能力、广泛的ISV生态系统、开放的API。通信服务提供商OpenStack面临的挑战 OpenStack是一个云计算管理系统，而不是一般化的网络管理系统。这意味着对CSP来说，OpenStack只是管理和编排的一部分，但其本身不是解决方案。例如，OpenStack缺少对现在使用的传统网络设备部署的许多服务和服务组件的支持。 OpenStack的一些缺点可能会随着技术的成熟和广泛的部署从而得以解决，包括：能够扩展到数千个站点和数十万台服务器的能力部署各种OpenStack组件的一致性缺乏全面的文件其他的挑战的实现将面临更大的难度，并且可能需要CSP特定实现，包括：网络数据安全——特别是数据中心间东西向流量将OpenStack与CSP更广泛的NFV管理和编排解决方案联系起来的能力多厂商VNF资源分配和对服务链的支持生态大量的企业支持OpenStack作为NFV部署的重要组成部分，包括：HPE、Dell、VMware、Cisco、Red Hat、Mirantis、Ericsson、Big Switch、Pluribus Networks、PlumGrid、Intel/Wind River、Radisys等等。给CSP的建议 OpenStack作为提供数据中心资源的手段，现在是NFV部署的重要组件。这是一个复杂的NFV蓝图，允许CSP利用开源创新并减少厂商锁定。OpenStack需要增强可靠性、安全性，以满足领先的CSP NFV部署的特定需求。OpenStack并没有解决NFV管理和编排（MANO）的复杂挑战。原文链接：https://www.sdxcentral.com/articles/analysis/openstack-for-nfv/2016/11/?utmsource=SDxCentral.com+Mailing+List&utmcampaign=c6d2a64eb4-SDxCentral+Newsletter+11%2F25%2F16&utm_medium=email&utmterm=0c2b6e504a2-c6d2a64eb4-81970457 本文转自d1net（转载）

2017-07-02

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。