腾讯开源分布式数据科学组件：Fast-Causal-Inference-低调大师

腾讯开源分布式数据科学组件：Fast-Causal-Inference

2023-09-15 348

腾讯宣布开源分布式数据科学组件项目 Fast-Causal-Inference。这是由腾讯微信研发，采用SQL交互的，基于分布式向量化的统计分析、因果推断计算库；目前已在微信视频号、微信搜一搜等微信内部多个业务进行了应用。

根据介绍，该项目旨在解决已有统计模型库(R/Python)在大数据下的性能瓶颈，提供百亿级数据秒级执行的Causal inference能力。同时通过SQL语言降低统计模型使用门槛，易用于生产环境中。

项目主要优势

1、提供海量数据秒级执行的Causal inference能力

基于向量化OLAP执行引擎ClickHouse/StarRocks，速度上更益于极致化用户体验

2、极简的SQL使用方式

SQLGateway WebServer通过SQL语言降低统计模型使用门槛，并在上层提供极简的SQL使用方式，透明做引擎相关的SQL展开和优化

3、提供基础算子、高阶算子的因果推断能力，及上层的应用封装

支持 ttest, OLS, Lasso, Tree-based model, matching, bootstrap, DML等

首个版本已经支持如下 Feature

基础因果推断工具

基于deltamethod的ttest，支持CUPED
OLS，亿行数据，亚秒级

进阶因果推断工具

以OLS为基础的 IV，WLS，以及其他GLS，DID，合成控制，CUPED，mediation正在孵化
uplift：千万数据分钟级别运算
bootstrap/permutation等数据模拟框架，解决没有显示解的方差估计问题

微信关注我们

原文链接：https://www.oschina.net/news/258226/fast-causal-inference-open-source

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

半导体 IP “巨无霸”上市，全球年度最大 IPO

今日凌晨，日本软银集团旗下的芯片设计公司 Arm Holdings 正式在纳斯达克敲钟上市。 Arm 此次 IPO 发行价定为推介区间顶端的每股 51 美元，总计发行 9550 万份美国存托股票，募资规模达 48.7 亿美元，为今年全球最大规模 IPO。 Arm 发行代码为「ARM」，股价开盘后上涨 10% 至56.10美元/ADS。北京时间00点26分，其股价上涨 21.55%，冲至第一个峰值61.99美元/ADS，随后开始震荡下跌。截至收盘，Arm 股价上涨 24.69%，报 63.59 美元，上市首日市值达 652 亿美元。根据 IPO 文件，AMD、苹果、Cadence、谷歌、英特尔、联发科的附属实体、英伟达、三星电子、新思科技、台积电等基石投资者，分别表示有兴趣购买 Arm 总计 7.35 亿美元的股票。此外，Arm 已与苹果达成一项新的长期协议，将让苹果使用 Arm 架构的合作关系延续到 2040 年。

2023-09-15

322

刚刚网上冲浪看到 reddit 热门被吓一跳，还以为 Android 搞了个大新闻，瞬间标题都想好了：谷歌 Android 系统逆天操作——监控“为爱鼓掌”频率。 https://www.reddit.com/r/programming/comments/16iy537/android_has_a_separate_class_and_documentation_to/ 再看一眼，原来是说 Android 开发文档提供了用于记录性生活频率的 "SexualActivityRecord" 类。 https://developer.android.com/reference/androidx/health/connect/client/records/SexualActivityRecord 那就看看谷歌工程师如何编写这个类。可以看到这个类总共有 3 个常量，代表了 Sex 是否采取保护措施： 1：已做安全保护 0：未知 2：无安全保护公有方法主要有getProtectionUsed()、getTime()、getZoneOffset()。前面两个都能理解，获取保护措施情况和发生时间...

2023-09-15

346

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。