笔记列表-低调大师优秀个人博客

文章列表

共 97898 篇

2018-11-13

异构(兼容dubbo)SOA系统架构(.net)优化升级

原文: 异构(兼容dubbo)SOA系统架构(.net)优化升级前面一片文章已经提到我司的异构(兼容dubbo)SOA系统架构,解决了不少技术痛点,也还算比较完善,也顺利推广开来。但作为项目的开发者,自己产品的问题心里是清楚的,离自己满意还是有不小的距离。在推广的同时,我紧张的进入了下一个版本的开发,让它更加完善。原来的版本号是1.0,现在版本升级为...

608

阅读约18分钟

2018-11-13

异构SOA系统架构之Asp.net实现(兼容dubbo)

原文: 异构SOA系统架构之Asp.net实现(兼容dubbo) 我们公司技术部门情况比较复杂,分到多个集团,每个集团又可能分为几个部门,每个部门又可能分为多个小组,组织架构比较复杂,开发人员比较多。使用的编程语言也有点复杂,主流语言有.net(C#)、Java、PHP等。所以SOA架构需要的是异构SOA。有的同学可能说这个简单吗?“把部门合并扁平化合...

562

阅读约44分钟

2018-11-13

备战双十一·谁的表情包在天上飞

作者：闲鱼技术-镇雷，还休前言双十一刚过，这个全民吃土的时期，闲鱼非常贴心的推出了一个土味表情包的活动，可以通过定制表情包来吐槽并分享大家吃土的心声，这篇文章将为大家介绍如何用Python和weex快速搭建这样一个基于人脸识别的活动项目。关键词：weex、Python、人脸识别 1. 前端搭建前端页面主要包括：拍照和生成表情两部分。 1.1 拍照拍...

845

阅读约2分钟

2018-11-13

新加坡金融科技节 | 蚂蚁金服CTO程立：面向全球开放，与合作伙伴共赢

小蚂蚁说： 11月13日，在新加坡金融科技节上，蚂蚁金服CTO程立分别从TechFin、BASIC战略、SOFAStack全栈分布式体系以及全面开放等方面讲述蚂蚁金融科技。 TechFin是一种“倒立”思考，它用科技解决金融服务中核心的信用、风控和触达等难点，让金融服务可以惠及更多的人。蚂蚁金服形成了以BASIC为基石的全栈式服务，其中BASIC分别对应B...

735

阅读约2分钟

2018-11-13

TensorFlow系列专题（七）：一文综述RNN循环神经网络

目录： ●前言 ●RNN知识结构 ●简单循环神经网络 ●RNN的基本结构 ●RNN的运算过程和参数更新 ●RNN的前向运算 ●RNN的参数更新一．前言前馈神经网络不考虑数据之间的关联性，网络的输出只和当前时刻网络的输入相关。然而在解决很多实际问题的时候我们发现，现实问题中存在着很多序列型的数据，例如文本、语音以及视频等。这些序列型的数据往往都是具...

666

阅读约13分钟

2018-11-13

什么是自然语言处理技术

自然语言处理（NLP）是计算机科学，人工智能，语言学关注计算机和人类（自然）语言之间的相互作用的领域。自然语言处理是计算机科学领域与人工智能领域中的一个重要方向。它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。自然语言处理是一门融语言学、计算机科学、数学于一体的科学。因此，这一领域的研究将涉及自然语言，即人们日常使用的语言，所以它与语言学的...

583

阅读约8分钟

2018-11-13

什么是大数据技术架构

大数据的应用开发过于偏向底层，具有学习难度大，涉及技术面广的问题，这制约了大数据的普及。现在需要一种技术，把大数据开发中一些通用的，重复使用的基础代码、算法封装为类库，降低大数据的学习门槛，降低开发难度，提高大数据项目的开发效率。大数据在工作中的应用有三种：与业务相关，比如用户画像、风险控制等；与决策相关，数据科学的领域，了解统计学、算法，这是数据科学家的范...

537

阅读约4分钟

2018-11-13

HBase实战 | Hive数据导入云HBase

网络环境专线:用户需要把hbase集群的VPC相关网络信息配置到专线里面，可直通hbase环境公有云虚拟机VPC环境：选择和hbase通VPC 其他：需要开hbase公网注意：默认导入hbase数据，依赖的hbase-common、hbase-client、hbase-server、hbase-protocol使用社区的包即可。如果是公网需要使用云hb...

695

阅读约2分钟

2018-11-13

所见不凡，带你探秘独角兽背后的大数据力量 | MaxCompute杭州Meetup报名中

阿里云MaxCompute X 众安保险 X 亲宝宝 X 中金易云 X 蚂蚁金服邀您共赴杭州大数据计算线下Meetup现在报名>> 双11的热度还未退却，大数据力量强势来袭。是什么拖住了大数据开发者的后腿？集群资源获取难？存储计算成本高？运维起夜？大规模存储和计算被瓶颈？被业务方吐槽数据总是转圈圈。。。此处借友商之词，我们愿意 “读懂你的焦虑，...

678

阅读约2分钟

2018-11-13

创建Cloudhbase维表

创建 Cloudhbase 维表维表的 Query 语法详见：维表 JOIN 文档示例 CREATE TABLE hbase ( `key` varchar, `name` varchar, PRIMARY KEY (`key`), -- hbase 中的 row key 字段 PERIOD FOR SYSTEM_TIME --维表标识。 ) with ...

787

阅读约5分钟

2018-11-13

创建云数据库 Hbase结果表

本页目录创建云数据库 Hbase结果表 WITH参数创建云数据库 Hbase结果表 create table liuxd_user_behavior_test_front ( row_key varchar, from_topic varchar, origin_data varchar, record_create_time varchar, PRIM...

687

阅读约4分钟

2018-11-13

创建ElasticSearch（ES）结果表

创建 ElasticSearch 结果表注意：本文档只适合独享模式下使用。 ElasticSearch 结果表的实现使用 REST API，理论上兼容 ElasticSearch 的各个版本。以下将 ElasticSearch 简称为 ES。 ES 需要定义的 DDL 如下: create table es_stream_sink( field1 long...

722

阅读约3分钟

2018-11-13

数据结果表概述

实时计算 Flink使用CREATE TABLE作为输出结果数据的格式定义，同时定义数据如何写入到目的数据存储。实时计算有Append类型和Update类型。 Append类型：如果输出存储是日志系统或消息系统，或未定义主键的RDS，则流的输出结果都会以追加的方式写入存储中，而不会修改存储中原有的数据。 Update类型：如果输出存储是声明了主键（PRIMA...

644

阅读约2分钟

2018-11-13

创建消息队列（Kafka）源表

本页目录 WITH参数 kafka版本对应关系 Kafka消息解析自建kafka WITH参数 Kafka源表的实现来源于自社区的kafka版本实现。注意：本文档只适合独享模式下使用。 Kafka需要定义的DDL如下。 create table kafka_stream( messageKey VARBINARY, `message` VARBINARY...

827

阅读约9分钟

2018-11-13

概念介绍

什么是工作流工作流是大数据数仓体系必备的功能。主要用来进行任务调度，包括定时调度和依赖调度两个功能。为了解决Blink批处理功能在公共云的调度问题，Blink内部集成了开源的Airflow，并将其与Blink的开发平台进行集成，为用户提供一个一站式的批/流/工作流开发运维平台。 Blink工作流架构为了更好的与用户已有的阿里云系统进行打通，工作流会部署在...

666

阅读约2分钟

2018-11-13

创建ORC结果表

本页目录创建ORC结果表 DDL定义 WITH参数创建ORC结果表 ORC(Optimized Row Columnar)是Hadoop生态圈中的一种列式存储格式。ORC产生于2013年初，最初产生自Apache Hive，用于降低Hadoop数据存储空间和加速Hive查询速度。和Parquet类似，它并不是一个单纯的列式存储格式，仍然是先根据行组分割整...

691

阅读约2分钟

2018-11-13

实时计算Flink > 独享模式 > Batch（试用） > 创建源表 —— 创建ORC源表

本页目录创建 ORC 源表 DDL定义 WITH参数创建 ORC 源表 ORC(Optimized Row Columnar)是一种Hadoop生态圈中的列式存储格式。产生于2013年初，最初产生自Apache Hive，用于降低Hadoop数据存储空间和加速Hive查询速度。和Parquet类似，它并不是一个单纯的列式存储格式，仍然是首先根据行组分割整...

717

阅读约2分钟

2018-11-13

实时计算Flink > 独享模式 > Batch（试用） > 创建源表 —— 创建HDFS源表

本页目录创建 HDFS 源表什么是HDFS 读HDFS某个路径下所有CSV文件读取HDFS某个目录下所有ORC文件示例 WITH参数创建 HDFS 源表什么是HDFS HDFS是Hadoop的分布式文件系统。HDFS可以作为Blink Batch的源表和结果表。HDFS上可以存储各种文件类型，目前Blink支持对CSV/Parquet/ORC文件格...

760

阅读约7分钟

2018-11-13

实时计算Flink —— 独享模式 —— Data Lake典型场景

数据湖 Data Lake并不是一个新的概念，早在2011年就被提出，作为数仓的补充。数据湖是一个中心化的存储，能够存储任意规模的结构化与半结构化数据。数据湖中的数据，不必经过结构化过程，即可进行各种类型的分析。如可视化，大数据处理，实时数据分析和机器学习。数据湖与数仓区别与数仓相比，数据湖中数据有以下几个特点。数据存储多样化 RDBMS：RDS/AD...

1039

阅读约5分钟

2018-11-13

实时计算 Flink> 产品定价——业务流程

在使用阿里云实时计算 Flink前，对流式数据处理整体全链路有初步的认识可以极大方便您梳理业务流程，制定相应的系统设计方案。下面将简单介绍阿里云实时计算全流程系统架构。数据采集广义的实时数据采集指: 用户使用流式数据采集工具将数据实时地采集并传输到大数据Pub/Sub系统，该系统将为下游实时计算提供源源不断的事件源去触发流式计算作业的运行。阿里云大数据...

847

阅读约5分钟

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。

文章列表

异构(兼容dubbo)SOA系统架构(.net)优化升级

异构SOA系统架构之Asp.net实现(兼容dubbo)

备战双十一·谁的表情包在天上飞

新加坡金融科技节 | 蚂蚁金服CTO程立：面向全球开放，与合作伙伴共赢

TensorFlow系列专题（七）：一文综述RNN循环神经网络

什么是自然语言处理技术

什么是大数据技术架构

HBase实战 | Hive数据导入云HBase

所见不凡，带你探秘独角兽背后的大数据力量 | MaxCompute杭州Meetup报名中

创建Cloudhbase维表

创建云数据库 Hbase结果表

创建ElasticSearch（ES）结果表

数据结果表概述

创建消息队列（Kafka）源表

概念介绍

创建ORC结果表

实时计算Flink &gt; 独享模式 &gt; Batch（试用） &gt; 创建源表 —— 创建ORC源表

实时计算Flink &gt; 独享模式 &gt; Batch（试用） &gt; 创建源表 —— 创建HDFS源表

实时计算Flink —— 独享模式 —— Data Lake典型场景

实时计算 Flink&gt; 产品定价——业务流程

资源下载

Mario

Nacos

Sublime Text

WebStorm

欢迎您来访！

实时计算Flink > 独享模式 > Batch（试用） > 创建源表 —— 创建ORC源表

实时计算Flink > 独享模式 > Batch（试用） > 创建源表 —— 创建HDFS源表

实时计算 Flink> 产品定价——业务流程