文章列表-低调大师自媒体个人博客

文章列表

Spark Streaming应该如何消费Kafka？

前言在项目中，需要对每天千万级的游戏评论信息进行词频统计，在生产者一端，我们将数据按照每天的拉取时间存入了Kafka当中，而在消费者一端，我们利用了spark streaming从kafka中不断拉取数据进行词频统计。本文首先对spark streaming嵌入kafka的方式进行归纳总结，之后简单阐述Spark streaming+kafka在舆情项目中...
2019-07-19 4热度收藏
网站解决方案

网站弹性伸缩解决方案适用于新闻、微博、论坛、企业官网等各种网站需求，通过弹性伸缩的计算能力快速搭建、动态扩展网站的资源需求。整体解决方案一键搭建，自动化部署，缩短3倍业务上线时间。针对网站峰值频发的特点，配置了弹性伸缩、缓存等功能，有效提升网站性能。通过CDN对网站静态文件、图片等进行动态缓存，降低访问延迟，提升用户体验。RDS、ECS等都配备了跨可用区...
2019-07-19 3热度收藏
URLOS如何打开dev模式（开发环境）

只要修改URLOS的配置文件即可，以下使用两种方法： 1.通过SSH工具使用命令行修改配置文件： vim /data/urlos/master-config/config.jsonc 将 "envType": "pro", 修改为 "envType": "dev", 2.通过WinSCP连接服务器，可视化的操作方法适合linux新手用户：连接后打开目录：/d...
2019-07-19 4热度收藏
5G的来临会对工业产生什么影响?

5G的来临会对工业产生什么影响?139w.com 鼎点网络 5G+工业对产业的影响，所带来的应用市场空间，让人欣喜。然而，这不是消费互联网，更不是一个可以随时卸载和重装的APP。北京和利时智能技术有限公司的总工程师朱毅明提出一个问题：“(5G在工业场景)到底是增量的应用，还是替代既有的应用?”这个问题听起来很简单，但却异常复杂，原因在于工业网络的复杂性。 ...
2019-07-19 2热度收藏
一文读懂MapReduce

Hadoop解决大规模数据分布式计算的方案是MapReduce。MapReduce既是一个编程模型，又是一个计算框架。也就是说，开发人员必须基于MapReduce编程模型进行编程开发，然后将程序通过MapReduce计算框架分发到Hadoop集群中运行。我们先看一下作为编程模型的MapReduce。 MapReduce编程模型 MapReduce是一种非常简...
2019-07-19 2热度收藏
JavaScript剩余操作符Rest Operator

JavaScript剩余操作符Rest Operator本文适合JavaScript初学者阅读剩余操作符之前这篇文章JavaScript展开操作符(Spread operator)介绍讲解过展开操作符。剩余操作符和展开操作符的表示方式一样，都是三个点 '…',但是他们的使用场景会不同。剩余参数定义函数的时候，如果函数的参数以… 为前缀，则改参数是剩余参数...
2019-07-19 4热度收藏
以太坊ERC20代币数据集【1000+，含合约地址、图标等】

Erc20Tokens数据集包含超过1000种主流的以太坊ERC20代币的描述数据清单和图标，可用于钱包等区块链应用的开发，支持使用Java、Python、Php、NodeJs、C#等各种开发语言查询主流ERC20代币的相关数据。下载链接：ERC20代币数据集。 1、数据集概述以下是ERC20代币数据集中部分代币的图标示意： Erc20Tokens数据集的...
2019-07-19 3热度收藏
Docker+Maven+Jenkins在Devops中完整应用

Docker+Maven+Jenkins在Devops中完整应用过去与现在很早之前，当我们需要一个部署环境的时候，我们可能指的是一台PowerEdge R710 2U服务器，走一系列冗长的申请流程，然后上架到机房、调试网络、安装系统、调试环境、最终部署应用，就这样过去了几个月。接着出现了虚拟化技术，我们在一台内部服务器使用Citrix XenApp划分出几台...
2019-07-19 7热度收藏
《ElasticSearch6.x实战教程》之分词

《ElasticSearch6.x实战教程》之分词第四章-分词下雨天留客天留我不留本打算先介绍“简单搜索”，对ES的搜索有一个直观的感受。但在写的过程中发现分词无论如何都绕不过去。term查询，match查询都与分词息息相关，索性先介绍分词。 ES作为一个开源的搜索引擎，其核心自然在于搜索，而搜索不同于我们在MySQL中的select查询语句，无论我们在百...
2019-07-19 4热度收藏
PYTHON趣用—配平化学方程式

PYTHON趣用—配平化学方程式不知不觉已经毕业多年了，不知道大家是否还记得怎么配平化学方程式呢？反正小编我是已经记不太清了，所以今天的文章除了分享如何用python配平化学方程式，顺带着还会复习一些化学方程式的知识，希望广大化学爱好者喜欢。 1.化学方程式复习篇 1)定义化学方程式是指用化学式表示化学反应的式子，它不仅表明了反应物、生成物和反应条件；同...
2019-07-19 6热度收藏
Facebook发布全新JavaScript引擎：Hermes

摘要： JS引擎开始升级了... 原文：技术栈中的爱马仕？Facebook发布全新JavaScript引擎：Hermes 作者：Carson_Ho Fundebug经授权转载，版权归原作者所有。前言目前，用户的流畅体验是用户能长期使用某个移动客户端应用App的重要指标之一，因此，移动客户端应用App的性能问题备受关注。最近，一个崭新的JavaScrip...
2019-07-19 4热度收藏
快速掌握mongoDB(四)—— C#驱动MongoDB用法演示

快速掌握mongoDB(四)—— C#驱动MongoDB用法演示阅读目录 0.准备测试数据 1 添加(InsertOne,InsertMany) 2 查询(Find,Filter,Sort,Projection) 1.简单查询(Find、Filter)2.AND查询3 OR查询4 字段存在(Exists)4 排序(Sort)5 查询指定字段(Projecti...
2019-07-19 3热度收藏
seleniumGrid分布式远程执行测试脚本

seleniumGrid分布式远程执行测试脚本执行UI自动化测试脚本时，不仅可以在本地执行，也可以远程指定某计算机执行测试脚本，seleniumGrid为我们提供了这类服务，但还需要自己搭建环境。一、本地计算机需要准备java环境和selenium-server-standalone-4.0.0-alpha-2.jar包，jar包主要开启本机的hub节点（...
2019-07-19 3热度收藏
日志服务数据加工: 查询字符串语法

概述搜索字符串是ETL语言中用于快速过滤的语法, 语法基本上与日志服务的查询语法, 以及lucene 语法相同. 可以极大简化数据加工的条件判断的逻辑. 相关函数如下函数会使用到查询字符串语法. 类型函数使用场景表达式函数-事件判断函数 e_search 使用查询字符串判断事件的字段值是否满足特定条件, 返回True或False 表达式函数-资源函...
2019-07-19 3热度收藏
Skynet 服务创建流程

Skynet 服务创建流程根据设计综述 Skynet 是为了让服务器充分利用多核优势，将不同的业务放在独立的执行环境中处理。 Skynet 核心功能是加载一个 C 模块（动态库），模块用数字 id 标识，作为其 handle ，模块被称为服务 service 。服务间可以自由发送消息。每个模块可以向 Skynet 框架注册一个 callback 函数，用来...
2019-07-19 7热度收藏
GitOps 与 ChatOps 的落地实践

前言说到 GitOps 和 ChatOps ，那就不得不谈到 DevOps 。 DevOps 作为一种文化，旨在促进开发、测试和运维人员之间的沟通与协作。而促进合作的方式，往往是使用一系列工具，完成这三个角色的相互协作。这带来的好处也是显而易见的：更快的交付速度和更低的人力成本。获益于 DevOps 和公有云，一个近百人的研发团队，可以只配备一到两个专职运...
2019-07-19 12热度收藏
原移动董事长：5G需要新的操作系统功能要超过现有系统

【大咖・来了第7期】10月24日晚8点观看《智能导购对话机器人实践》最近国产操作系统频繁出现在新闻头条上，中兴公司还提到他们研发的新支点OS系统出货了已经超过2亿套了，华为公司也在积极布局鸿蒙操作系统，野心会比其他国产系统更大。在桌面有Windows、移动有iOS、安卓、服务器有Linux系统的情况下，国产操作系统应该如何突围呢?对于这个问题，全球移动...
2019-07-19 2热度收藏
C语言动态内存管理和动态内存分配

动态内存管理同时还具有一个优点：当程序在具有更多内存的系统上需要处理更多数据时，不需要重写程序。标准库提供以下四个函数用于动态内存管理： (1) malloc（）、calloc（）分配新的内存区域。 (2) realloc（）调整已分配的内存区域。 (3) free（）释放已分配的内存区域。上述所有函数都声明在头文件 stdlib.h 中。对象在内存...
2019-07-19 4热度收藏
Java多线程之Executor框架

引言 Executor框架是指JDK 1.5中引入的一系列并发库中与Executor相关的功能类，包括Executor、Executors、ExecutorService、Future、Callable等。一、为什么要引入Executor框架？ 1、如果使用new Thread(...).start()的方法处理多线程，有如下缺点： ① 开销大。对于JVM...
2019-07-19 4热度收藏
Google 称已终止审查版搜索引擎项目 Project Dragonfly

据BuzzFeed News 的报道，在本周二举行的美国参议院司法委员会听证会上，Google公共政策副总裁 Karan Bhatia 表示，Google 已终止针对中国大陆市场研发的审查版搜索引擎项目Project Dragonfly。 “We have terminated Project Dragonfly” 而当 Bhatia 被参议员问及“终止”是...
2019-07-19 4热度收藏

« 上页 282/5117 下页 »

文章筛选

文章列表