笔记列表-低调大师优秀个人博客

文章列表

共 97898 篇

2019-04-21

浅谈大数据开发工程师的两年工作经验总结

今年广州的六月，在经历了大雨的洗礼之后，一切都变得更加明朗起来，新的工作，新的人和事。懒惰让我变得更焦虑，焦虑促使我进步，程序员的焦虑大家应该都有共同的感觉，时代的步伐太快了，在这个环境下的软件开发一定会淘汰掉那些不懂得学习，懒惰的人。希望跟大家共勉。今天呢，博主主要回顾这两年来，在大数据行业公司从事大数据类的前端开发的工作。最近刚刚换了一份工作，把我的...

617

阅读约12分钟

2019-04-21

SpringBoot使用Graylog日志收集

本文介绍SpringBoot如何使用Graylog日志收集。 1.Graylog介绍 Graylog是一个生产级别的日志收集系统，集成Mongo和Elasticsearch进行日志收集。其中Mongo用于存储Graylog的元数据信息和配置信息，ElasticSearch用于存储数据。架构图如下：生产环境配置图如下： 2.安装Graylog 在官方文档上...

994

阅读约2分钟

2019-04-21

macOS下 Hive 2.x 的安装与配置

1 简介 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的[SQL]查询功能，可以将SQL语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。它提供了一系列的工具，可以用来...

669

阅读约2分钟

2019-04-21

好程序员分享ApacheSpark常见的三大误解

好程序员分享ApacheSpark常见的三大误解误解一：Spark是一种内存技术大家对Spark最大的误解就是其是一种内存技术（in-memorytechnology）。其实不是这样的！没有一个Spark开发者正式说明这个，这是对Spark计算过程的误解。我们从头开始说明。什么样的技术才能称得上是内存技术？在我看来，就是允许你将数据持久化（persist...

705

阅读约7分钟

2019-04-21

新手学习大数据？这才是完整的大数据学习体系

整理的大数据学习思路第一阶段：linux系统本阶段为大数据学习入门基础课程，帮大家进入大数据领取打好Linux基础，以便更好的学习Hadoop、habse、NoSQL、saprk、storm等众多技术要点。另：目前企业中无疑例外是使用Linux来搭建或部署项目的第二阶段：大型网站高并发处理本阶段的学习是为了让大家能够了解大数据的源头，数据从而而来，...

568

阅读约4分钟

2019-04-21

HanLP Analysis for Elasticsearch

基于 HanLP 的 Elasticsearch 中文分词插件，核心功能：兼容 ES 5.x-7.x；内置词典，无需额外配置即可使用；支持用户自定义词典；支持远程词典热更新（待开发）；内置多种分词模式，适合不同场景；拼音过滤器（待开发）；简繁体转换过滤器（待开发）。版本插件版本和 ES 版本一致，直接下载对应版本的插件进行安装即可。 ...

594

阅读约7分钟

2019-04-21

LocalFlinkMiniCluster启动DataStream任务的流程

LocalFlinkMiniCluster 集群的actor 模型相关的主要类图如下： AkkaRpcActor持有一个rpcEndpoint成员，接收到消息后进行基础解析后调用rpcEndpoint的的对应方法来进行处理。其中RpcGateway及RpcEndPoint的类图支持的消息类型其中主要使用RpcInvocation基于反射调用RPCEn...

759

阅读约2分钟

2019-04-21

【ECS】好消息，弹性网卡支持添加辅助私网IP啦

背景阿里云的ECS服务器，很早就支持了多网卡的挂载，卸载。近日我们又推出了新功能，每块弹性网卡又支持分配和回收多辅助私网IP地址啦。实例列表页以及详情页支持管理主网卡的辅助私网IP 在实例列表页，在每一个实例的操作栏里点击更多 -> 网络和安全组 -> 管理辅助私网IP，可看到，弹出了相应的对话框我们可以看到对话框的结构如下：对话框里列...

723

阅读约2分钟

2019-04-21

怎么解决网站显示该内容被禁止访问

如果您的网站首页或者内页面突然出现“该内容被禁止访问”的提示，那么说明你的网站被黑了，被黑什么了？我找找找，也没找出什么问题，到底是怎么回事，最终如何解决呢？下面，Sine安全老于为大家一一解惑。内容被禁止访问的原因：当出现这种提示时，说明您正在使用阿里云或者他们旗下万网的主机空间，阿里云是我国规模较大的云计算提供商，旗下的安全、可靠、稳定、高效的云主机...

685

阅读约4分钟

2019-04-21

揭秘 DockerCon 重量级演讲嘉宾（七）

出品丨Docker公司（ID：docker-cn）编译丨小东每周一、三、五，与您不见不散！ DockerCon 是一个将容器行业的领导者和专家汇聚到一起的平台。在这里，他们将分享最前沿的知识、经验和指导。今年也不例外。在接下来的几周里，我们将重点介绍一些重量级的演讲者以及他们将要引领的话题。点击下列文章标题，回顾本系列文章的往期内容：揭秘 DockerC...

677

阅读约3分钟

2019-04-21

阿里云服务器如何登录？阿里云服务器的三种登录方法

购买阿里云ECS云服务器后如何登录？场景不同，云吞铺子总结大概有三种登录方式：登录到ECS云服务器控制台在ECS云服务器控制台用户可以更改密码、更换系统盘、创建快照、配置安全组等操作如何登录ECS云服务器控制台？ 1、先登录到阿里云ECS服务器控制台 2、点击顶部的“控制台” 3、通过左侧栏，切换到“云服务器ECS”即可，如下图所示通过ECS控制台的远...

690

阅读约2分钟

2019-04-21

使用nexus搭建yum仓库

概述 nexus 是一个仓库管理器，除了最常用创建maven仓库的功能外，他还可以搭建docker仓库yum源仓库npm pip ruby仓库等等，今天我们用这个创建一个yum源仓库安装nexus 首先安装nexus，我使用的是docker方式，首先clone下面这个项目 git clone https://github.com/bboysoulcn/aw...

916

阅读约8分钟

2019-04-21

基于Kubernetes的云上机器学习—GPU弹性扩缩容

前言在深度学习中，要使用大量GPU进行计算。而GPU往往价格不菲，随着模型变得越复杂，数据量积累，进行深度学习计算需要耗费极大的经济和时间成本。解决方案阿里云容器服务提供的深度学习解决方案，基于Kubernetes为核心，支持cluster-autoscaler 进行节点弹性扩缩容。除了CPU，Memory 等基础指标外，还可以以GPU资源维度进行节...

734

阅读约2分钟

2019-04-21

Kubernetes知识小普及

大部分概念Kubernetes官网都有详细介绍，Kubernetes中文官网 https://kubernetes.io/zh/docs/tutorials/kubernetes-basics/ 官网还提供一个比较好的功能是能在线互动，见互动教程，类似实操命令初步感受。 Kubernetes主要功能基于容器的应用部署、维护和滚动升级负载均衡和服务发现跨...

922

阅读约13分钟

2019-04-20

python实现二分查找算法

二分查找算法，是常见的搜索算法之一，适用于有序的序列，通过将序列不断的对折分为区间，从而确定查找值是否存在，优点是速度快。首先，假设表中元素是按升序排列，将表中间位置记录的关键字与查找关键字比较，如果两者相等，则查找成功；否则利用中间位置记录将表分成前、后两个子表，如果中间位置记录的关键字大于查找关键字，则进一步查找前一子表，否则进一步查找后一子表。重复以...

699

阅读约1分钟

2019-04-20

python实现顺序查找和哈希查找算法

顺序查找顺序查找是按照序列原有顺序对数组进行遍历比较查询的基本查找算法，顺序查找是最简单的搜索算法，其实现如下： defsequential_search(items,item): foriinitems: ifi==item: returni else: returnFalse 适用于线性表的顺序存储结构和链式存储结构,该算法的时间复杂度为O(n)。缺...

705

阅读约1分钟

2019-04-20

python算法学习笔记1

python中array 是一整块单一连续的内存区域，根据索引值访问的话可以直接计算出目标元素在内存中的位置，对于链表要从头开始遍历链表插入代价小，数值插入代价大，要移动右边所有的元素这边的数组指动态数组复杂度O 构建排序算法之前先对序列进行检查，如果目标已经排过序则直接返回 def sort_w_check(): n=len(seq) for i in r...

575

阅读约5分钟

2019-04-20

len(x) 击败 x.len()，从内置函数看 Python 的设计思想

内置函数是 Python 的一大特色，用极简的语法实现很多常用的操作。它们预先定义在内置命名空间中，开箱即用，所见即所得。Python 被公认是一种新手友好型的语言，这种说法能够成立，内置函数在其中起到了极关键的作用。举个例子，求字符串 x 的长度，Python 的写法是 len(x) ，而且这种写法对列表、元组和字典等对象也同样适用，只需要传入对应的参...

564

阅读约9分钟

2019-04-20

使用 Jaeger 完成服务间的链路追踪

世上本没有路，走的人多了，便变成了路 -- 鲁迅本次讨论的话题就是需要在各个服务之间踏出条"路"，让 bug 有"路"可循。至于为什么用 jaeger... 这个支持多语言方案算么？遵循 opentracing 规范算么？开箱即用算么？还有更多? 至于为什么遵循 opentracing 规范的好... 这个...杠精同学，文末地址可参考反正先撸袖开干....

711

阅读约50分钟

2019-04-20

Python 中包/模块的 `import` 操作

Python 中包/模块的 import 操作创建以下包结构。一个文件夹 cookFish/，下面包含两个文件， __init__.py和cookBook.py。为什么取这几个名字呢？假设我想用 Python 去做和鱼相关的菜，这件事情很复杂，所以我给它创建了一个包，名叫cookFish，既然是包，在它下面必须得创建一个文件__init__.py。烧鱼必...

707

阅读约12分钟

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。

文章列表

浅谈大数据开发工程师的两年工作经验总结

SpringBoot使用Graylog日志收集

macOS下 Hive 2.x 的安装与配置

好程序员分享ApacheSpark常见的三大误解

新手学习大数据？这才是完整的大数据学习体系

HanLP Analysis for Elasticsearch

LocalFlinkMiniCluster启动DataStream任务的流程

【ECS】好消息，弹性网卡支持添加辅助私网IP啦

怎么解决网站显示该内容被禁止访问

揭秘 DockerCon 重量级演讲嘉宾（七）

阿里云服务器如何登录？阿里云服务器的三种登录方法

使用nexus搭建yum仓库

基于Kubernetes的云上机器学习—GPU弹性扩缩容

Kubernetes知识小普及

python实现二分查找算法

python实现顺序查找和哈希查找算法

python算法学习笔记1

len(x) 击败 x.len()，从内置函数看 Python 的设计思想

使用 Jaeger 完成服务间的链路追踪

Python 中包/模块的 `import` 操作

资源下载

腾讯云软件源

Nacos

Sublime Text

WebStorm

欢迎您来访！