搜索[基础搭建]结果-低调大师优秀个人博客

精选列表

搜索[基础搭建]，共10000篇文章

Apache Flink 零基础入门（四）：客户端操作的 5 种模式

作者：周凯波 1.环境说明在前面几期的课程里面讲过了 Flink 开发环境的搭建和应用的部署以及运行，今天的课程主要是讲 Flink 的客户端操作。本次讲解以实际操作为主。

2019-07-16

大数据新手的0基础学习路线，从菜鸟到高手的成长之路

大数据作为一个新兴的热门行业，吸引了很多人，但是对于大数据新手来说，按照什么路线去学习，才能够学习好大数据，实现从大数据菜鸟到高手的转变。这是很多想要学习大数据的朋友们想要了解的。今天我们就来和大家分享下大数据新手从0开始学习大数据，实现菜鸟到高手的转变的学习路线。希望能够帮助想要学习大数据的朋友。以下是大数据新手学习路线的正文： Linux：因为大数据相关软件都是在Linux上运行的，所以Linux要学习的扎实一些，学好Linux对你快速掌握大数据相关技术会有很大的帮助，能让你更好的理解hadoop、hive、hbase、spark等大数据软件的运行环境和网络环境配置，能少踩很多坑，学会 shell就能看懂脚本这样能更容易理解和配置大数据集群。还能让你对以后新出的大数据技术学习起来更快。 Hadoop：这是现在流行的大数据处理平台几乎已经成为大数据的代名词，所以这个是必学的。Hadoop里面包括几个组件HDFS、MapReduce和YARN，HDFS是存储数据的地方就像我们电脑的硬盘一样文件都存储在这个上面，MapReduce是对数据进行处理计算的，它有个特点就是不管多大的数据只要给它时间它就能把数据跑完，但是时间可能不是很快所以它叫数据的批处理。 YARN是体现Hadoop平台概念的重要组件有了它大数据生态体系的其它软件就能在hadoop上运行了，这样就能更好的利用HDFS大存储的优势和节省更多的资源比如我们就不用再单独建一个spark的集群了，让它直接跑在现有的hadoop yarn上面就可以了。其实把Hadoop的这些组件学明白你就能做大数据的处理了，只不过你现在还可能对”大数据”到底有多大还没有个太清楚的概念，听我的别纠结这个。等以后你工作了就会有很多场景遇到几十T/几百T大规模的数据，到时候你就不会觉得数据大真好，越大越有你头疼的。当然别怕处理这么大规模的数据，因为这是你的价值所在，让那些个搞Javaee的php的html5的和DBA的羡慕去吧。 Zookeeper：这是个万金油，安装Hadoop的HA的时候就会用到它，以后的Hbase也会用到它。它一般用来存放一些相互协作的信息，这些信息比较小一般不会超过1M，都是使用它的软件对它有依赖，对于我们个人来讲只需要把它安装正确，让它正常的run起来就可以了。 Mysql：我们学习完大数据的处理了，接下来学习学习小数据的处理工具mysql数据库，因为一会装hive的时候要用到，mysql需要掌握到什么层度那?你能在Linux上把它安装好，运行起来，会配置简单的权限，修改root的密码，创建数据库。这里主要的是学习SQL的语法，因为hive的语法和这个非常相似。 Sqoop：这个是用于把Mysql里的数据导入到Hadoop里的。当然你也可以不用这个，直接把Mysql数据表导出成文件再放到HDFS上也是一样的，当然生产环境中使用要注意Mysql的压力。 Hive：这个东西对于会SQL语法的来说就是神器，它能让你处理大数据变的很简单，不会再费劲的编写MapReduce程序。有的人说Pig那?它和Pig差不多掌握一个就可以了。 Oozie：既然学会Hive了，我相信你一定需要这个东西，它可以帮你管理你的Hive或者MapReduce、Spark脚本，还能检查你的程序是否执行正确，出错了给你发报警并能帮你重试程序，最重要的是还能帮你配置任务的依赖关系。我相信你一定会喜欢上它的，不然你看着那一大堆脚本，和密密麻麻的crond是不是有种想屎的感觉。 Hbase：这是Hadoop生态体系中的NOSQL数据库，他的数据是按照key和value的形式存储的并且key是唯一的，所以它能用来做数据的排重，它与MYSQL相比能存储的数据量大很多。所以他常被用于大数据处理完成之后的存储目的地。 Kafka：这是个比较好用的队列工具，队列是干吗的?排队买票你知道不?数据多了同样也需要排队处理，这样与你协作的其它同学不会叫起来，你干吗给我这么多的数据(比如好几百G的文件)我怎么处理得过来，你别怪他因为他不是搞大数据的，你可以跟他讲我把数据放在队列里你使用的时候一个个拿，这样他就不在抱怨了马上灰流流的去优化他的程序去了，因为处理不过来就是他的事情。而不是你给的问题。当然我们也可以利用这个工具来做线上实时数据的入库或入HDFS，这时你可以与一个叫Flume的工具配合使用，它是专门用来提供对数据进行简单处理，并写到各种数据接受方(比如Kafka)的。 Spark：它是用来弥补基于MapReduce处理数据速度上的缺点，它的特点是把数据装载到内存中计算而不是去读慢的要死进化还特别慢的硬盘。特别适合做迭代运算，所以算法流们特别稀饭它。它是用scala编写的。Java语言或者Scala都可以操作它，因为它们都是用JVM的。后续提高：大数据结合人工智能达到真正的数据科学家，打通了数据科学的任督二脉，在公司是技术专家级别，这时候月薪再次翻倍且成为公司核心骨干。机器学习(Machine Learning, ML)：是一门多领域交叉学科，涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。它是人工智能的核心，是使计算机具有智能的根本途径，其应用遍及人工智能的各个领域，它主要使用归纳、综合而不是演绎。机器学习的算法基本比较固定了，学习起来相对容易。深度学习(Deep Learning, DL)：深度学习的概念源于人工神经网络的研究，最近几年发展迅猛。深度学习应用的实例有AlphaGo、人脸识别、图像检测等。是国内外稀缺人才，但是深度学习相对比较难，算法更新也比较快，需要跟随有经验的老师学习。

2019-04-26

书籍:ASTQB-BCS移动测试基础指南 Mobile Testing An ASTQB-BCS Foundation Guide - ...

简介移动测试是测试移动软件的功能，可用性和一致性的过程。与标准软件测试类似，高效且有效的移动测试需要在软件测试人员通常需要的技能之上提供额外的技能。有了这个必不可少的指南，符合ASTQB认证的移动测试人员课程大纲，您将获得开始成为熟练的移动测试人员所需的理解和技能。参考资料下载：https://www.jianshu.com/p/a252732f8f1c python测试开发项目实战-目录本文涉及的python测试开发库谢谢点赞！本文相关海量书籍下载 2018最佳人工智能机器学习工具书及下载(持续更新) Format Pdf Page Count 183 Pages 针对读者软件测试、开发、产品等。

2019-04-15

赋能IDC基础设施，5G能实现光速传输数据吗？

5G对数据中心基础设施的影响那么5G将如何影响实现这些技术进步所需的基础设施?其连接的定义是理论上可以通过光纤以近乎光速的速度传输信息和数据。这比当前最快的光纤网络快了近1000倍。

2019-04-08

好程序员Web前端培训入门之JS基础知识梳理汇总

好程序员Web前端入门之JS基础知识梳理汇总，Web前端工程师是当前各大企业都比较稀缺的人才，薪资待遇和就业前景都很不错。

2019-03-26

腾讯面试Android高级岗，居然被一个多线程基础面倒了？

昨天去腾讯总部面试Android高级岗，一面的时候，自我介绍后，陆陆续续问了很多问题，有着五年的从业经验很多项目开发的技术问题都回答的很通顺，面试官也很满意，就在最后以为自己要顺利通过时，【多线程——进程线程】，一个基础问题一时没有答上来就失去了二面的机会

2019-03-26

从零基础到拿到网易Java实习offer，谈谈我的学习经验

作为一个非科班小白，我在读研期间基本是自学Java，从一开始几乎零基础，只有一点点数据结构和Java方面的基础，到最终获得网易游戏的Java实习offer，我大概用了半年左右的时间。

2019-03-12

威胁猎人开源风控系统“星云”，促业务反欺诈基础设施普及

1.商务成本成为立项初期的阻碍安全是企业的成本中心，在业务风控建设时如果基础设施需要牵扯到商务成本，在企业内部就一定会遇到决策挑战，是否应该建设和什么时候建设等等问题会因为商务成本的存在让企业内部推动安全基础建设流程过于漫长和繁琐

2019-03-11

Spring Cloud Alibaba基础教程：Nacos配置的多文件加载与共享配置

前情回顾：《Spring Cloud Alibaba基础教程：使用Nacos实现服务注册与发现》《Spring Cloud Alibaba基础教程：支持的几种服务消费方式》《Spring Cloud

2019-03-04

没有任何编程基础可以直接学习python语言吗？学会后能够做什么？

很明确的说 python非常适合没有任何编程基础的人入门。。

2019-02-28

Spring Cloud Alibaba基础教程：支持的几种服务消费方式（RestTemplate、WebClient、Feign）

通过《Spring Cloud Alibaba基础教程：使用Nacos实现服务注册与发现》一文的学习，我们已经学会如何使用Nacos来实现服务的注册与发现，同时也介绍如何通过LoadBalancerClient

2019-02-23

Python零基础学习笔记（三十八）—— 递归方法、栈、队列模拟遍历目录

用递归方法遍历目录：使用到os模块，所以要先引入os模块处理文件：核心是判断文件是否是目录文件，如果是目录文件就进行递归处理，直接将文件名打印出来下面是文件代码： import os def getAllDir(path, sp = " "): fileList = os.listdir(path) #处理每一个文件 sp += " " for fileName in fileList: #判断是否是路径(用绝对路径) absFliePath = os.path.join(path, fileName) if os.path.isdir(absFliePath): print(sp + "目录：", fileName) #递归调用 getAllDir(absFliePath, sp) else: print(sp + "普通文件", fileName) return fileList getAllDir(r"C:\Users\Administrator\PycharmProjects\untitled\day011") 栈方法： import os def getAllDirDE(path): stack = [] stack.append(path) #处理栈，当栈为空的时候结束循环 while len(stack) != 0: dirPath = stack.pop() fileDir = os.listdir(dirPath) for fileName in fileDir: fileAbsPath = os.path.join(dirPath, fileName) if os.path.isdir(fileAbsPath): print("目录："+ fileName) stack.append(fileAbsPath) else: print("普通文件：", fileName) getAllDirDE(r"C:\Users\Administrator\PycharmProjects\untitled\day011") 队列方法： import os import collections def getAllDir(path): queue = collections.deque() #进队 queue.append(path) while len(queue) != 0: dirPath = queue.popleft() fileList = os.listdir(dirPath) for fileName in fileList: fileAbsPath = os.path.join(dirPath, fileName) if os.path.isdir(fileAbsPath): print("目录："+fileName) queue.append(fileAbsPath) else: print("文件："+fileName) getAllDir(r"C:\Users\Administrator\PycharmProjects\untitled\day011")

2019-01-25

Python零基础学习代码实践 —— 模拟播放器中的歌词显示

import time musucLrc = ''' [00:00.01]给我你的爱 [00:02.01]林宥嘉，张杰 [00:05.53] 作词:秋风 [00:09.83] 作曲:秋风 [00:14.90] [00:15.65]相信我在每个生命的路口 [00:20.98]在每个无助的时候 [00:24.75]都有对爱的渴求 [00:30.47]我想把真的爱向你传达 [00:36.53]无论你在海角天涯 [00:39.52]都能感到我的牵挂 [00:44.28]请给我你的爱 [00:47.84]请伸出手来传递这信赖 [00:51.54]就在这茫茫人海 [00:53.79]真心的爱让世界变色彩 [00:59.02]请给我你的爱 [01:02.45]让我们用爱改变着未来 [01:06.10]在每个艰难时刻 [01:08.88]伸你的手感觉真的爱 [01:14.81]牵着手让我们静静地感受 [01:19.92]当风雨艰难过去后 [01:23.79]那种美好的自由 [01:29.29]我们都曾错过幸福的意义 [01:34.77]只希望我还来得及 [01:38.45]去告诉你真心爱你 [01:43.15]请给我你的爱 [01:47.39]请伸出手来传递这信赖 [01:50.42]就在这茫茫人海 [01:53.18]真心的爱让世界变色彩 [01:57.72]请给我你的爱 [02:01.53]让我们用爱改变着未来 [02:05.19]在每个艰难时刻 [02:07.86]伸你的手感觉真的爱 [02:14.27]我不再想要错过 [02:15.81]你的每个热切期待 [02:19.18]用爱在明天到来之前 [02:22.56]向你大声说出爱~~爱 [02:29.44]请给我你的爱 [02:32.65]请伸出手来传递这信赖 [02:36.33]就在这茫茫人海 [02:39.08]真心的爱让世界变色彩 [02:43.89]请给我你的爱 [02:47.56]让我们用爱改变着未来 [02:51.05]在每个艰难时刻 [02:53.96]伸你的手感觉真的爱 [03:01.38]给我你的爱~~ ''' #将数据分解存储到字典里 lrcDict = {} musicList = musucLrc.splitlines() for lrcLine in musicList: #runCount = lrcLine.count(":") lrcLineList = lrcLine.split("]") for index in range(len(lrcLineList) - 1): timeStr = lrcLineList[index][1:] #print(timeStr) timeList = timeStr.split(":") timea = float(timeList[0]) * 60 + float(timeList[1]) #print(timea) lrcDict[timea] = lrcLineList[-1] #print(lrcDict) allTimeList = [] for t in lrcDict: allTimeList.append(t) allTimeList.sort() #print(allTimeList) #在字典里将数据调出来然后按照时间间隔将数据显示出来 #效果是一行一行的刷新 getTime = 0 while 1: for n in range(len(allTimeList)): tempTime = allTimeList[n] if getTime < tempTime: break lrc = lrcDict.get(allTimeList[n]) if lrc == None: pass else: print(lrc) if n in range(len(allTimeList) - 1): time.sleep(allTimeList[n + 1] - allTimeList[n]) getTime += (allTimeList[n + 1] - allTimeList[n]) else: break

2019-01-21

Python零基础学习笔记（十一）—— 运算符和表达式2

''' 位运算符：按位运算是把数字看作是二进制数来计算 & / ^ ~ << >> ''' #与运算： & （同 1 为 1，否则为 0） print(5 & 7) #或运算： | （有 1 为 1，同 0 则 0） print(5 | 7) #异或运算：^ （相同为 0，不同为 1） print(5 ^ 7) # 取反：~ （1 变为 0， 0 变为 1） print(~2) #左移运算符： << （） #各二进制位全部左移若干位，高位丢弃，低位补零，<< 右侧的数字决定移动几位 print(2<<2) #右移运算符： >> （） #各二进制位全部右移若干位，高位丢弃，低位补零，<< 右侧的数字决定移动几位 print(10>>1) ''' 关系运算符和关系运算表达式关系运算符： == ！= > < >= <= 关系运算表达式：格式：【表达式1】关系运算符【表达式2】功能：计算【表达式1】和【表达式2】的值值：如果关系成立，整个关系运算表达式的值为真，否则为假 ''' ''' 逻辑运算符（3种）逻辑与： and 逻辑与运算表达式：【表达式1】 and 【表达式2】值：【表达式1】【表达式2】同真为真，有假则为假 **短路原则：【表达式1】 and 【表达式2】 and 【表达式3】 .....and 【表达式n】从前向后执行，遇到假就立刻停止逻辑或： or 逻辑或运算表达式：【表达式1】 or 【表达式2】值：【表达式1】【表达式2】有一个为真就是真，都是假为假 **短路原则：【表达式1】 or 【表达式2】 or 【表达式3】 .....or 【表达式n】从前向后执行，遇到真就立刻停止逻辑非： not 逻辑非运算表达式： not 【表达式1】值：真变假，假变真 ''' ''' 成员运算符 in：如果在指定序列中找到值返回True，否则返回False not in：如果在指定序列中没有找到值返回True，否则返回False ''' ''' 身份运算符 is：判断两个标识符是不是引用同一个对象 is not：判断两个标识符是不是引用不同的对象 ''' ''' 运算符优先级 ** ~ +（正） -（负） * / % // +（加） -（减） >> << & ^ | <= < > >= == != = %= += -= //= **= /= is is not in not in not or and ''' print(~2) ''' 取反过程：内存中都是补码的形式存储 2在内存中存的补码是 00000000 00000000 00000000 00000010 2在内存中存的补码取反 11111111 11111111 11111111 11111101 求原码（除符号位，逐位取反，末位＋1） 10000000 00000000 00000000 00000011 则结果为-3 '''

2019-01-16

学数据分析到底要不要掌握Linux-Python基础前传（2）

没有必要再花时间来学习Linux; 这里jacky有一个明确的态度：就是以Python为职业的数据分析师，如果不熟练掌握Linux那就是一个笑话，理由如下： 1、Python已属于编程范畴，如果对于一个无编程基础的

2019-01-08

Docker 与 Kubernetes（k8s）在企业基础设施服务的应用

为了说明这个问题，我们来回顾下基础设施层多年以来的苦苦挣扎~ 二、提升抽象层级是基础设施的宿命不知道各位有没有了解过OASIS指定的TOSCA规范，一个面向云应用拓扑和编排的规范，这个规范的工作已经开始了五年多

2018-12-15

Kubernetes—— K8S基础（完全参考总结于张磊《深入剖析Kubernetes》

K8S基础 K8S基础架构 K8S解决的问题是什么？ k8s全景图 k8s Secret对象声明式API K8S基础架构基础架构图如下所示，我们可以看到master 节点和Node节点。

2018-12-14

[雪峰磁针石博客]python数据结构基础工具书籍下载-持续更新

书中的前三章将帮助你打下基础，带你学习二分查找、大O表示法、两种基本的数据结构以及递归等。

2018-11-25

ASP.NET三层架构基础详细操作图文教程(二）

如图： ASP.NET三层架构基础详细操作图文教程(二）然后我们在BLL项目中添加Userinformation_BLL.cs类文件。

2018-10-24

第四章：Spring框架装配Bean的三种方式（基础）

欢迎查看Java开发之上帝之眼系列教程，如果您正在为Java后端庞大的体系所困扰，如果您正在为各种繁出不穷的技术和各种框架所迷茫，那么本系列文章将带您窥探Java庞大的体系。本系列教程希望您能站在上帝的角度去观察（了解）Java体系。使Java的各种后端技术在你心中模块化；让你在工作中能将Java各个技术了然于心；能够即插即用。本章我们来一起了解你的老朋友Spring框架。本章我们一起来探讨SpringBean的装配，所谓 ”装配“ 就是值将Bean安装Bean容器中并进行依赖关系配置，稍微提一下IOC控制反转就是指的安装这一过程中，而DI依赖指的是配置这一过程。本章我们就Spring应用中如何进行装配Bean进行讲解；如自动化装配，Java配置装配，XML配置装配方式进行介绍，但本章并不会介绍Spring项目全局配置方案，我们会在下一章中单独介绍Spring基于Java的全局配置和基于XML的全局配置的两种方案。本章提供三个完整源码测试，Github源码下载地址 Spring的三种装配机制隐式的Bean发现机制和自动装配在Java中进行装配在XML中进行装配值得一提的是，我们在项目中应该优先实用隐式的Bean发现机制和自动装配，其次使用在Java中进行装配，最后再使用在XML中进行装配。隐式的Bean发现机制和自动装配隐式Bean发现和自动装配测试源码 Spring从两个角度来实现自动化装配；组件扫描（Spring自动发现应用中上下文所需要的创建的Bean），自动装配（Spring自动满足Bean之间的依赖）使用@Component将普通Java类配置成SpringBean 使用@Autowired（自动装配）使Spring满足Bean的依赖配置组件扫描包（组件扫描）在Java类中配置组件扫描 @ComponentScan("com.jimisun.controller") 在XML配置文件配置组件扫描 <context:component-scan base-package="com.jimisun.controller,com.jimisun.service"/> 示例 @Component public class User { @Autowired private Article article; public void action() { article.action(); } } 注意：示例中使@Component将Java类声明成SpringBean，除了这一注解你还可以使用@Controller，@Service，@Repository等注解... 同样@Autowired也可使用其他注解来代替，这里为了简明介绍不再陈述。基于Java的Bean装配基于Java装配Bean完整源码同样我们可以再Spring的Java配置类中对SpringBean进行配置使用 @Bean 注解将方法返回的实例对象添加到上下文中在 @Bean 返回的实例对象中可以通过构造器注入传入相关依赖示例 @Configuration @ComponentScan("com.jimisun") public class WebConfig { @Bean public User user() { return new User(myArticle()); } @Bean public MyArticle myArticle() { return new MyArticle(); } } 注意：如果你没有接触过基于java配置Bean的装配的话，不需要着急，这里只需要你理解SpringBean装配的全局信息，下章我们会更为详细的介绍。基于XML的Bean装配基于XML装配Bean完整源码对于在XML中进行配置可能使我们经常使用的，在以前的Spring版本中几乎我们都是使用XML进行配置Spring，下面我们简单来看一下。示例 <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-4.0.xsd"> <bean class="com.jimisun.spring.example.User" id="user"> <constructor-arg ref="myArticle"/> </bean> <bean class="com.jimisun.spring.example.MyArticle" id="myArticle"></bean> </beans> 注意：在实际应用中如何不想被海量的标签埋没前，你应当优先使用隐式的Bean发现机制和自动装配和在Java中进行装配，最后再选择使用在XML中配置。最后值得一提的是在实际项目中我们通常都会选择组合使用隐式的Bean发现机制和Java中进行装配进行组合隐式的Bean发现机制和XML配置进行组合这样便于我们更方便的配置Spring项目，下一章我们会针对全局的Spring项目的配置进行介绍。 Java开发之上帝之眼系列教程其他文章 Java开发之上帝之眼系列教程前言和章节目录汇总重新来认识你的老朋友Spring框架勘误&感谢本系列文章资料来源很多出自于互联网和在下本身的见解，受限于个人技术能力水平和其他相关知识的限制，相关见解错误或者资料引用错误请各位帮助留言校正！引用资料多来自于互联网，在下在引用前会遵循各位前辈或者博主的引用说明表示感谢，但互联网资料多是转发再转发或存在遗漏请原作者内信联系指正。

2018-10-04

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。