笔记列表-低调大师优秀个人博客

文章列表

共 97898 篇

2019-01-27

[雪峰磁针石博客]大数据Hadoop工具python教程２-python访问HDFS

https://pypi.org/project/hdfs3 已经不维护PyArrowhttps://pypi.org/project/hdfs/https://pypi.org/project/snakebite/ python2中比较好，对python3支持不好。 hdfs和PyArrow比较常用，这里以hdfs为例：快速入门 from hdfs i...

718

阅读约2分钟

2019-01-27

[雪峰磁针石博客]大数据Hadoop工具python教程3-MapReduce

MapReduce是一种编程模型，通过将工作分成独立的任务并在一组机器上并行执行任务，可以处理和生成大量数据。 MapReduce编程风格的灵感来自函数式编程结构map和reduce，它们通常用于处理数据列表。在高层MapReduce程序将输入数据元素列表转换为输出数据元素列表两次，一次在映射阶段，一次在还原阶段。本章首先介绍MapReduce编程模型，并...

679

阅读约43分钟

2019-01-27

[雪峰磁针石博客]大数据Hadoop工具python教程4-mrjob

mrjob是由Yelp创建的Python MapReduce库，它封装了Hadoop流，允许MapReduce应用程序以更加Pythonic的方式编写。 mrjob用纯Python编写多步MapReduce作业。使用mrjob编写的MapReduce作业可以在本地测试，在Hadoop集群上运行，或使用Amazon Elastic MapReduce(EMR)...

754

阅读约6分钟

2019-01-27

[雪峰磁针石博客]大数据Hadoop工具python教程9-Luigi工作流

管理Hadoop作业的官方工作流程调度程序是Apache Oozie。与许多其他Hadoop产品一样，Oozie是用Java编写的，是基于服务器的Web应用程序，它运行执行Hadoop MapReduce和Pig的工作流作业。 Oozie工作流是在XML文档中指定的控制依赖性指导非循环图(DAG)中排列的动作集合。虽然Oozie在Hadoop社区中有很多支持...

682

阅读约11分钟

2019-01-27

[雪峰磁针石博客]pyspark工具机器学习(自然语言处理和推荐系统)1数据演进

在早期员工将数据输入系统，数据点非常有限，只占用少数几个字段。然后是互联网，每个人都可以轻松获取信息。现在，用户可输入并生成自己的数据。随着互联网用户数量呈指数级增长，用户创造的高数据增长率。例如：登录/注册表单允许用户填写自己的详细信息，在各种社交平台上上传照片和视频。这导致了巨大的数据生成以及快速处理数据量的且可扩展的框架的需求。数据生成设备都捕获数...

761

阅读约5分钟

2019-01-27

[雪峰磁针石博客]pyspark工具机器学习(自然语言处理和推荐系统)2数据处理1

本章介绍数据处理。数据处理是执行Machine Learning所需的关键步骤，因为我们需要清理，过滤，合并和转换我们的所需数据形式。快速入门读取 >>> from pyspark.sql import SparkSession >>> spark=SparkSession.builder.appName('data_...

601

阅读约22分钟

2019-01-27

2019年，如何从小白升级到大牛程序员呢？

写在前面 2018已经悄悄的走了，2019也已经匆匆的来了，我们在总结过去的同时，也要展望一下未来。俗话说一年之计在于春，我觉得我们如果想从小白升级到大牛，应该早做计划，规划一下今年要学哪些新的技能呢？我们来一一探讨一下。 SpringBoot Spring Boot：是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及...

699

阅读约12分钟

2019-01-27

如何低成本建立属于自己的网站？

网站是什么? 网站的定义网站是什么?可能大部分人头脑中出现的第一映像就是淘宝啊、京东啊、网易，但若要问对于网站的定义，很多人却答不出来，百度百科是这样定义网站的：网站(Website)是指在因特网上根据一定的规则，使用HTML(标准通用标记语言下的一个应用)等工具制作的用于展示特定内容相关网页的集合。简单地说，网站是一种沟通工具，人们可以通过网站来发布自...

709

阅读约6分钟

2019-01-27

Kubernetes 实战教学，手把手教您在 K8s 集群上部署 Istio Mesh（一）

出品丨Docker公司（ID：docker-cn）编译丨小东每周一、三、五，与您不见不散！在之前的两篇 Kubernetes 实战教学文章《Kubernetes 实战教学，手把手教您设置拥有5个节点的 K8S 群集》、《Kubernetes 实战教学，手把手教您运行第一个 Nginx 集群》中，我展示了如何构建5个节点的 Kubernetes 集群以及如何...

806

阅读约6分钟

2019-01-26

EDAS-初始化安装脚本报错

浅谈 EDAS 的初始化脚本主要目的是安装 EDAS 客户端机器上一些初始化的运行时环境，保证 EDAS 部署时正常运行。同时将 ECS 同步到 EDAS的默认集群中；案例客户端执行 EDAS 初始化安装脚本时报链接失败如下图；分析 1）下载 install.sh 脚本遇到类似的错误，先将 install.sh 脚本中下载的 install0_lit...

659

阅读约1分钟

2019-01-26

Unity 2018.2之粒子

纹理Mipmap流在Unity 2018.2中，我们根据需要向内存添加了纹理Mipmap流支持，启用此功能可以减少Unity应用的纹理内存要求。 1 如何运行启用此系统后，Unity将仅在网格靠近已激活的摄像机时，加载更高分辨率的纹Mipmap。高分辨率Mipmap数据保存在内存中，整体的纹理内存会限制在用户定义的预算范围内。如果在加载新的纹理Mipl...

785

阅读约4分钟

2019-01-26

Java总结 - List实现类ArrayList&LinkedList

本文是根据源码进行学习的,如果我有什么理解不对的地方请多指正,谢谢您上面基本就是List集合类的类图关系了,图中省略掉了比如Cloneable等标记接口,那么List分别具体的主要实现类有:ArrayList,Vector,LinkedList,Stack,那么这篇文章会对这四个实现类进行介绍(由于篇幅原因,本文只说到了ArrayList和LinkedLi...

695

阅读约2分钟

2019-01-26

传统同步阻塞式I/O模型(BIO)

传统BIO编程网络编程的基本模型是Client/Server模型，就是两个进程之间进行相互通信，Server端提供绑定的IP地址和监听端口，客户端通过连接操作向服务端监听的地址发起连接请求，通过三次握手建立连接，建立成功之后就可以通过Socket通信。在BIO模型开发中，ServerSocket负责绑定IP地址，启动监听端口；Socket负责发起连接操作，...

814

阅读约4分钟

2019-01-26

[译]PEP 342--增强型生成器：协程

PEP原文： https://www.python.org/dev/peps/pep-0342/ PEP标题： Coroutines via Enhanced Generators PEP作者： Guido van Rossum, Phillip J. Eby 创建日期： 2005-05-10 合入版本： 2.5 目录简介动机规格摘要规格：将值发送...

556

阅读约34分钟

2019-01-26

Python获取IP地址对应的地理位置信息！

开发工具 Python版本：3.6.4相关模块：IPy模块；argparse模块；requests模块；以及一些Python自带的模块。环境搭建安装Python并添加到环境变量，pip安装需要的相关模块即可。先睹为快 py文件运行方式(cmd窗口)：python ipLocQuery.py -ip ipaddrpython ipLocQuery.py ...

778

阅读约3分钟

2019-01-26

Python零基础学习笔记（四十）—— datetime和Calendar

import datetime import time ''' datetime比time高级了不少，可以理解为date time基于time进行了封装，提供了各种实用的函数，date time模块的接口更为直观，更容易调用模块中的类： datetime 同时有时间和日期 timedelta 主要用于计算时间跨度 tzinfo 时区相关 time 只关注...

618

阅读约3分钟

2019-01-26

Python零基础学习笔记（三十九）—— time

#UTC（世界协调时间）：格林尼治天文时间，世界标准时间，在中国来说是UTC+8（东八区） #DST（夏令时）：是一种节约能源而人为规定的时间制度，在夏季调快一个小时 ''' 时间的表示形式： 1、时间戳以整形或浮点型表示时间的一个以秒为单位的时间间隔时间间隔的基础值是从1970年1月1号0点开始算起的 2、元组一种Python的数据结构表示，这个元组...

681

阅读约4分钟

2019-01-26

CountDownLatch详解

功能描述一个同步辅助类，在完成一组正在其他线程中执行的操作之前，它允许一个或多个线程一直等待。常见用法多个人等一个信号后继续执行操作。例如5个运动员，等一个发令员的枪响。一个人等多个人的信号。旅游团等所有人签到完成才开始出发。我们最常见见到使用的地方是zk获取连接的时候 final CountDownLatch countDownLatch=new C...

723

阅读约1分钟

2019-01-26

Java spring boot 2.0连接mysql异常：The server time zone value 'ÖÐ¹ú±ê×¼Ê±¼ä...

java.sql.SQLException: The server time zone value 'ÖÐ¹ú±ê×¼Ê±¼ä' is unrecognized or represents more than one time zone. You must configure either the server or JDBC driver (via the...

640

阅读约4分钟

2019-01-26

PHP 7.3声称速度比PHP 5快3倍还多，值得更新了！

PHP 7.3声称速度比PHP 5快3倍还多，值得更新了！作为PHP5的最后一个版本，也是目前使用最广泛的PHP版本，PHP 5.6始于公元2014年（不是1804年，嘿嘿），其第一个测试版PHP 5.6 alpha 1版于2014年1月发布。随机产生了第一个由国人（鸟哥,惠新宸）参与主研的性能大规模提升版本PHPNG（PHP next generatio...

565

阅读约7分钟

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

文章列表

[雪峰磁针石博客]大数据Hadoop工具python教程２-python访问HDFS

[雪峰磁针石博客]大数据Hadoop工具python教程3-MapReduce

[雪峰磁针石博客]大数据Hadoop工具python教程4-mrjob

[雪峰磁针石博客]大数据Hadoop工具python教程9-Luigi工作流

[雪峰磁针石博客]pyspark工具机器学习(自然语言处理和推荐系统)1数据演进

[雪峰磁针石博客]pyspark工具机器学习(自然语言处理和推荐系统)2数据处理1

2019年，如何从小白升级到大牛程序员呢？

如何低成本建立属于自己的网站？

Kubernetes 实战教学，手把手教您在 K8s 集群上部署 Istio Mesh（一）

EDAS-初始化安装脚本报错

Unity 2018.2之粒子

Java总结 - List实现类ArrayList&amp;LinkedList

传统同步阻塞式I/O模型(BIO)

[译]PEP 342--增强型生成器：协程

Python获取IP地址对应的地理位置信息！

Python零基础学习笔记（四十）—— datetime和Calendar

Python零基础学习笔记（三十九）—— time

CountDownLatch详解

Java spring boot 2.0连接mysql异常：The server time zone value 'ÖÐ¹ú±ê×¼Ê±¼ä...

PHP 7.3声称速度比PHP 5快3倍还多，值得更新了！

资源下载

Mario

Nacos

Spring

Sublime Text

欢迎您来访！

Java总结 - List实现类ArrayList&LinkedList