搜索[学习]结果-低调大师优秀个人博客

精选列表

搜索[学习]，共10000篇文章

Hadoop MapReduce概念学习系列之不同的瑞士军刀：对比 Spark 和 MapReduce（十五）

尽管需要一定时间去学习语法，Pig 还是在一定程度上简化了这个过程， Hive也为平台提供了 SQL 的兼容。一些 Hadoop 工具也可以无需编程直接运行 MapReduce 任务。

2017-11-13

Hadoop概念学习系列之谈hadoop/spark里为什么都有，YARN呢？（四十一）

在Hadoop集群里，有三种模式: 1、本地模式 2、伪分布模式 3、全分布模式在Spark集群里，有四种模式： 1、local单机模式结果xshell可见： ./bin/spark-submit --class org.apache.spark.examples.SparkPi --master local[1] ./lib/spark-examples-1.3.1-hadoop2.4.0.jar 100 这里写local，就是local[1] 2、standalone集群模式需要的配置项 1, slaves文件 spark002 spark003 2, spark-env.sh export JAVA_HOME=/usr/soft/jdk1.7.0_71 export SPARK_MASTER_IP=spark001 export SPARK_MASTER_PORT=7077 export SPARK_WORKER_CORES=1 export SPARK_WORKER_INSTANCES=1 export SPARK_WORKER_MEMORY=1g 3、standalone集群模式之client模式：结果xshell可见： ./bin/spark-submit --class org.apache.spark.examples.SparkPi --master spark://spark001:7077 --executor-memory 1G --total-executor-cores 1 ./lib/spark-examples-1.3.1-hadoop2.4.0.jar 100 3、standalone集群模式之cluster模式：结果spark001:8080里面可见！ ./bin/spark-submit --class org.apache.spark.examples.SparkPi --master spark://spark001:7077 --deploy-mode cluster --supervise --executor-memory 1G --total-executor-cores 1 ./lib/spark-examples-1.3.1-hadoop2.4.0.jar 100 --supervise是进程监控 4、Yarn集群模式需要的配置项 1, spark-env.sh export HADOOP_CONF_DIR=$HADOOP_INSTALL/etc/hadoop export YARN_CONF_DIR=$HADOOP_INSTALL/etc/hadoop export SPARK_HOME=/usr/hadoopsoft/spark-1.3.1-bin-hadoop2.4 export SPARK_JAR=/usr/hadoopsoft/spark-1.3.1-bin-hadoop2.4/lib/spark-assembly-1.3.1-hadoop2.4.0.jar export PATH=$SPARK_HOME/bin:$PATH 2, ~/.bash_profile 配置好hadoop环境变量 4、Yarn集群模式client模式：结果xshell可见： ./bin/spark-submit --class org.apache.spark.examples.SparkPi --master yarn-client --executor-memory 1G --num-executors 1 ./lib/spark-examples-1.3.1-hadoop2.4.0.jar 100 4、Yarn集群模式cluster模式：结果spark001:8088里面可见！ ./bin/spark-submit --class org.apache.spark.examples.SparkPi --master yarn-cluster --executor-memory 1G --num-executors 1 ./lib/spark-examples-1.3.1-hadoop2.4.0.jar 100 hadoop/spark里为什么都有，YARN呢？答：普通OS（操作系统）的功能主要是为处理器管理、存储器管理、设备管理、文件管理、作业管理和用户接口。在集群环境下，HDFS已经负责了文件管理，而设备概念较弱，故YARN主要负责统一管理集群内服务器的计算资源（主要包括CPU和内存资源）、作业调度和用户接口。本文转自大数据躺过的坑博客园博客，原文链接：http://www.cnblogs.com/zlslch/p/6092539.html，如需转载请自行联系原作者

2017-11-12

Silverlight/WPF/WP7一周学习导读(12月6-12月12)

Silverlight FireStarter 2010 Labs 为了方便大家学习和了解Silverlight 5新特性，微软将FireStarter大会所有的技术课程进行了汇总，发布Silverlight

2017-11-09

android学习笔记7天打造一个简易网络Mp3播放器

#2, 2,Java基础 #3,尝试学习并总结,List,Map的使用,以及其迭代方式,添加数据等 3,SimpleAdapter的使用 #4,不会的请看视频[Android开发视频教学].01_13_

2017-11-09

Amazon宣布将MXNet作为AWS的深度学习框架——貌似性能比tf高啊

Vogles指出在欺诈检测、推荐流水线、库存和产品检查审计等领域，有一系列无法通过编写显式算法实现的计算任务，对此问题一类被称为深度学习的机器学习方法正日益发挥重要作用，此外，在内容搜索、自主无人机、订单履行中心机器人

2017-11-08

将旗下的深度学习平台免费开放，美团云到底是怎么考虑的？

随着人工智能和大数据的火热，与二者紧密相连的云服务也成为一片热土；除了从一开始就扎根于云服务行业的垂直厂商，更有不少具有一定体量的互联网公司跨界而入，BAT 如此，网易如此，京东亦如此。实际上，连起家于团购和外卖行业的美团也已经趁势入局。左手 Intel，右手 NVIDIA 10 月 31 日，美团点评旗下的云服务美团云，以“赋能 AI 共生共赢”为主题，在北京举行了 2017 年美团云人工智能峰会，这也是美团云首次举办面向行业的此类峰会。在此次峰会上，美团云总经理李爽率先展示了美团云在硬件上的新动向，新增了两款高性能的 AI 云主机；一款基于 Intel Xeon Phi，另一台基于NVIDIA的 Tesla V100。据雷锋网了解，采用最新 Intel Xeon Ph 的云主机在性能、虚拟化、灵活性等方面有着大幅提升，将极大

2017-11-02

一脸懵逼学习Hive的元数据库Mysql方式安装配置

1：要想学习Hive必须将Hadoop启动起来，因为Hive本身没有自己的数据管理功能，全是依赖外部系统，包括分析也是依赖MapReduce； 2：七个节点跑HA集群模式的：第一步：必须先将Zookeeper

2017-10-20

将机器学习、人工智能、数据挖掘融合的Testin 2.0有哪些不同之处

最近Testin2.0也将机器学习、人工智能、数据挖掘融合到原有产品中让测试效果有更大的提升。

2017-09-07

《中国人工智能学会通讯》——11.76 基于深度学习的特征表示模型

11.76 基于深度学习的特征表示模型随着数据规模不断增大，深度学习在大数据分析中扮演着越来越重要的角色。

2017-09-04

人工智能大牛的新年启示：未来要看无监督学习、自然语言处理

无监督学习是未来 Spectrum：对于一般意义上的机器学习，还有多少是有待发掘的？ LeCun：太多了。我们在实际的深度学习系统中使用的学习方式还是存在局限的。

2017-09-04

TensorFlow 中文资源精选，官方网站，安装教程，入门教程，实战项目，学习路径。

Awesome-TensorFlow-Chinese TensorFlow 中文资源全集，学习路径推荐：官方网站，初步了解。安装教程，安装之后跑起来。入门教程，简单的模型学习和运行。

2017-09-01

从吴恩达看深度学习，一定要做好这五件事！

据悉，该公司主要专注于无人驾驶软件技术的研究，主要是运用深度学习技术，这与吴恩达的研究方向相符。现在，很多科技圈的大佬都瞄准了深度学习，都认为其在未来会给人类的生活带来很大价值。

2017-09-01

最近一个多月我学习的关于数据双活的文章与书籍

image.png 一、Mysql数据库双活 1、Mysql binlog介绍官网：https://dev.mysql.com/doc/refman/5.5/en/binary-log.html 中文： http://www.cnblogs.com/Richardzhu/p/3225254.html http://www.cnblogs.com/martinzhang/p/3454358.html 2、阿里数据库同步工具Canal 官网：https://github.com/alibabatech/canal/ 使用介绍：阿里巴巴开源项目: canal 基于mysql数据库binlog的增量订阅&消费利用Canal完成Mysql数据同步Redis 搭建： canal部署与实例运行 MySQL增量订阅&消费组件Canal POC 分布式集群项目中同步DB数据的解决方案之Canal Canal源码分析---模拟Slave同步binlog 用 Canal 监控mysql数据变化使用 Binlog 和 Canal 从 MySQL 抽取数据 3、Mysql数据双活 sql高可用架构方案之中的一个(keepalived+主主双活) 大话数据中心双活二、Oracle双活 1、Kettle实现数据同步在Kettle里使用时间戳实现变化数据捕获（CDC） kettle参数、变量详细讲解实时同步，增量ETL方案分享（源表含时间戳，做逻辑删除） Kettle Spoon 表输入组件报“无效的列索引”错误解决方案关于Kettle的推荐书籍如下： image.png 2、使用Databus实现数据库同步 LinkedIn实时低延迟数据抓取系统Databus开源 Databus中文教程 Databus项目开源地址 3、Oracle日志数据同步基于Oracle Logminer数据同步 OGG实现两台Oracle数据库的同步基于OGG的Oracle与Hadoop集群准实时同步介绍 ORACLE 几种同步灾备手段（OGG，ADG，DSG，高级复制，流复制，logmnr） Oracle11gR2下搭建DataGuard主备同步详解

2017-08-18

如何搭建大规模机器学习平台？以阿里和蚂蚁的多个实际场景为例

近年来，随着“大”数据及“大”模型的出现，学术界和工业界对分布式机器学习算法引起了广泛关注。针对这一刚需，本论文设计了一个独一无二的分布式平台——鲲鹏。

2017-08-15

英特尔Omni-Path让视频深度学习性能提升近百倍

“借助基于英特尔全新一代至强融核处理器的高性能计算能力，Viscovery首次尝试构建CPU-Only的全新架构的视频深度学习平台，在视频流识别的能效上比传统方案提升明显。”

2017-08-02

浪潮发布GPU 深度学习一体机，大幅提升性能及生产力

美国当地时间11月16日，在盐湖城举行的全球超算大会SC16上，浪潮发布了深度学习一体机D1000，该产品部署了采用NVIDIA® Tesla™ GPU技术的浪潮高性能计算集群，运行多节点并行深度学习框架

2017-08-02

GPU驱动“后摩尔定律时代” 为HPC和深度学习提供强大加速动力

同时在GPU的驱动下全球和中国都掀起了深度学习热潮，GPU也已成为深度学习研究的首选技术平台。

2017-08-02

浪潮科大讯飞Altera用OpenCL实现FPGA深度学习语音识别加速方案

10 FPGA平台、采用OpenCL开发语言进行并行化设计和优化的深度学习DNN的语音识别方案。

2017-08-02

谷歌收购 Kaggle 为什么会震动三界（AI、机器学习、数据科学界）？

但是，Google+Kaggle，即便不进行任何发酵，也是震动数据科学、AI、机器学习三界（好吧，在很多方面“三界”本是一体）的大事件。

2017-08-02

深度学习之经典卷积神经网络的技术浅析 | 硬创公开课预告

卷积神经网络（Convolutional Neural Networks）是人工神经网络的重要分支，目前已经成为语音和图像识别领域的一大研究热点。特别是在图像识别领域，由于其特有的权值共享网络结构，大大降低了模型复杂度，减少了权值数量，因此可以直接将多维图像作为输入数据展开训练，有效避免了传统识别算法中复杂的特征提取和数据重建过程。逐本溯源，卷积结构最早出现于 1984 年的神经认知机（NeoCognitron）。发展到 1998 年，诞生了第一代经典卷积神经网络 LeNet，但随着支持向量机 SVM（Support Vector Machine）的出现，卷积神经网络一度归于沉寂。后来，随着 ReLu（Rectified Linear Units）和 Dropout 等激活函数的提出，以及 GPU 和大数据带来的历史机遇，卷积神经

2017-08-02

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

精选列表

Hadoop MapReduce概念学习系列之不同的瑞士军刀：对比 Spark 和 MapReduce（十五）

Hadoop概念学习系列之谈hadoop/spark里为什么都有，YARN呢？（四十一）

Silverlight/WPF/WP7一周学习导读(12月6-12月12)

android学习笔记7天打造一个简易网络Mp3播放器

Amazon宣布将MXNet作为AWS的深度学习框架——貌似性能比tf高啊

将旗下的深度学习平台免费开放，美团云到底是怎么考虑的？

一脸懵逼学习Hive的元数据库Mysql方式安装配置

将机器学习、人工智能、数据挖掘融合的Testin 2.0有哪些不同之处

《中国人工智能学会通讯》——11.76 基于深度学习的特征表示模型

人工智能大牛的新年启示：未来要看无监督学习、自然语言处理

TensorFlow 中文资源精选，官方网站，安装教程，入门教程，实战项目，学习路径。

从吴恩达看深度学习，一定要做好这五件事！

最近一个多月我学习的关于数据双活的文章与书籍

如何搭建大规模机器学习平台？以阿里和蚂蚁的多个实际场景为例

英特尔Omni-Path让视频深度学习性能提升近百倍

浪潮发布GPU 深度学习一体机，大幅提升性能及生产力

GPU驱动“后摩尔定律时代” 为HPC和深度学习提供强大加速动力

浪潮科大讯飞Altera用OpenCL实现FPGA深度学习语音识别加速方案

谷歌收购 Kaggle 为什么会震动三界（AI、机器学习、数据科学界）？

深度学习之经典卷积神经网络的技术浅析 | 硬创公开课预告

资源下载

优质分享App

腾讯云软件源

Spring

Sublime Text

欢迎您来访！