搜索[数据索引]结果-低调大师优秀个人博客

精选列表

搜索[数据索引]，共10000篇文章

大数据另一个方向——大数据变成“小数据”

大数据有两个发展方向。一个是方向大家比较熟悉的“数据收集、分析”，借此了解客户需求、明确产品方向等等。

2017-07-02

实例解析Docker数据卷+数据卷容器+flocker数据共享+DockerHub操作

Docker内部数据管理和Docker之间的数据共享为数据卷和数据卷容器,实例解析1.将本地的文件作为容器的数据卷,2.数据卷flocker插件实现容器集群(或者Docker Swarm)的数据共享3.

2016-08-20

数据治理平台如何清理脏数据问题？数据治理平台怎样落地统一数据治理流程？

前阵子跟一家制造企业的数据负责人聊天，他说了一件事让我印象很深。月度经营分析会上，管理层发现华东区销售额比上月跌了18%，要求业务部门解释。

2026-09-23

23、 Python快速开发分布式搜索引擎Scrapy精讲—craw母版l创建自动爬虫文件—以及 scrapy item loader机制

ItemLoader类，加载items容器类填充数据，是列表类型，可以通过TakeFirst()方法，获取到列表里的内容 input_processor = MapCompose(预处理函数)设置数据字段的预处理函数

2019-07-12

ES里设置索引中倒排列表仅仅存文档ID——采用docs存储后可以降低pos文件和cfs文件大小

index_options Theindex_optionsparameter controls what information is added to the inverted index, for search and highlighting purposes. It accepts the following settings: docs Only the doc number is indexed. Can answer the questionDoes this term exist in this field? freqs Doc number and term frequencies are indexed. Term frequencies are used to score repeated terms higher than single terms. positions Doc number, term frequencies, and term positions (or order) are indexed. Positions can be used forproximity or phrase queries. offsets Doc number, term frequencies, positions, and start and end character offsets (which map the term back to the original string) are indexed. Offsets are used by thepostings highlighter. Analyzedstring fields usepositionsas the default, and all other fields usedocsas the default. PUT my_index { "mappings": { "my_type": { "properties": { "text": { "type": "text", "index_options": "offsets" } } } } } PUT my_index/my_type/1 { "text": "Quick brown fox" } GET my_index/_search { "query": { "match": { "text": "brown fox" } }, "highlight": { "fields": { "text": {} } } } COPY AS CURL VIEW IN CONSOLE Thetextfield will use the postings highlighter by default becauseoffsetsare indexed. 转自：https://www.elastic.co/guide/en/elasticsearch/reference/current/index-options.html 注意：ES2.41里没有text这个type curl -XPUT 'http://localhost:9200/hec_test2' -d ' { "mappings": { "hec_type2": { "properties": { "filed-0": { "type": "string", "index_options": "docs" }, "filed-1": { "type": "string", "index_options": "docs" } } } } } ' 比较测试：可以比默认的节省10+%的存储空间！本文转自张昺华-sky博客园博客，原文链接：http://www.cnblogs.com/bonelee/p/6397522.html，如需转载请自行联系原作者

2017-11-07

数据采集

本页目录数据采集数据采集所有的大数据分析系统都基于一个前提，即数据需要采集进入大数据系统。

2018-11-13

数据运算

算术运算 <meta charset="UTF-8"> <script type="text/javascript"> /* 算术运算*/ var num1 = 2; var num2 = 3; // 加法 var sum = num1 + num2; // 5 // 减法 var minus = num1 - num2; // -1 // 乘法 var aa = num1 * num2; // 6 // 除法 var bb = num1 / num2; //0.666666 // 取余 var cc = num1 % num2; // 2 // 自加、自减 var i = 10; var m = 10 + i++; console.log('m',m); // 20 console.log(i); // 11 var j = 5; var n = 10 + (++j); console.log('n',n); // 16 </script> 逻辑运算 <meta charset="UTF-8"> <script type="text/javascript"> // 逻辑非 var boo1 = true; var boo2 = !boo1; // false var num = 2; var num2 = !num; console.log('num2',num2); // false ??? // 逻辑与: 同时为真结果为true，只要有一个为false结果为false； var a = true; var b = true; var c = false; var d = false; var x = a && b; // true var y = a && c; // false var z = c && d; // false // 逻辑或: 只要有一个为真就为true var o = a || b; // true; var p = a || c; // true; var q = c || d; // false; </script> 比较运算 <meta charset="UTF-8"> <script type="text/javascript"> var a = 10; var b = 20; var c = '20'; var boo1 = a > b; // false console.log('==',b == c); // true 运算的时候c会自动转换成数字20，然后再比较 console.log('===', b === c); // false 先比较变量的类型，再比较变量的值 </script>

2018-07-24

数据解析

●网络解析 Gson （一个Java序列化/反序列化库，可以将JSON和java对象互相转换） Jackson （Jackson可以轻松地将Java对象转换成json对象和xml文档，同样也可以将json、xml转换成Java对象） Fastjson （Java上一个快速的JSON解析器/生成器） HtmlPaser （一种用来解析单个独立html或嵌套html的方式） Jsoup （一个以最好的DOM，CSS和jQuery解析html的库）

2018-04-07

数据杂谈

目录前言数据数据系统大数据数据统计个性化推荐总结参考资料前言记得几年前，曾经有人预测过未来最流行的三大技术：大数据、高并发、数据挖掘。

2018-02-08

数据集

ImageNet ILSVRC LFW MNIST TIMIT SVHN TIMIT数据库（一）：介绍 -机器学习数据集(Dataset)汇总写个Python脚本下载并解压 MNIST 数据集 python

2017-08-28

数据异构

大数据量的异构处理？通过MQ机制接收数据变更，然后原子化存储到合适的存储引擎，如Redis、ES或持久化KV存储。

2017-08-07

容器数据

数据卷数据卷提供了一种主机和容器共享数据的方式，有些时候需要用它来做持久化和数据共享。当做持久化时，通常数据卷都会比较大，可以将其放在单独的磁盘、卷或者阵列上，这个时候容器只是一个执行环境。

2017-02-13

AI 数据工程：模型上限由数据决定

很多人对数据准备的理解是：拉数据、去空值、格式化、喂给模型。实际项目里真正出问题的是这些：

2026-10-19

破除数据烟囱，推进政务数据共享

大数据为政府治理变革带来机遇。国家先后出台《促进大数据发展行动纲要》《“十三五” 国家信息化规划》，要求打破信息孤岛，推动跨部门、跨层级数据共享，提升协同治理能力。

2026-10-15

基于智能数据架构的数据治理方法

数据治理，无论是数据资产清理、维护，还是数据平台建设、维护，都是大量耗费人工成本的工作。

2026-09-10

Python 数据分析：从数据到洞察

Python 数据分析的核心，不是背 API，而是跑通一个闭环：问题 → 数据 → 清洗 → 分析 → 可视化 → 结论 → 行动。工具只是中间的加速器。

2026-09-10

数据分析入门：从数据到洞察

好的问题决定了分析的方向。不要问“我们的销售怎么样”，而是问“哪个区域的销售下滑最严重，原因是什么？”

2026-08-16

数据平台数据智能化入库

导读面对传统数据接入流程人力高、周期长、质量难控的痛点，本文提出了“数据平台智能化入库”的整体解决方案。

2025-10-22

搜索数据建设系列之数据架构重构

名词解释 TDS（Turing Data Studio）：是基于图灵（百度内部数据分析平台）的数据建设解决方案，提供数据开发、数仓管理、监控运维、资源管理等一站式服务的数据开发平台。

2025-07-03

不需要数据的数据库

数据库的众多优点之一是它们通常试图将数据在内部的表示方式（例如在磁盘上）与数据使用方式分开。甚至不将数据存储在运行查询的同一硬件上已成为常态。

2024-05-31

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。