爬取没有设置 robots.txt 的网站，有无法律风险？-低调大师

爬取没有设置 robots.txt 的网站，有无法律风险？

2020-07-16 881

如果要爬取的网站上没有设置robots.txt，那么是不是代表默认都允许爬取呢？有没有法律风险呢？

微信关注我们

原文链接：https://www.oschina.net/question/4582005_2317557

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Android 版 Firefox bug：后台运行或屏幕锁定时，相机保持活动状态

Mozilla 近期在修复 Android 版 Firefox 上的一个 bug，该 bug 导致用户切换应用程序或锁定手机屏幕后，摄像头仍处于活动状态。这个问题在一年前被发现，并由用户 Trishul报告到了 Bugzilla。根据他描述的重现步骤，在 Android 版 Firefox 上打开任意视频聊天网站，然后切换应用至后台运行，接着通过其他设备（例如桌面端）连接到同一聊天室，就会发现 Android 那边的视频流仍在传输。甚至将手机锁屏后，也会出现同样的情况。消耗带宽是一方面，这个 bug 暴露了更大的隐私问题。许多用户选择在移动浏览器而非应用程序上进行视频流传输，也在一定程度上是出于隐私考虑，因为应用程序会请求更多权限，获取更多手机内的数据。在面对外媒ZDNet 的采访时，Mozilla 表示，像其他专门的视频会议应用程序一样，他们也会提供系统通知，让用户知道 Firefox 中的网站在何时访问摄像头及麦克风。但当屏幕锁定时，通知就会被隐藏起来。这是他们认为自己做得不够好的地方。在提出一年后，这项 bug 近几天又被重新开始讨论起来。Mozilla 目前打算通过在屏...

2020-07-16

774

7月15日，ASF 正式宣布，Apache APISIX 从孵化器毕业，并晋升顶级项目。如果你去看一看 APISIX 的发展轨迹，会发现它的成长速度非常快。开源不仅让 APISIX 快速迭代，更成为它背后的初创公司向外沟通付费用户的一张名片。去年4月，项目发起人温铭和王院生开始着手写代码，同年6月宣布开源，7月 APISIX 被纳入 CNCF 全景图，10月捐赠给 ASF，到今年6月通过投票，7月正式成为顶级项目，前后只用了一年3个月。期间，还伴随着商用落地——开源两个月，就迎来首家付费央企用户。截至目前，APISIX 已超过千个节点在线上环境服务，其中不乏腾讯、网易、贝壳、优信二手车等大体量或是高流量用户。 “APISIX 是目前速度最快的 API 网关”，王院生说，他们在最初选型上，会尽量复用成熟组件，站在巨人肩膀上，避免自己造轮子，这样就可以把时间精力放到差异点上，如极致性能路由、热插件、高性能字段校验器、插件编排等 API 网关核心。与大多数 API 网关不同，APISIX 不仅可以处理南北向流量，也可以处理东西向、微服务间的流量。下一季度，APISIX 计划落实 Se...

2020-07-16

767

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。