网络爬虫之Url含有中文如何转码-低调大师

网络爬虫之Url含有中文如何转码

2018-02-06 607

一：背景

今天在使用Jsoup对一个网站进行数据爬取，发现爬取内容为该搜索结果是0条，请求头啥的都填好，利用Chrome开发者工具发现请求Url路径不含中文，抱着试一试的态度，我复制此段非中文参数进行请求，惊喜发现爬取结果正确！

二：解决方法

手动对中文参数进行编码

String data = java.net.URLEncoder.encode("中文参数", "UTF-8");

另外与之对应的解码为

String data = java.net.URLDecoder.decode(data, "UTF-8");

Jsoup爬虫案列：

http://blog.csdn.net/yueshutong123/article/details/78939700

微信关注我们

原文链接：https://yq.aliyun.com/articles/629751

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Java反射 - 动态代理

使用Java反射，您可以在运行时创建接口的动态实现。你可以使用类java.lang.reflect.Proxy。这个类的名字是我将这些动态接口实现称为动态代理的原因。动态代理可以用于许多不同的目的，例如，数据库连接和事务管理，用于单元测试的动态模拟对象，以及其他类似于AOP的方法拦截目的。创建代理您使用Proxy.newProxyInstance（）方法创建动态代理。 newProxyInstance（）方法需要3个参数：用于“加载”动态代理类的ClassLoader。要实现的接口数组。一个InvocationHandler将代理上的所有方法调用转发。这里是一个例子： InvocationHandler handler = new MyInvocationHandler(); MyInterface proxy = (MyInterface) Proxy.newProxyInstance( MyInterface.class.getClassLoader(), new Class[] { MyInterface.class }, handler); 运行此代码后，代...

2018-02-07

481

可以使用Java在运行时加载和重新加载类，虽然它不像人们希望的那样简单。本文将解释何时以及如何在Java中加载和重新加载类。 ClassLoader Java应用程序中的所有类都使用java.lang.ClassLoader的一些子类加载。因此，动态加载类也必须使用java.lang.ClassLoader子类来完成。当一个类被加载时，它所引用的所有类也被加载。这个类加载模式是递归的，直到所有需要的类都被加载。这可能不是应用程序中的所有类。未引用的类只有在引用时才加载。装载等级 Java中的类加载器被组织成一个层次结构。当你创建一个新的标准的Java ClassLoader时，你必须提供一个父类的ClassLoader。如果一个ClassLoader被要求加载一个类，它会要求它的父类加载器加载它。如果父类加载器找不到该类，那么子类加载器将尝试自己加载它。类加载给定类加载器在加载类时使用的步骤如下：检查类是否已经加载。如果未加载，则请求父类加载器加载该类。如果父类加载器无法加载类，请尝试将其加载到此类加载器中。当你实现一个能够重新加载类的类加载器时，你将需...

2018-02-07

531

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。