SpringBoot+WebMagic+MyBaties实现爬虫和数据入库的示例
目录创建数据库：新建SpringBoot项目：1、配置依赖pom.xml2、创建CmsContentPO.java3、创建CrawlerMapper.java4、配置映射文件CrawlerMapper.xml5、配置application.properties6、创建ArticlePageProcessor.java7、创建ArticlePipeline.java8、创建ArticleTask.java9、修改Application10、执行application，开始抓数据并入库WebMagic是一个开源...
2024-01-10
关于 Firefox 浏览器下载文件卡住的问题
最近重装的系统，肯定很多应用程序也只能重新安装，安装了最新版的 Firefox 浏览器，使用和打开网页都挺流畅的，但是有一个问题，确实很困扰，那就是下载文件的时候，本来都要下载完了，却卡住了，总是卡在最后 1 秒时间的哪里，等一会儿自己也就下载好了。当下载纯文本的文件就不会出现这...
2024-01-10
MySql分表、分库、分片和分区知识点介绍
一、前言 数据库的数据量达到一定程度之后，为避免带来系统性能上的瓶颈。需要进行数据的处理，采用的手段是分区、分片、分库、分表。二、分片（类似分库） 分片是把数据库横向扩展（Scale Out）到多个物理节点上的一种有效的方式，其主要目的是为突破单节点数据库服务器的 I/O 能...
2024-01-10
Win10环境下安装Mysql5.7.23问题及遇到的坑
看了很多教程，发现老是不能安装成功，经过一阵摸索，终于摸索出适合自己电脑的方法，遇到类似情况的朋友可以尝试一下该方法。一、下载1.官网下载网址：https://dev.mysql.com/downloads/mysql/ ，根据你的系统（32位或者64位）选择后缀是ZIP Archive的压缩包下载到本地。（MySQL分为安装版和解压版。为了以...
2024-01-10
hadoop基于Linux7的安装配置图文详解
如上图 准备好该准备的食材（ps：其中的hadoop-3.1.2-src更改为hadoop-3.1.2src为源文件的意思？ 反正就是换了 大家注意一下 后面截图有错的地方有空我再改吧 肝疼）安装好centos7桌面右键打开terminal——输入ifconfig——查看ens33的ip——记住然后打开xftp6点击新建把食材多选，右键传输即可，内网传...
2024-01-10
最新版 PhpStudy V8.1版本下载安装使用详解
最新版2020 PhpStudy V8.1的安装一.从官网下载安装包并安装PhpStudy v8.1下载官网自己选择64位或者32位进行下载，下载之后默认安装二.打开软件，开启Apache服务，并在浏览器输入本地地址（127.0.01）进行访问Apache/Nginx是web的服务器Mysql/MariaDB是数据库软件Php是脚本开发语言1.打开软件，对本机网站进行...
2024-01-10
解决thinkphp5未定义变量会抛出异常,页面错误,请稍后再试的问题
看了下手册，官方介绍如下：http://www.kancloud.cn/manual/thinkphp5/126075本着严谨的原则，5.0版本默认情况下会对任何错误（包括警告错误）抛出异常，如果不希望如此严谨的抛出异常，可以在应用公共函数文件中或者配置文件中使用error_reporting方法设置错误报错级别（请注意，在入口文件中设置是无效的）...
2024-01-10
ThinkPHP3.2.3框架实现的空模块、空控制器、空操作，跳转到错误404页面图文详解
本文实例讲述了ThinkPHP3.2.3框架实现的空模块、空控制器、空操作，跳转到错误404页面。分享给大家供大家参考，具体如下：【演示准备】 首先下载了一个ThinkPHP3.2.3，目录结构如下：（只有Home模块、Index控制器、index操作方法） 然后找了一个简易的错误404页面404.html放到了根目录：【空模...
2024-01-10
SpringMVC+MyBatis 事务管理（实例）
前言 spring事务管理包含两种情况，编程式事务、声明式事务。而声明式事务又包括基于注解@Transactional和tx+aop的方式。那么本文先分析编程式注解事务和基于注解的声明式事务。 编程式事务管理使用TransactionTemplate或者PlatformTransactionManager。对于编程式事务spring推荐使用TransactionTemplate。一、...
2024-01-10
Servlet3.0实现文件上传的方法
Servlet 实现文件上传所谓文件上传就是将本地的文件发送到服务器中保存。例如我们向百度网盘中上传本地的资源或者我们将写好的博客上传到服务器等等就是典型的文件上传。Servlet 3.0上次完成文件下载功能使用的是 Servlet 2.5，但是想要完成文件上传，那么继续使用 Servlet 2.5 肯定不是一个好的选择...
2024-01-10
javaweb学习总结――使用JDBC处理MySQL大数据
BLOB (binary large object)，二进制大对象，是一个可以存储二进制文件的容器。在计算机中，BLOB常常是数据库中用来存储二进制文件的字段类型，BLOB是一个大文件，典型的BLOB是一张图片或一个声音文件，由于它们的尺寸，必须使用特殊的方式来处理（例如：上传、下载或者存放到一个数据库）。一、基...
2024-01-10
javaweb Servlet开发总结（二）
一、ServletConfig讲解1.1、配置Servlet初始化参数 在Servlet的配置文件web.xml中，可以使用一个或多个<init-param>标签为servlet配置一些初始化参数。例如：<servlet> <servlet-name>ServletConfigDemo1</servlet-name> <servlet-class>gacl.servlet.study.ServletConfigDemo1</servlet-class> <!--配置ServletConfigDemo1的初...
2024-01-10
Java的Socket通讯基础编程完全指南
什么是Socket网络上的两个程序通过一个双向的通讯连接实现数据的交换，这个双向链路的一端称为一个Socket。Socket通常用来实现客户方和服务方的连接。Socket是TCP/IP协议的一个十分流行的编程界面，一个Socket由一个IP地址和一个端口号唯一确定。但是，Socket所支持的协议种类也不光TCP/IP一种，因此两...
2024-01-10
解决Java中OutOfMemoryError的问题
目前为止，我遇到使用Tomcat有三种情况：第一，使用Eclipse,在Eclipse中配置Tomcat。第二，直接在Tomcat中部署项目。第三将Tomcat安装为windows服务。在这三种情况下，出现OutOfMemoryError.该怎么解决呢？这里我不得不提我被网上那些不负责任的文章害得很惨。各种设置内存的方法都试了，可就是不起作用。下...
2024-01-10
Java虚拟机JVM性能优化（三）:垃圾收集详解
Java平台的垃圾收集机制显著提高了开发者的效率，但是一个实现糟糕的垃圾收集器可能过多地消耗应用程序的资源。在Java虚拟机性能优化系列的第三部分，Eva Andreasson向Java初学者介绍了Java平台的内存模型和垃圾收集机制。她解释了为什么碎片化（而不是垃圾收集）是Java应用程序性能的主要问题所在...
2024-01-10
漏洞复现: Apache Druid 远程代码执行漏洞 (CVE--25646)
作者：Ja0k本文为作者投稿，Seebug Paper 期待你的分享，凡经采用即有礼品相送！投稿邮箱：paper@seebug.org 一.漏洞概要Apache Druid 是用Java编写的面向列的开源分布式数据存储，旨在快速获取大量事件数据，并在数据之上提供低延迟查询。Apache Druid 默认情况下缺乏授权认证，攻击者可以发送特制请求，利...
2024-01-10
Java 反序列化过程中 RMI JRMP 以及 JNDI 多种利用方式详解
作者： Alpha@天融信阿尔法实验室原文链接：https://mp.weixin.qq.com/s/tAPCzt6Saq5q7W0P7kBdJg前言Java反序列化漏洞一直都是Java Web漏洞中比较难以理解的点，尤其是碰到了RMI和JNDI种种概念时，就更加的难以理解了。笔者根据网上各类相关文章中的讲解，再结合自己对RMI JRMP以及JNDI等概念的理解，对 RMI客户端、...
2024-01-10
QakBot 恶意文档活动引入两项新技术
译者：知道创宇404实验室翻译组原文链接：https://blog.morphisec.com/qakbot-qbot-maldoc-two-new-techniques前言从本月初开始，Morphisec实验室跟踪了一个大规模的恶意软件活动，该活动提供QakBot / QBot银行木马。Qakbot利用先进的技术来逃避检测并阻止对威胁的人工分析。在这篇文章中，我们将提到其中两种有趣的技...
2024-01-10
Godlua Backdoor 分析报告
作者：360netlab来源：https://blog.netlab.360.com/an-analysis-of-godlua-backdoor/背景介绍2019年4月24号，360Netlab未知威胁检测系统发现一个可疑的ELF文件，目前有一部分杀软误识别为挖矿程序。通过详细分析，我们确定这是一款Lua-based Backdoor，因为这个样本加载的Lua字节码文件幻数为“God”，所以我们将它命名为God...
2024-01-10
【ZoomEye专题报告】DDoS 反射放大攻击全球探测分析
作者：知道创宇404实验室ZoomEye专题：https://www.zoomeye.org/topic?id=Global-Detection-and-Analysis-of-Amplified-Reflection-DDoS-AttacksPDF 版本：下载English Version： https://paper.seebug.org/899/1.更新情况版本时间描述第一版2017/08/07完成第一轮数据统计，输出报告，完善文档格式第二版2017/08/14完成第二轮数据统计，...
2024-01-10
