Scrapy 简介Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中。Scrapy 使用了 Twisted 异步网络框架来处理网络通讯，结构清晰明了，并且包含了各种中间件接口，可以灵活的完成各种需求。安装Scrapy 是使用Python开发，属于Python的第三方包。它的安装 …
未分类
前言服务器端处理WEB请求，通常有两种体系结构：1、基于线程————thread-based architecture2、事件驱动————event-driven architecture基于线程（thread-based architecture）的体系结构服务器端通常使用多线程来处理客户端的请求，每接收到一个请求，便开启一个独立的线程来处理。这种方式比较 …
开展开源直播系统源码的的开发工作的时候，开发人员们碰到的最多问题便是使用什么语言开发的，回答大多是PHP语言。而对于没有的开发经验的人而言，难以理解PHP语言究竟代表着什么，又有哪些作用。实际上，PHP是一种开源脚本语言。语法吸收了C语言、java和Perl的特点，有利于学习，运用范围广，主要是适用于Web的开发领域。PHP由内核Zend引擎和扩展层组成，P …
arm64 栈帧结构arm64 有31个通用寄存器 r0-r30，用法分别如下：寄存器意义SPStack Pointer: 栈指针r30Link Register: 在调用函数时候，保存下一条要执行指令的地址r29Frame Pointer:保存函数栈的基地址r28...r19r18r17r16r15...r9临时寄存器r8在一些情况下，返回值是通过 r8 …
大家好，我叫小丁，一名小小程序员。今天继续介绍Java代码保护的第四种方案：JVMTI。采用ClassFinal和自定义类加载器这两种策略来保护Java代码时，它们面临的一个共同的主要挑战在于：加解密算法及其相关代码的高度透明性。这种透明性使得攻击者能够通过反编译手段轻松获取这些至关重要的信息，进而对系统进行破解。为了更有效地提升代码保护的安全性，我们可以考 …
LVS的全称Linux vitual system,是由目前阿里巴巴的著名工程师章文嵩博士开发的一款开源软件。LVS工作在一台server上提供Directory(负载均衡器)的功能，本身并不提供服务，只是把特定的请求转发给对应的realserver(真正提供服务的主机)，从而实现集群环境中的负载均衡。LVS的核心组件ipvs工作在kernel中，是真正的用 …
在Python开发中，你是否遇到过需要全局修改Python行为的需求？比如统一设置默认编码、自动扩展导入路径或在所有脚本启动时执行特定初始化代码？sitecustomize.py正是解决这类问题的秘密武器。本文将深入探讨这个强大但鲜为人知的Python特性，揭示它如何成为Python环境定制的瑞士军刀。什么是sitecustomize.py?sitecust …
写在前面分享一些Ansible中Playbook执行顺序控制的手段以及运行选定的任务的笔记不知道小伙伴们有么有遇到这样的情况一些运维场景,Github中找了很棒的剧本或者角色,但是只需要其中的一部分一般情况下只能重新编辑(注释或者删掉)剧本处理,往往需要多次调整剧本,很麻烦亦或是一个有角色的剧本,你希望先执行任务,在执行角色(默认角色总是先执行)亦或是某些剧 …
推荐视频：手把手带你实现一个nginx模块，更加深入了解nginx（搭建好环境）16w行的nginx源码，如何分拆模块阅读，让你明白轮子如何造cc++ linux服务器开发学习地址：CC++Linux服务器开发后台架构师【零声教育】-学习视频教程-腾讯课堂数据包从网卡到nginx本文将研究一个数据包从被网卡接收到流出应用层到底经历了什么，并探究在应用层ngi …
模型定义模型一般都是普通的 Golang 的结构体，Go的基本数据类型，或者指针。sql.Scanner 和 driver.Valuer，同时也支持接口。例子：type User struct {gorm.ModelName stringAgesql.NullInt64Birthday *time.TimeEmailstring`gorm:"type …