使用 Python 进行网络爬虫——从0构建简单爬虫
要在 / target=_blank class=infotextkey>Python 中构建一个简单的网络爬虫，我们至少需要一个库来从 URL 下载 ，还需要一个 HTML 解析库来提取链接。Python 提供标准库urllib用于发出 HT...
华为交换机ACL的小逻辑
用户提了一个需求。，这逻辑我硬是绕了2小时。分享下 需求如表 解决方法如下，需要留意，直接调用在3层交换局全局模式下，可不是只能调用在接口下，h话外提一句 traffic-filte 也是个简易很好用的工具 acl 3000 desc in...
Fastnet，三步完成高性能的网络开发
前言 在里，由于其天生的支持多并发，而且非常完善的实现了比线程更轻量级的协程的支持，使得GO一直在多并发的服务端组件的开发中占有较大的优势；特别是在云原生的大势来袭下；更多的搭建在云原生下的底层服务都是用了GO语言进行开发；服务端的...
阿里开源的一个插件化前端框架，腾讯、美团、字节都在用
《开源精选》是我们分享Github、Gitee等开源社区中优质项目的栏目，包括技术、学习、实用与各种有趣的内容。本期推荐是一个企业级前端开发——Umi。 Umi，中文发音为「乌米」，是可扩展的企业级前端应用...
Linux权限解析
写在前面 可以说,我们基本指令的那部分内容已经完了,下面需要开始我们新的篇章,权限.权限可能就这一篇博客,内容倒不多,关键是要我们理解,理解是很重要的,下面让我们来开式正式的内容吧. shell命令以及运行原理 严格来说,是一个一个操作系统,我...
详解无线网络的功率和信号强度
功率和信号强度基本概念 在无线网络中，使用AP设备和天线来实现有线和无线信号互相转换。如图1所示，有线网络侧的数据从AP设备的有线接口进入AP后，经AP处理为射频信号，从AP的发送端（TX）经过线缆发送到天线，从天线处以高频电磁波（2.4GHz/H...
AutoGadgetFS：一款针对USB设备的安全测试工具
关于AutoGadgetFS AutoGadgetFS是一款开源，它可以帮助广大研究人员在无需深入了解USB协议的情况下对USB设备以及相关的主机/驱动器/软件进行评估。该工具基于/ target=_blank class=in...
Java，Socket，实现Socket4代理服务器，客户端用Socket4代理请求
前言 Socket代理协议 Socket代理协议有Socket4和Socket5两个版本，Socket4协议只支持TCP/IP，Socket代理协议只是单纯传递数据包，不关心具体协议和用法，所以速度快很快。 Socket4代理已经过时了，支持S...
通过 Apache Kafka 中的死信队列进行错误处理
Kafka 中用于错误处理的死信队列：来自 Uber 和 Crowdstrike 的替代方案、最佳实践和案例研究。 识别和处理错误对于任何可靠的数据流管道都是必不可少的。这篇博文探讨了 在 Apache Kafka 基础中使用死信队列实...
微内核插件架构从原理到实践
前言 最近一段时间一直在参与一些SaaS产品的，发现SaaS主产品有90%的功能基本都是通用性，其中10%各个租户都会出现定制化，比如一些页面表单字段的差异化、业务规则差异化以及流程差异化等，这些差异化如果软件的可扩展性不够，很容易出现后期维护成本...
软文有几种开场方式？企业进来学！
相信不少企业都在通过软文来进行营销，软文有成本低、效率高等优势，能获得大家的青睐也无可厚非。但是，对于如何撰写高质量的软文，大家真的了解吗？不了解的话，就先从学习软文的开场白开始吧，将最基础的内容掌握好，后面再写内容会顺畅很多。小编这里给大家分享4种...
SpringBoot 时间格式化的 5 种实现方法
在我们日常工作中，时间格式化是一件经常遇到的事儿，所以本文我们就来盘点一下 Spring Boot 中时间格式化的几种方法。 时间问题演示 为了方便演示，我写了一个简单 Spring Boot 项目，其中数据库中包含了一张 userinfo 表，...
minio集群将一切访问都交给nginx
问题 一般在正式的环境下，通过给域名添加子路径（如oss）用于下载文件服务器上的文件。但这种设置子路径的方式不能直接通过API上传文件，创建桶等，鉴于安全，也不能让这种子路径拥有创建、删除文件的权限。所以，一般情况下，后台还是通过访问多个minio...
Windows最高权限真的是Administrator吗？
在 XP系统之前，administrator权限确实可以说是无敌权限了，简直可以媲美System这个至高无上的超级系统权限，连删个系统文件都不在话下，这时导致病毒肆虐的主要原因之一。 但从Vista开始，系统权限和用户权限做了很明显的划分，admi...
linux性能诊断神器pstat
为什么需要pstat? 知道系统运行了哪些服务也许并不能告诉你是谁拖慢了系统。top命令可以报告CPU占用情况以及I/O等待时间，但这可能也不足以找出导致系统过载的任务。 跟踪I/O以及上下文切换有助于揪出问题的源头。 dstat能够以固定的时...
7 款常用的 PostgreSQL GUI 工具测评
作为一名应用开发者，您对 PostgreSQL（简称 Postgres）一定不陌生，在 StackOverflow 2021 年度开发者调查中，PostgreSQL 是开发人员第二常用的数据库，并且在使用过的用户中，使用满意度高达 70%（仅次于 ）...
Python如何操作Word文档？
哈喽，大家好，今天我们继续来说说/ target=_blank class=infotextkey>Python新建文档的那些操作。 1、新增段落的方法： 我们通过add_paragraph函数来新增段落内容，代码如下： document...
SSL、TLS拒绝服务攻击
thc-ssl-dos SSL协商加密对性能开销增加，大量握手请求会导致拒绝服务 利用SSL secure Renegotiation特性，在单一TCP连接中生成数千个SSL重连接请求，造成服务器资源过载 与流量式拒绝服务攻击不同，t...
LINUX 下如何检查服务器是虚拟机，还是物理机
:物理机：[root@db01 ~]# dmidecode |grep -A16 "System Information$"System InformationManufacturer: LENOVOProduct Name: Lenovo Syst...
kubeasz离线部署多master高可用集群
背景 kubeasz是一个利用ansible-playbook基于二进制方式自动化部署和运维k8s集群的开源项目，目前该项目最新发布版本为3.3.0，基于该版本我们可以快速实现部署最高版本为1.24.1的k8s集群。 安装规划 K8s HA-a...
「开源精品」 C# im 聊天通讯架构 FreeIM 支持集群、职责分明、高性能
FreeIM 是什么？ FreeIM 使用 websocket 协议实现简易、高性能（单机支持5万+连接）、集群即时通讯组件，支持点对点通讯、群聊通讯、上线下线事件消息等众多实用性功能。 ImCore 已正式改名为 F...
全球Top50搜索引擎排名及其市场份额
是一种基于web的工具或者说是程序，用户通过它可以在互联网上查找所需信息，本文将带你详细了解全球排名前50的搜索引擎。 目前，全球有很多种搜索引擎，其中最流行的是谷歌（）搜索引擎；其他的知名搜索引擎还包括：美国在线（AOL）、百度（Baidu）、必...
揭秘字节跳动解决ClickHouse复杂查询问题的技术方案
导读：ClickHouse已经成为行业主流且热门的开源引擎。随着业务数据量扩大，场景覆盖变广泛，在复杂query场景下，ClickHouse容易存在查询异常问题，影响业务正常推进。本次主要分享字节跳动如何解决ClickHouse复杂查询问题，并详细解...
私域成本上涨40%，2022千万别再这样做私域了
作者 ｜丰之余 编辑 ｜杨佩汶 ｜晏谈梦洁 今年以来，不止一次听到私域运营的朋友抱怨：“拉新 ROI 又降了”、“竞品越来越多”、“用户越来越挑剔”…… 这一观察在@艾瑞咨询 发布的《 2022 年中国商户私域布局洞察研究报告》里得到印证：...
在idea中，能提升编码效率的12种插件，你知道几个？
前言 基本上每个都会写代码，但写代码的速度不尽相同。 为什么有些人，一天只能写几百行代码？ 而有些人，一天可以写几千行代码？ 有没有办法，可以提升开发效率，在相同的时间内，写出更多的代码呢？ 今天我跟大家一起聊聊在idea中...
程序员做项目必用五大工具
大家最近都让我出一个工具合集，今天终于整理出来啦~~ 每个程序员多多少少都会有自己简化项目的小工具，我采访了我们所有的工程师总结了程序员必备工具篇，记得转发给你身边的程序员朋友哦！ 一.unisms 不会有人这年头写注册登录还是自己写验证码模块...
Flet-基于Flutter的Python跨平台框架
昨天刚发了一篇/ target=_blank class=infotextkey>Python桌面开发库大全的微头条，就被同事安利了Flet这个库。这是一个非常新的库，今年6月份才发布的第一个版本，虽然很新，但是它背靠巨人-Flutter，可以...
Quartz 作业调度框架的掌握，从基础的纯服务到界面可配置化
在项目开发过程中，有时候需要利用定时任务技术来完成某些周期性的任务，比如，定时下载对账单、定时进行数据对比、转换，数据定时入库等等。在最开始的时候部分开发人员习惯直接在项目中硬编码一些定时器。 我们先看一下一个简单的示例： &nb...
数据仓库、数据湖、湖仓一体，究竟有什么区别？
一、基本概念1.1数仓发展历史 数据湖是以集中方式存储各种类型数据，提供弹性的 容量和吞吐能力，能够覆盖广泛的数据源，支持多种计算与处理分析引擎直接对数据进行访问的统一存储平台。它 能够实现数据分析、机器学习，数据访...
软件测试中的设计思维
思维是一种强大的范式，软件测试人员和 QA 专业人员可以使用它来创建更多以用户为中心的软件。 据Adobe称，当设计以最高优先级和高质量的方式实施时，以设计为主导的报告的忠诚客户增加了 50%，市场份额增加了 41%。它在帮助指导产...
