Scrapy 是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘、信息处理或存储历史数据等一系列的程序中。本文着重介绍 Scrapy 架构及其组件之间的交互。 Scrapy 组件介绍 Scrapy Engine 引擎负责控制数据流在系统中所有组件中流动，并在相应动作发生时触发事件。 详细内容查看下面的数据流(Data Flow)部分。 调度器(Scheduler) 调度器从引擎接受request并将他们入队，以便之后引擎请求他们时提供给引擎。 下载器(Downloader) 下载器负责获取页面数据并提供给引擎，而后提供给spider。 Spiders Spider 是 Scrapy用户编写用于分析response并提取item(即获取到的item)或额外跟进的...阅读全文
操作系统：Debian Gnu/Linux Jessie 内核： linux-image-4.3.0-0.bpo.1-amd64 网卡：腾达(Tenda) W311M 150M Mini无线USB网卡 最近发现自己的Debian之前可以使用GNOME3下的networkmanager进行WIFI共享上网功能因为内核升级导致无法使用。无奈只好再次通过Hostapd来进行WIFI热点设置，同时为了更块的DNS解析，本次顺便也在本地安装了dnsmasq软件实现了本地化的DNS查询服务，成功恢复了我的小本本作为热点的能力。总结方法如下： 1、准备环境： 1.1执行vi /etc/apt/sources.list,并添加如下源地址： deb http://ftp.cn.debian.org...阅读全文
本月初，Debian 开发团队发起投票以决定是否要支持非 systemd 初始化系统。现在投票已结束，最终投票结果为“选择 systemd 但同时探索替代方案”。 当时的投票总共包括 8 个选项： 继续专注于 systemd选择 systemd 但同时探索替代方案支持多个初始化系统很重要支持非 systemd 初始化系统，但避免影响进度支持可移植性，避免影响进度支持多个初始化系统是必要的支持可移植性和多个初始化系统需要进一步讨论 根据 Debian 公布的结果，最终获胜的投票选项为： “Systemd but we support exploring alternatives.”（选择 systemd 但同时探索替代方案） 对于这个选项，发起此提案的开发者也讲述了他的想法： Debian...阅读全文
2018年11月12日，北京时间16:00，Linux基金会在德国柏林“Ceph Day”上正式宣布成立“Ceph基金会”来支持Ceph开源项目。Ceph基金会接受Linux基金会的管理，它的成立将为Ceph社区的合作和成长提供一个中立的机构。高级会员和一般会员每年缴纳会员费，准会员是教育机构或政府组织，并被邀请免费加入。 理事会由所有高级成员，普通成员代表，准成员代表和Ceph领导团队（技术治理机构）代表组成。董事会负责： 建立并批准用于支持Ceph项目的年度预算 建立特设委员会以满足项目的当前需求 协调外展或营销 定期开会讨论基金会活动，Ceph项目的现状以及整体项目战略 在董事会面前对任何决定或事项进行投票 Ceph基金会董事会不对Ceph的技术治理负责，也没有任何直接控制权。开发和...阅读全文
SQL审核是保证数据库 DDL 和 DML 安全使用、SQL变更可追溯、降低线上数据事故概率的重要手段。去哪儿网开源的 Inception 工具有较大的使用基础，提供了相对完善的 API 接口，结合一些外层的操作界面，可以实现SQL审核、执行、备份和恢复功能，为DBA操作利器。本文详细介绍如何配置 Inception 和 Yearning 的整合。 Inception Inception是一个自动化运维工具，在Mysql前做一个审核和操作的屏障。跟Inception的交互是程序级别的，即通过Python或其他程序编程实现对Inception的命令调用，并解析结果。 Inception的文档地址：http://mysql-inception.github.io/inception...阅读全文
由 Web 浏览器制造商、软件开发人员和安全证书颁发机构组成的行业团体 CA/Browser Forum，正在考虑将 HTTPS 证书的有效期从 27 个月缩短到 13 个月。关于这样的提案，已经不是第一次提出。在 2017 年时，CA/Browser Forum 就否决了一项将证书有效期从 39 个月缩短至 13 个月的提案。 而早在一年前，证书的最长有效期已经从 39 个月降至 27 个月。 我们都知道，HTTPS 证书用于加密浏览器和站点之间的连接，帮助软件确定没有人篡改或窃听这些连接。 如果减少 TLS/SSL 证书有效的时间，网站必须更频繁地更新其证书。理论上，这样的证书有效期也有助于减少欺诈活动，如果是偷来的证书则很快会失效，被遗弃的网站也会更快地过期。这将迫使他们使用最新和最...阅读全文
谷歌于 1 月下旬曾向 USPTO（美国专利及商标局）递交了名为 “Pigweed” 的新商标申请。根据申请内容来看，Pigweed 商标涵盖“计算机操作软件”。当时，人们猜测这是一款新的操作系统商标，但并未有任何相关信息提供。 昨日，谷歌毫无征兆地公布并开源了 Pigweed。与之前的猜想不同，这是一个嵌入式库（或模块）的集合。使用 Pigweed 模块可以在 32 位微控制器（ 即嵌入单电路芯片中的小型计算机 ）上实现更快、更可靠的开发。 Pigweed 提供的模块可满足嵌入式开发人员的广泛需求。从整个生命周期来看，Pigweed 从设置，到开发，再到代码提交，都能够有效提高嵌入式开发的效率。谷歌以上述开发过程为轴，围绕这几个方面分别介绍了 Pigweed 的一些模块。 嵌入式空间...阅读全文
DNS SRV 是 DNS 记录中一种，用来查询指定服务的地址。与常见的A记录、CNAME 不同的是，SRV中除了记录服务器的地址，还记录了服务的端口，并且可以设置每个服务地址的优先级和权重。RFC-2782 给出DNS SRV的建议标准，它是在2000年的时候提出来的。 访问服务的时候，本地的服务从 DNS 服务器查询到一个地址列表，根据优先级和权重，从中选取一个地址作为本次请求的目标地址。 一个支持SRV的 LDAP client 通过查询域名，可以得知 LDAP 服务的 IP 地址和服务端口： _ldap._tcp.example.com 这个域名的格式是 rfc-2782 中推荐的格式，_ldap表示LDAP服务，_tcp表示通过TCP协议访问LDAP服务。 SRV 的 DNS 类...阅读全文
在 macOS 上安装 Nessus 10 macOS安装Nessus一、下载二、 安装三、初始化登录四、 安装插件和创建配置文件五、重启服务编译插件六、验证七、如何更新插件 macOS安装Nessus 修复部分破解方法在安装Nessus10重启之后重置授权问题。 一、下载 下载 macOS：https://sysin.org/blog/macOS/ 下载 Nessus：https://sysin.org/blog/nessus-10/ 或者链接：https://pan.baidu.com/s/1DrkX1nbysFgdmbO4657JIg?pwd=9jxl 提取码：9jxl 下载插件： 插件版本202301231642 链接：https://pan.baidu.com/s...阅读全文
4月1日，腾讯公司发布了一段短片，跟大家开了个愚人节玩笑。腾讯宣布，筹备近两年的“AI生态鹅厂”已在贵州贵安新区完成项目主体建设，预计于年内投产运行。由于企鹅所需饲养条件较高，目前腾讯将先以贵州平坝灰鹅作为试点，未来或考虑引入天鹅和企鹅。据说还有鹅脸识别、鹅语翻译、觅影治鹅、鹅屎咖啡等技术。 今天腾讯宣布，养鹅是不存在的，但贵州贵安新区的那个山洞却是真正存在的。它叫腾讯贵安七星数据中心，是一个特高等级数据中心。 2017年10月，腾讯贵安七星数据中心工程正式进入项目建设施工阶段，项目主体为五横一竖共六个隧道。工程建成后,整个数据中心的工作、电力等设备将全部置于其中。 腾讯表示，它具有高度安全，高隐蔽、高防护的特点，将用来放置腾讯业务最核心的数据，代表着腾讯在数据产业的前瞻战略。 数据中心是...阅读全文
在集群化环境里，日志采集是重要基础设施。本文结合最新的 1.0.9 版，对 logpipe 做一个简单的介绍。开源主流解决方案是基于 flume-ng，但在实际使用中发现 flume-ng 存在诸多问题。 比如 flume-ng 的 spoolDir 采集器只能对文件名转档后的大小不能变化的最终日志文件进行采集，不能满足采集时效性要求，如果要采集正在被不断追加的日志文件，只能用 exec 采集器搭配 tail -F 命令，但 tail -F 命令又不能通配目标目录中将来新增的未知文件名。其它解决方案如 logstash 由于是 JAVA 开发，内存占用和性能都不能达到最优。 作为一个日志采集的本地代理，内存占用应该小而受控，性能应该高效，耗费 CPU 低对应用影响尽可能小，要能异步实时追踪...阅读全文
对 Docker 的使用大部分都比较熟悉，但是说到 docker 的实现原理很多人还是一知半解。我把在团队内部做的一次 Docker 核心原理分享总结到文章里，以供参考。 Docker 的优势 Build once, Run anywhere 上面这句话很精辟的总结了 docker 的优点。我从下面几点具体描述 docker 带给开发者的能力 应用标准化 无论什么语言开发的应用，我们都能用 dockerfile 和构建脚本方便的进行应用构建打包，代码库 + 构建 + registry 统一了 CI/CD 流程，也提升了效率。 环境一致 由于应用和依赖全部构建成镜像，做到了一次构建多次交付，无论是开发，测试还是上线环境都是一致的。大大提高了开发效率 应用隔离 由于通过 docker 部署的应...阅读全文
本文以 Ubuntu 18.04 为例，介绍如何在 Linux 下使 systemd 服务定时重启。有几种不同的方法。 ** crontab ** 注意，此种方法在 root 用户下使用最佳，普通用户的 --user 服务会有许多问题需要解决。 `30 3 * * * /bin/systemctl restart your_service` `crontab -l cronjob` ** RuntimeMaxSec ** ``` [Service] Restart=always RuntimeMaxSec=604800 ``` ** timer ** a-restart.service ``` [Unit...阅读全文
作为谷歌开源的容器集群管理系统，Kubernetes 建立在谷歌内部的 Borg 技术之上。发展到今天，Kubernetes 的规模已经变得非常庞大，它被认为是计算基础设施的未来，与虚拟机一脉相承，就像虚拟机取代裸机成为计算部署的最常见单元一样，尤其是在云环境中。 作为业界最主流的容器技术，谷歌会不会考虑迁移到 Kubernetes 呢？ https://www.infoq.cn/article/juhmwqtyaad6z3okkjnj...阅读全文
Debian 项目发表新闻稿，对一名活跃开发者遭俄罗斯当局逮捕表达了关切。Dmitry Bogatov 是一名数学教师和活跃 Debian 贡献者，他在 Debian Haskell 组工作，维护了多个软件包。 Debian 表示，他们正在等待更多有关此案的细节，希望程序正当，Bogatov 能得到公平对待。 出于安全方面的考虑，Debian 项目宣布移除 Bogatov 持有的密钥，Debian 项目将全力支持他及其家人。...阅读全文
Nginx（发音同 engine X）是一款轻量级的 Web 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器，并在一个 BSD-like 协议下发行，可以在 UNIX、GNU/Linux、BSD、Mac OS X、Solaris，以及 Microsoft Windows 等操作系统中运行。 nginx 1.16.0 稳定版已发布，包含来自 1.15.x 主线分支的新功能和错误修复： 针对流模块（stream module）中的 UDP 代理改进随机负载均衡方法（random load balancing method）支持 TLS 1.3（TLS 1.3 early data）动态加载 SSL 证书等 下载地址： http://nginx.org/en...阅读全文
Canonical 上个月宣布放弃继续投资桌面环境 Unity，终止智能手机和平板项目，将精力集中到能带来收入的云端服务，同时精简员工，原 CEO Jane Silber 辞职，其职位将由 Canonical 创始人 Mark Shuttleworth 接替 ，所有这一切动作都显示 Canonical 公司准备 IPO。现在，Shuttleworth 在 OpenStack 峰会上接受采访时 证实了这一猜测 。 他表示，公司的私有云服务增长了 70%，公有云服务增长了 90%。虽然 Canonical 不再继续开发 Unity，但 Shuttleworth 表示会支持社区开发者的努力。他表示 IPO 尚无时间表。...阅读全文
发布日期：2016-11-24 更新日期：2016-11-29 受影响系统：Linux kernel 4.0 ~ Linux kernel < 4.8.7 描述： BUGTRAQ ID: 94264 CVE(CAN) ID: CVE-2016-8645 Linux kernel 4.8.10之前版本，TCP栈错误处理了skb截断，在实现上存在安全漏洞，本地攻击者通过构造的应用，可造成拒绝服务。 <* 来源：Marco Grassi *> 建议： 厂商补丁： Linux ----- 目前厂商已经发布了升级补丁以修复这个安全问题，请到厂商的主页下载： http://www.kernel.org/pub/linux/kernel/v4.x/ChangeLog-4.8.10 https...阅读全文
虽然AWS平台早已早已为使用者带来了十分详细和高品质的工具箱，但在具体运用中含的软件还没有尤其方便快捷或是能满足客户的必须，因而，紧紧围绕全部AWS平台，客户及其许多专业开发设计AWS专用工具的企业发布了很多和AWS规范专用工具互为补充的第三方开发环境。这种专用工具集中化在系统软件布署管理方法自动化技术，系统架构图自动生成可视化工具，及其服务器资源监管专用工具等AWS技术栈的最底层服务项目。 系统软件布署管理方法自动化技术专用工具. 中国开发者利好消息！AWS（亚马逊云计算）中国区新用户注册即可免费使用12个月云服务产品啦！每注册一个新用户均可享受新的12个月免费云服务器数据库等产品！快来加入我们吧！ 免费12个月链接： https://aws.amazon.com/cn...阅读全文
虽然AWS平台早已早已为使用者带来了十分详细和高品质的工具箱，但在具体运用中含的软件还没有尤其方便快捷或是能满足客户的必须，因而，紧紧围绕全部AWS平台，客户及其许多专业开发设计AWS专用工具的企业发布了很多和AWS规范专用工具互为补充的第三方开发环境。这种专用工具集中化在系统软件布署管理方法自动化技术，系统架构图自动生成可视化工具，及其服务器资源监管专用工具等AWS技术栈的最底层服务项目。 系统软件布署管理方法自动化技术专用工具. 中国开发者利好消息！AWS（亚马逊云计算）中国区新用户注册即可免费使用12个月云服务产品啦！每注册一个新用户均可享受新的12个月免费云服务器数据库等产品！快来加入我们吧！ 免费12个月链接： https://aws.amazon.com/cn/free...阅读全文
Cloudpods是一个开源的多云混合云管理平台。Cloudpods首先是一个私有云云平台，具备将计算节点使用开源QEMU/KVM虚拟化技术虚拟出虚拟机，实现私有云的功能。其次，Cloudpods能够纳管其他的云平台，包括主流私有云和公有云，实现云管的功能。 Cloudpods的目标是帮助用户基于本地基础设置以及已有云基础设置，构建一个统一融合的云上之云，达到降低复杂度，提高管理效率的效果。Cloudpods从3.0开始全面拥抱Kubernetes，基于Kubernetes部署运行云平台的服务组件，采用Kubernetes Operator，基于Kubernetes集群自动化部署服务，实现了云平台的服务的容器化分布式部署。本文总结了Cloudpods在过去3年云平台底层容器化改造的经...阅读全文
/jenkins HTTP_PORT=8090 修改完端口后，需要重启 jenkins 使改动生效： /etc/init.d/jenkins stop /etc/init.d/jenkins start 使用 LDAP 做Jenkins的权限验证 我们在 全局安全配置 -> 勾选LDAP -> 点开Advanced Server Configuration，添加以下配置项目， Server ldap://ldap.debian.cn root DN dc=shanghai,dc=op User search filter uid={0} 勾选 Parse user attribute for list of LDAP groups - memberOf Manager DN cn=admin,dc...阅读全文
采用最小化方式安装的 Debian，在没有接入网络的情况下，默认是没有配置 apt 安装源，也没有安装远程管理用的 SSH 服务的，这个时候就无法使用 apt-get install 在线安装软件的，为使用带来不便。以下为大家提供几个 Debian Stretch 的 apt-get 源配置，详细有不好爱好者在使用 Stretch 时会遇到这个问题。 配置apt-get源 在开始配置新的 apt 源之前，可以先备份原有的安装文件，命令如下： cp /etc/apt/sources.list /etc/apt/sources.list.backup 更新 apt 源配置文件 使用以下命令，重写整个配置文件即可： cat > /etc/apt/sources.list <
近日，Linux 基金会宣布成立 DizmeID 基金会和技术项目，旨在支持数字身份认证。这项工作将把自主身份的优势与必要的合规性和监管结合起来，目的是使钱包持有者能够拥有和控制他们的数字身份以及数据访问和分发。其创始成员包括：Algorand、Fabrick 和 InfoCert，A.P.S.P. 是准会员。  DizmeID 基金会和技术项目将定义并允许在 Sovrin 公共身份实用程序之上实现 Dizme 功能，同时利用 trustoverip 元模型，并基于现有基础设施的三个领域，将其工作重点放在定义和实现 DizmeID...阅读全文
新安装的Debian系统，默认一般使用DHCP获取IP地址，除非在安装过程中，使用了指定的IP地址。本文将介绍如何在Debian系统中，配置使用静态IP地址，配置网关，以及设置DNS服务器。 这些配置通过修改配置文件，很容易实现。在 Redhat 系列的 Linux 环境中，我们一般修改网卡的网络配置文件，对应的文件名为 /etc/sysconfig/network-scripts/ifcfg-eXX，其中eXX即为网络设备名。网络设备的列表可以他通过 ifconfig 命令获取。同样的，在 Debian 环境下，我们只需要修改网络的配置文件便可以了。相比之下，配置过程要比 Redhat 更为方便，只需要修改 /etc/network/interfaces 文件。 Debian 系统设置静...阅读全文
Linux Foundation 正致力于通过组建新项目来改善开源的合规性，他们近日推出了一个 Automated Compliance Tooling（ACT）项目，旨在整合对推进开源合规性工具的投入，提高互操作性和可用性，从而帮助组织管理合规性义务。 根据 Linux 基金会的说法，虽然开源代码的使用变得越来越流行，但使用开源代码有责任遵守该代码许可的条款，这会给用户和组织的管理带来挑战。 Linux 基金会战略高级主管 Kate Stewart 表示：“推进开源合规性的工具或项目有很多，但大多没有资金，构建强大可用性或高级功能的范围有限。我们从许多组织那里听说，目前存在的工具无法满足当前的需求。在 Linux 基金会下成立一个中立机构来处理这些问题，将使我们能够增加对合规工具开发社区...阅读全文
到 1.10.0更新 Django-Grappelli，从 2.12.3 到 2.13.1更新 django-attachments 到 1.4.1更新 django-simple-history 从 2.7.2 到 2.7.3更新 PyGithub 从 1.43.7 到 1.43.8将 patternfly 更新到 3.59.3 版本将 prmjs 更新为 1.17.0 版添加 Testing Status Matrix telemetry添加 Testing Execution Trends telemetry将 Clone TestPlan 页面转换为 Patternflix，大大简化 UI 和更新行为：克隆的 TP 作者将始终设置为当前用户、克隆的TC 作者将始终设置为当前用户、在克...阅读全文
Go 1.12 正式版发布了，距离上个正式发布版 Go 1.11 已经过去半年。跟往常一样，Go 1.12 保持了 Go 1 的兼容性承诺，预期所有 Go 程序会像之前一样正常编译。 新版本的更新亮点有 TLS 1.3 的初步支持 ，模块（module）支持的提升（目标在 Go 1.13 默认启用 module 模式），支持 windows/arm，以及 提升 macOS & iOS 的前向兼容性。 其中，安全传输层协议 TLS 1.3 比起以往版本，废弃了有安全隐患的 3DES、RC4、AES-CBC 等加密组件和 SHA1、MD5 等哈希算法，带来了更高的性能和安全性。 此外，值得关注的 Go 1.12 的更新内容有： 新版在语言规范方面没做改动；工具方面的一些变动，有：Go 1.12...阅读全文
中共中央办公厅、国务院办公厅印发了《推进互联网协议第六版（IPv6）规模部署行动计划》，计划全面推进部署 IPv6，协同推进网络实名制。 通知称，用 5 到 10 年时间，建成全球最大规模的 IPv6 商业应用网络。具体计划包括： 1．到 2018 年末，IPv6 活跃用户数达到 2 亿，在互联网用户中的占比不低于 20%，并在以下领域全面支持 IPv6：国内用户量排名前 50 位的商业网站及应用，省部级以上政府和中央企业外网网站系统，中央和省级新闻及广播电视媒体网站系统，工业互联网等新兴领域的网络与应用；域名托管服务企业、顶级域运营机构、域名注册服务机构的域名服务器，超大型互联网数据中心（IDC），排名前 5 位的内容分发网络（CDN），排名前 10 位云服务平台的 50% 云产品；互联...阅读全文
全球的内存市场主要被三星、SK Hynix和美光三家公司垄断，他们三家加起来的份额高达95%，中国要想在内存市场突破封锁并不容易，尽管有紫光、长鑫、兆易创新等公司投身存储芯片市场，但在现有的DDR内存技术上，中国公司技术、产能还差得远呢。 此外，内存也不止传统的DDR技术，还有很多新兴领域正在发展，比如PCM相变存储，相比传统内存它的优势很多，比如速度快了1000倍，耐用性也是传统内存的1000倍，江苏淮安市时代芯存公司投资130亿元建设了国内最大的相变存储基地，上周已经开始正式运营，预计年产值45亿元。 来自中国江苏网的消息称，淮安市集成电路产业现场推进暨江苏时代芯存半导体有限公司相变存储器工厂竣工运营启动仪式在淮安高新技术产业开发区顺利举行，此举标志着130亿元投资的相变存储项目开始进...阅读全文
1.新的问题influxdb目前支持内存型索引inmem及文件型索引tsi1。之前追踪篇将influxd索引修改为tsi1之后，经过一段时间的运行，从监控观察到，由于调用方采用异步队列+批处理的方案将数据写入influxdb，会在某些时刻调用方内部出现数据堆积，指标如图:横坐标: 时间轴，从12-29 00:00 到 12-30 00:00纵坐标: 队列中数据堆积长度，坐标最大值250k，即最大25w个数据堆积从上图可以看到，当天监控出现数次堆积，上午7:00-10:00尤为严重。在堆积时，登录influxdb服务器，查看机器状态如下:top - 09:40:58 up 120 days, 19:18, 1 user, load average: 32.29, 32.32, 29.82...阅读全文
Untangle NG Firewall 13.0.0 发布了，Untangle NG Firewall 是基于 Debian 的网关系统，它带有可插拔的模块以支持各种网络应用，这包括垃圾邮件阻挡、网页过滤、反病毒、反间谍软件、入侵阻止、虚拟专用网、SSL 虚拟专用网、防火墙等等。 新版本引入了基于 MAC 的设备跟踪功能，用户跟踪（通过多种方法）以及覆盖 Untangle OpenVPN 设置的能力。 此版本还引入了两个新功能：标签（Tags）和触发器（Triggers）。 标记是一个新功能，允许管理员标记主机，设备或用户，以便基于具有与其相关联的特定标签的实体快速创建策略。 标签可以由管理员手动应用或根据条件自动应用。触发器允许管理员在特定事件发生时标记主机，设备和用户。 然后，管理员...阅读全文
据外媒报道，磁性随机存取内存(MRAM)将在今年达到一个新的里程碑。Everspin宣布开始尝试打造1Gb (128MB)的ST-MRAM芯片，另外他们已经将这款高寿命、非易失性的内存芯片生产提上议程。 Everspin的ST-MRAM能够提供持久的记忆能力，相较于普通的NAND闪存技术，它可以减少写入放大倍数并拥有更好的耐用性。 这款新芯片采用的则是一个兼容DDR4的接口。这家公司表示，供应商可以利用持久的记忆技术设计企业级SSD或对现有的储存产品展开进一步的改善。 据了解，ST-MARAM的密度要比公司旗下现有的任何256MB(32MB)芯片大得多。Everspin指出，从Global Foundries的40nm工艺到foundry 28nm工艺的转变是开发这种千兆级芯片的关键，另外...阅读全文
Flask 是一个微型的 Python 开发的 Web 框架，最初构建于 2010 年，至今已发展 8 年。Flask 1.0 近日已正式发布。 Flask 示例代码： from flask import Flask app = Flask(__name__) @app.route("/") def hello(): return "Hello World!" if __name__ == "__main__": app.run() 1.0 版更新亮点： 不再支持 Python 2.6 和 3.3 。 CLI 更加灵活。 如果安装了 python-dotenv，flask CLI 将从 .flaskenv 和 .env 文件加载环境变量，而不必在每个新终端中导出它们。 开发服务器默认情况下...阅读全文
还有人记得Intel的安腾处理器（Itanium）吗？ 日前，Linux之父Linus Torvalds在一篇代码评论中透露，计划进行一次补丁合并，结果就是移除对Intel安腾处理器的支持。 他说，惠普企业已经不再接受安腾硬件订单，Intel一年前也停止接单，尽管最终的出货日期定在今年7月29日，但显然不会有这样的订单存在。安腾，已经死透了。 资料显示，安腾诞生于2001年，是Intel与惠普合作开发，当时提出了划时代的IA64纯64位架构。然而，生不逢时，“过去超前”，不像AMD x64那样兼容x86 32位，需要专门的操作系统，合作伙伴们因为维护量大、客户群体小众而纷纷放弃（甲骨文、微软Windows Server 2008 R2后已经停止维护支持安腾的OS）。 目前最新的安腾是...阅读全文
Debian 系统安装以后，可能会遇到网卡设备名不是常见的 eth0 的情况。我们有没有办法统一网卡设备名称呢？ 在服务器环境中，统一网卡设备名是很有必要的。标准化的配置会节省我们大量的时间，这些时间可能会花在排障、监控的配置、状态收集脚本的调整等。 这里我们介绍如何把 Debian 系统中的网卡从非 eth0，调整为 eth0，这个设备名是各 Linux 系统中比较通用的网卡设备名。下面我们以设备名 ens3 为例，介绍在Debian 系统中，如何修改网卡设备名为 eth0 的具体步骤。 首选，我们需要编辑 grub 的配置文件，修改启动参数。使用编辑器打开 /etc/default/grub， 查找： GRUB_CMDLINE_LINUX="" 找到这行，并修改为...阅读全文
我使用 debian-live-10.1.0-amd64-gnome.iso 安装系统。在安装时注意语言、位置和键盘类型的选择。主要是这几项， - 安装语言english - location，other，china - 键盘American English，使用全部磁盘 安装好的系统可以正常显示中文。Debian10 已经默认安装好 fcitx 与 google pinyin。我们删掉默认运行的 ibus， sudo apt remove ibus reboot # no ibus pid, have fcitx pid fcitx-configtool # add button, uncheck only show current lang, add google pinyin 这时...阅读全文
3月27日，华为开发者大会2020以线上形式举行，华为云与计算BG总裁侯金龙在主题演讲中发布openEuler系商业发行版操作系统，首批参与的操作系统包括银河麒麟服务器操作系统V7.6，普华服务器操作系统V5.1（鲲鹏版）、深度欧拉V1.0以及傲徕服务器操作系统1.0。 IT之家此前报道过，今年1月份，openEuler开源社区（以下简称openEuler社区）正式开放源代码、镜像及开发测试环境，标志着openEuler社区开放运作迈出了坚实一步。作为主要筹备方，华为会逐步开放在ICT基础软件领域的技术积累，将操作系统、编译器/JDK等领域的基础平台能力开源至openEuler社区。 在openEuler社区，社区参与者可下载操作系统安装镜像或源代码，快速了解并掌握openEuler操作系...阅读全文
2020.01.01版本还修复了许多用户报告的烦人的“无法通过菜单打开工具...”错误，修复了所有软件包（runtime exec）问题，并修复了存在于此前版本上的错误。 当然在新的ISO镜像中，所有内置的BlackArch工具和安装包都已经获得更新，包括Awesome、FluXbox和Openbox等支持的窗口管理器菜单以及配置文件等等。BlackArch Linux 2020.01.01现在可以从官方网站下载，提供Live、NetInstall ISO镜像和OVA镜像。现有用户不需要重新下载ISO镜像只需要执行更新就可以了。访问官方网站。...阅读全文
SSL是网络加密传输协议，安装SSL数字证书之后，就可以通过加密方式访问网站。SSL证书的作用主要是确保网络传输数据安全，GoDaddy 提供了的 SSL 证书服务比较受欢迎。下面，我将给大家介绍，如何使用30%的折扣码，在 GoDaddy 网站上购买 SSL 证书。 1.通过本优惠链接进入Godaddy官网，点击Logo右边的菜单，然后依次点击 “Web Security” → “SSL Certificates”，下拉后，我们可以看到这些选项， 国内用户访问的，多半会跳转到 sg.godaddy.com 下，可以不影响购买。页面上我们看到的价格，也是优惠前的价格。 2.GoDdaddy提供了多种 SSL证书，结合自己的需要选择。如果需要用通配符证书，选择第三个 Wildcard SSL...阅读全文
Kali Linux 2017.1 发布了。此版本包括对 RTL8812AU 无线网卡注入的支持，对 CUDA GPU 破解的简化支持，在 Kali 存储库中打包的 OpenVAS 9 等，还有用于云实例的 Kali Linux 的 Azure 和 AWS 映象文件。 与所有新版本一样，该版本可以使用更新的软件包，更新的内核，提供更多更好的硬件支持以及一系列更新工具的共同特征，但是这个版本还有一些惊喜。 官方表示此前收到一个功能要求，要求安装 RTL8812AU 无线芯片组的驱动程序。 这些驱动程序不是标准 Linux 内核的一部分，并且已被修改为允许注入。为什么这是大事呢？该芯片组支持 802.11 AC，这是使注入相关无线攻击符合本标准的首要驱动力之一。 新版可用功能的总结可在项目 发...阅读全文
PHP 7.2 Beta 1 已于上周发布，预计将于 11 月发布正式版。 PHP 7.2 Beta 1 实现了更多的 Sodium 扩展，针对现代和易于使用的加密、改进 opcache、无效 UTF-8 数据更好的 JSON 解码这些方面，以及自 PHP 7.1 以来的许多错误修复和其他改进。最新的版本和更多的细节可以通过 PHP.net 找到。 测试的系统信息 先看看 PHP 7.2 Beta 1 与 PHP 7.1.7, 7.0.21, 和 5.6.31 的性能对比 可以明显看到，在性能测试方面，从 PHP 5.6 到 PHP 7.0，性能有了显著的增长。不过这并没什么值得惊喜的，但看到使用 PHP 7.2 Beta 1 也有了很大的性能提升这倒是有点意想不到。由上图可看到，PHP...阅读全文
Proxmox 5.3 默认包含CephFS, 可以直接用Web界面进行配置和管理。相比之下，Proxmox 5.2 版本用 pveceph install 安装，用命令行初始化pveceph init --network网络。在Proxmox VE web管理界面，点几下鼠标就能完成文件系统的创建和配置，以前的版本需要在命令行下完成。 这次官方发布更新的点比较多，这里只挑几个重要的介绍，想详细了解的同学请参考发布记录。 磁盘管理GUI界面（ZFS, LVM, LVMthin, xfs, ext4） CephFS管理GUI界面（MDS） ZFS over iSCSI 插件支持 Linux-IO 目标（LIO Target） 支持模拟运行ARM架构虚拟机（试验特性，搞开发的同学可以体验下...阅读全文
Backport的含义是”向后移植”，就是将软件新版本的某些功能移植到旧版本上来,这就称为backport。 Debian向来以稳定性著称，所以就存在一个问题，官方源分发的软件版本比软件本身的版本总是要慢不少，所以就有了 backports 源。 backports 主要从 testing 源，部分安全更新从unstable源重新编译包，使这些包不依赖于新版本的库就可以在 debian 的 stable 发行版上面运行。所以 backports 是 stable 和 testing 的一个折衷。 backports 源的使用方法 这里以 Jessie 为例加入 163.com 的源, 编辑 /etc/apt/sources.list 文件, 在文件中添加以下条目， deb http...阅读全文
工业和信息化部将会同相关部门尽快发布实施《移动互联网应用程序个人信息保护管理的暂行规定》（简称《规定》）。《规定》将为个人信息保护提供更加坚实的政策保障。在新规的引导下，多个电商平台已经主动加强了对客户信息的保护力度。 工业和信息化部信息通信管理局的人士近日透露：“在充分吸收社会各界意见的基础上，工业和信息化部会同相关部门制定了《规定》的征求意见稿，社会各界提出了一些好的意见和建议，我们正在研究采纳。在此基础上，尽快会同有关部门发布实施。”  在征求意见稿中，管理部门明确了App开发运营者的信息保护义务。 《规定》要求...阅读全文
系统解析JDK源码，领略大牛设计思想，JAVA面试必备 download：https://www.51xuebc.com/thread-555-1-1.html Vue3实战商城后台管理系统开发示例 Vue是一款流行的JavaScript框架，它可以帮助我们快速构建高效、可维护、易用的Web应用程序。在本文中，我们将介绍如何使用Vue3来开发一个商城后台管理系统。 技术栈选型 在开始开发之前，我们需要选择合适的技术栈。以下是我们所采用的技术： Vue.js 3：Vue.js 3是Vue框架最新版本，它具有更好的性能、更好的TypeScript支持、更好的响应式系统等特点，可以提高开发效率和应用性能。 Element Plus：Element Plus是一套基于Vue3的UI组件库，提供了丰...阅读全文
访问：2021阿里云上云采购季：采购补贴、充值返券、爆款抢先购云通信分会场：爆款产品低至7.2折，短信低至0.034元/条 相比之下，ARMv9的升级看点就多了，过去10年计算架构有了太多变化，ARM处理器也不止是移动/嵌入式专用了，已经扩展到了PC、HPC高性能计算、深度学习等等新市场。ARMv9在兼容ARMv8的基础上，提升了安全性、增强了矢量计算、机器学习及数字信号处理，同时继续提升处理器性能。首先来说说性能上的变化，以智能手机等移动平台使用的Cortex-X/A系列为例，X1/A78这一代的性能相比16nm A72提升2.5倍，下一代的Matterhorn架构及Makalu架构会保持30%以上的IPC性能提升。IPC提升与频率无关，如果再考虑到未来工艺带来的频率增加，那么CPU性能...阅读全文
SciPy 是一个开源的 Python 算法库和数学工具包。SciPy 包含的模块有最优化、线性代数、积分、插值、特殊函数、快速傅里叶变换、信号处理和图像处理、常微分方程求解和其他科学与工程中常用的计算。 10月25日，SciPy 团队成员 Ralf Gommers 在 Python 官方邮件组发文宣布 SciPy 1.0 终于发布了。 Ralf 称，很高兴宣布 SciPy 1.0 的发布，自从 0.1 版面世 16 年后，1.0 版姗姗来迟。这是一次漫长而富有成效的旅程，期待在未来有更多令人激动的特性。 为什么现在才发布 1.0 版呢？ Ralf 认为版本号应当体现出项目的成熟程度，SciPy 是一个成熟且稳定的库，已经在生产环境长期大量使用很久了。从这个角度来说，1.0 版来晚了。 最...阅读全文
Alpine Linux 操作系统是由社区开发的，面向安全的轻型 Linux 发行版，它和其他常见的 Linux 发行版不同。Alpine 采用了 musl libc 和 busybox 以减小系统体积和运行时的资源消耗，功能上要比 busybox 完善的多，因此得到开源社区越来越多的青睐。 在保持瘦身的同时，Alpine 提供了自己的包管理工具 apk，可以在官方网站上查询包信息，也可以通过类似 apt 和 yum 的方式，在命令行查询或安装软件。 Alpine 支持广泛的场景，它特别为资深/重度Linux用户而优化，关注安全，性能和资源利用率，是一个优秀的可适用于生产环境的基础系统。 Alpine Docker 镜像继承了 Alpine Linux 发行版的这些优势。相比于其他...阅读全文
在Debian及其衍生的系统中，我们需要经常使用的软件包管理命令，对系统进行管理，以便系统达到预期的状态。Debian系统中，常用的软件包命令有 apt、apt-get、dpkg、apt-cache等，这里我们着重列举常见的一些用法。 软件包查询（不需要sudo权限） $ apt-cache search pkg_keyword #列出匹配关键字的软件包 $ apt search pkg_keyword #列出匹配关键字的软件包，包括了版本信息 $ apt list pkgname #查找该软件包，会显示版本信息 $ apt-cache show pkgname #查询软件包详细信息 $ apt show pkgname #查询软件包详细信息 $ apt-cache depends...阅读全文
