众所周知，在Java的知识体系中，并发编程是非常重要的一环，也是面试的必问题，一个好的Java程序员是必须对并发编程这块有所了解的。为了追求成为一个好的Java程序员，我决定从今天开始死磕Java的并发编程，尽量弥补自己在这方面的知识缺陷。 并发必须知道的概念 在深入学习并发编程之前，我们需要了解几个基本的概念。 同步和异步同步和异步用请求返回调用的方式来理解相对简单。 同步：可以理解为发出一个请求后，必须等待返回结果才能执行下面的操作。 异步：请求发出后，不需要等待返回结果，可以继续执行后续操作，异步请求更像是在另一个 “空间” 中处理请求的结果，这个过程不会影响请求方的其他操作。 举个生活中的例子，比如我们去实体店买衣服，挑选完款式后下单让售货员去仓库拿货，在售货员拿货的过程你需要在店...阅读全文
前言 Kubernetes 中大量用到了证书, 比如 ca证书、以及 kubelet、apiserver、proxy、etcd等组件，还有 kubeconfig 文件。 如果证书过期，轻则无法登录 Kubernetes 集群，重则整个集群异常。 为了解决证书过期的问题，一般有以下几种方式： 大幅延长证书有效期，短则 10年，长则 100 年； 证书快过期是自动轮换，如 Rancher 的 K3s，RKE2 就采用这种方式； 增加证书过期的监控，便于提早发现证书过期问题并人工介入 本次主要介绍关于 Kubernetes 集群证书过期的监控，这里提供 3 种监控方案： 使用 Blackbox Exporter 通过 Probe 监控 Kubernetes apiserver 证书过期时间； 使...阅读全文
)确定决策并写出状态转移方程：因为决策和状态转移有着天然的联系，状态转移就是根据上一阶段的状态和决策来导出本阶段的状态。所以如果确定了决策，状态转移方程也就可写出。但事实上常常是反过来做，根据相邻两个阶段的状态之间的关系来确定决策方法和状态转移方程。 (4)寻找边界条件：给出的状态转移方程是一个递推式，需要一个递推的终止条件或边界条件。 一般，只要解决问题的阶段、状态和状态转移决策确定了，就可以写出状态转移方程（包括边界条件）。 实际应用中可以按以下几个简化的步骤进行设计： （1）分析最优解的性质，并刻画其结构特征。 （2）递归的定义最优解。 （3）以自底向上或自顶向下的记忆化方式（备忘录法）计算出最优值 （4）根据计算最优值时得到的信息，构造问题的最优解 算法实现的说明 动态规划的主要难点在...阅读全文
一次VPC IP。 回到UK8S CNI，我们再次分析重现案例日志。这一次有了更进一步的发现，所有kubelet传递给NETNS参数为空字符串的情形都发生在kubelet试图销毁Pod中第二个Sandbox的过程中。反之，kubelet试图销毁第二个Sandbox时，给CNI传入的NETNS参数也全部为空字符串。 到这里，思路似乎清晰了不少，所有泄露的VPC IP都是来自第二个Sandbox容器。因此，我们需要查清楚两个问题： 1. 为什么会出现第二个Sandbox容器？ 2. 为什么kubelet在销毁第二个Sandbox容器时，给CNI传入了不正确的NETNS参数？ 第二个Sandbox：我为何而生？ 在了解的第二个Sandbox的前世今生之前，需要先交待一下kubelet运行的基本原理...阅读全文
Intro Dapr 官方团队已于最近（2021.1.17）正式发布Dapr v1.0，Dapr已正式生产可用，可以部署到自托管环境或 Kubernetes 集群。对于绝大多数开发者来说，想必对Dapr只是有所耳闻，而具体是什么（What），可以解决什么样的问题（Why&How），有怎样的应用场景（Where），并不知悉。本文就尝试简要梳理下Dapr，并尝试回答以上问题。 What's Dapr Distributed Application Runtime. An event-driven, portable runtime for building microservices on cloud and edge. 分布式应用运行时。一个事件驱动、可移植的运行时用于在云上和边缘计算上构建...阅读全文
DPDK 全称为 Data Plane Development Kit ，是近年来在高速网络通信行业中炙手可热的一种网络报文处理加速框架。DPDK 从十年前诞生直至发展到今天已经可以支持业界主流的高端网卡以及各类加速硬件设备，同时也支持主流的各个CPU 体系结构（可以运行于 X86, Arm, Power 等平台）。同时也可以运行于 Linux/FreeBsd/Windows 等主流操作系统之上。DPDK因为其优异的性能指标被广泛的应用于网关/负载均衡/SDN/虚拟交换的各个场景。 本文主要介绍 DPDK 中的 libgraph 设计思想以及实现，libgraph 的设计思想源自于开源项目 Vector Packet Processor(VPP)。VPP 中的向量包处理优化方案是...阅读全文
干嘛的？“如果把腾讯比作一个工厂，那么数据中心就是车间，信息需要在这里集中处理、存储、交换。”腾讯技术工程事业群任职数据中心技术总监朱华说。 那个名叫T-block的技术，是腾讯数据中心自主研发的第四代技术。 腾讯数据中心的技术发展，总共经历四个阶段： 第一代（2006-2009），基本是沿用了传统电信机房的解决方案（厂房改造，风冷，N+1冗余），只在局部做了点优化，比如冷热通道隔离； 第二代（2007-2011），从天津开启数据中心的大而全模式，10万量级、大型离心冷水机组、10KV Switch Gear、变压器上楼、中压油机、UPS、STS、AHU、MAU、封闭热通道、预作用水消防、水侧Free cooling、Air side economizer； 第三代TMDC（2011...阅读全文
，可支持服务器及其所有功能的直接配置。Cherokee 在 Linux，Mac OS X，BSD 和 Solaris 上本机运行，但不在 Windows 上运行。 Monkey HTTP 服务器 Monkey HTTP 是一个轻量级的服务器和开发堆栈，最初针对 Linux 进行了优化，但现在也与 Mac OS X 兼容。它专为嵌入式设备而设计，因此具有高度可扩展性，具有低内存和低 CPU 消耗。该项目于 2001 年开始，在 2008 年被改写为事件驱动系统时转向专业应用程序。 服务器通过混合机制运行，为每个线程提供数千个客户端的访问能力。它提供高性能的重负载服务器，易于安装，是嵌入式设备的理想选择。 除了这三种Web服务器，你还有其他开源项目推荐吗？...阅读全文
多数公司租用计算能力来削减成本，它们的云计算之路仅走到 20％”，她解释：“接下来的 80％ 是关于释放实际业务价值和推动增长的，这才是云的未来。它需要将业务应用程序转移到混合云中，提取更多数据并优化从供应链到销售业务的每个部分。“ Red Hat 总裁兼首席执行官 Jim Whitehurst 表示：“开源是现代 IT 解决方案的默认选择，我对 Red Hat 在企业中实现这一目标所发挥的作用感到非常自豪。与 IBM 合作将为我们提供更高水平的规模、资源和能力，以加速开源作为数字化转型基础的影响，并将红帽带给更广泛的受众。同时保留我们独特的文化和坚定不移的开源创新承诺。“ 如果一切顺利，预计该交易将在明年下半年完成。...阅读全文
GitHub 刚刚通过官方博客发布了 21 日“挂掉”的事件分析。GitHub 指出此次事件发生的原因是在 10 月 21 日 22:52 UTC 进行日常维护——更换发生故障的 100G 光学设备时导致美国东海岸网络中心与美国东海岸数据中心之间的连接断开。 更具体地，GitHub 分析，虽然两地的连接在 43 秒内恢复，但这次短暂的中断引发了一系列事件，这才导致了长达 24 小时 11 分钟的服务降级。 为了大规模提高性能，GitHub 的应用程序将直接写入每个群集的相关主数据库，但在绝大多数情况下将读取请求委派给副本服务器的子集。GitHub 使用 Orchestrator 来管理 MySQL 集群拓扑并处理自动故障转移，Orchestrator 在此过程中考虑了许多变量，并在...阅读全文
(container_network_receive_bytes_total{image!=""}[1m])) by (pod_name) 本文由“跟着大数据和AI去旅行”发布于“简书”，转载时有增删和错误修正。...阅读全文
性能问题。四是 无 Sidecar 模式的服务网格可供选择。Istio 推出了 Ambient 部署模式，这是一种新的 Istio 数据平面模式，旨在简化操作、扩大应用兼容性并降低基础设施成本。用户可以选择将 Ambient Mesh 集成到其基础设施的网格数据平面，放弃 sidecar 代理，同时保持 Istio 的零信任安全、遥测和流量管理等核心功能。五是 WebAssembly 崛起。WebAssembly 正在发展成为云原生环境中跨平台、多语言的沙箱环境，甚至可以替代容器运行时，在 Kubernetes 中编排调度。 WasmEdge、KubeEdge、Istio 等项目可以从控制平面无缝编排 Wasm 工作负载。...阅读全文
工作规范和工作流程，并跟踪开发过程实际合规性； 8. 指导. 审核项目总体技术方案，对各项目进行最后的质量评估； 9. 负责技术团队建设和管理，注重人才培养和营造创新的研发文化； 10. 完成各项技术工作相关数据统计分析报告，并据此对公司发展提出合理化建议。 ** 岗位要求：** 1. 本科及以上学历，计算机. 软件工程相关专业，互联网行业优先考虑； 2. 10年及以上技术研发. 软件开发相关行业工作经验，5年以上互联网行业技术研发团队管理经验， 精通基于Java. PHP等语言的开发，熟悉服务端软件架构设计与开发流程；有互联网CTO或技术总监工作经验，带过百人以上团队； 3. 熟悉互联网领域业务，深刻理解产业发展方向，具备敏锐准确的洞察力和缜密的逻...阅读全文
>
的大目标是制定800Gbase-R规范（base-R表示当前媒体上的当前标准系列，base-T和base-C表示前几代）。 与以前的以太网迭代一样，许多技术将被重用和开发。800Bbase-R规范（或800gbe）需要对媒体访问控制（MAC）和物理编码子层（pc）进行新的定义。这些将从 IEEE 802.3bs 标准中 400GbE 的现有规范中重新定义，重新定义为在8条 106gbps 信道上工作。为了兼容性，规范中的其他部分（如前向错误控制）保持不变。 RobStone等技术工作组主席说：“这项工作的目的是尽可能重新利用标准的400GbE逻辑，以创建一个800GbE的MAC和PC规范，从而为实施多速率以太网端口的用户提供最低的开销成本。”...阅读全文
给每个节点和待分配的pod进行打分。1.首先可用的node和pod会被打分函数进行打分，分数在0-10分之间。并且每个打分函数还有一个权重值。那么一个可用的node节点最后的总分就是：Σ函数打分*函数的权重值。 node节点总分 =（函数1的打分 * 函数1权重值）+......+（函数n的打分 * 函数n的权重值） 2.打分函数即优先级函数的种类： 这里只介绍了一部分的优先级函数算法，还有许多算法在这里未解释有兴趣的小伙伴可以上网查一下哦。 小结 kube-scheduler组件将整个集群资源调配变得很科学。比如该如何分配pod的副本到其他的node节点中，或者如何分配pod使得集群运转的更加高效。此外kube-scheduler还支持第三方的调度器进行扩展，所以是一种插件化的实现。...阅读全文
{namespace} 这个方法简单粗暴有效。因为 Kubernetes 是声明式 API，所以删掉了之后，Pod API 对象就与预期的不一致了，便会自动重新创建 Pod 保持与预期一致。但是如果ReplicaSet 管理的 Pod 对象很多的话，那么要一个个手动删除，会很麻烦，所以可以使用命令来删除 ReplicaSet， kubectl delete replicaset {rs_name} -n {namespace} 由于 Deployment 对象并不是直接操控的 Pod 对象，而是操控的 ReplicaSet 对象，而 ReplicaSet 对象就是由副本数目的定义和Pod 模板组成，所以我们也可以通过调整 ReplicaSet 的数量来实现重启，比如先 scale 到 0，然后再 scale...阅读全文
骤，以及机器和软件的反应，直到问题发生。在命令行处理的情况下，提供一段操作记录（例如运行脚本工具所生成的），并引用相关的若干行（如 20 行）记录会非常有帮助。如果程序有诊断选项（如 -v --verbose --debug LOG_LEVEL=DEBUG 的详情指令），试着选择这些能在记录中增加调试信息的选项。记住，多不等于好。试着选取适当的调试级别以便提供有用的信息而不是让读者淹没在垃圾中。如果你的说明很长，在开头简述问题，接下来再按时间顺序详述会有所帮助。描述目标而不是过程如果你想弄清楚如何做某事（而不是报告一个 Bug），在开头就描述你的目标，然后才陈述重现你所卡住的特定步骤。😒 BAD | 我怎样才能从某绘图程序的颜色选择器中取得十六进制的 RGB 值？😊 GOOD| 我正试着...阅读全文
较于PHP、Python、Java来说，JavaScript是最有可能在物联网大行其道的解释性语言。 JavaScript在浏览器没有对手，nodejs在服务器端也在不停的攻城拔寨，积累了大量的资源，构建了一个完整的应用开发生态环境。 JavaScript语言本身特点适合互联网，事件驱动，异步使单线程处理网络事件得心应手。 JavaScript已经跨界到物联网，受到了行业巨头的关注，各种项目发展的如火如荼。 未来的物联网开发 如果JavaScript在物联网获得成功，那么物联网的开发将会发生巨大的变化。 底层驱动由C实现，应用开发者不需要关注硬件，大量的互联网、移动互联网应用开发者加入物联网开发。 传统的交叉编译、烧写、调试的开发方式使用范围将急剧缩小 所见即所得，上位机和下位机的架构由C...阅读全文
Scrapy 是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘、信息处理或存储历史数据等一系列的程序中。本文着重介绍 Scrapy 架构及其组件之间的交互。 Scrapy 组件介绍 Scrapy Engine 引擎负责控制数据流在系统中所有组件中流动，并在相应动作发生时触发事件。 详细内容查看下面的数据流(Data Flow)部分。 调度器(Scheduler) 调度器从引擎接受request并将他们入队，以便之后引擎请求他们时提供给引擎。 下载器(Downloader) 下载器负责获取页面数据并提供给引擎，而后提供给spider。 Spiders Spider 是 Scrapy用户编写用于分析response并提取item(即获取到的item)或额外跟进的...阅读全文
司来回应业界和媒体联系，这并非正常安全公司的风格。 AnandTech就这些疑问向CTS-Labs发去邮件查询，尚未得到任何回应。 很多人可能会和此事将近来闹得沸沸扬扬的Meltdown熔断、Spectre幽灵漏洞相比，但后者是Google等权威安全团体早就确认的，而且第一时间和Intel、AMD、ARM、微软、亚马逊等等业内相关企业都做了联系沟通，共同解决，最后媒体踢爆属于意外曝料，而且当时距离解禁期已经很近了。 另外值得注意的是，这次曝光的漏洞，都是涉及AMD Zen处理器内部的安全协处理器(ARM A5架构模块)和芯片组(祥硕给AMD外包做的)，和Zen微架构本身并无任何关系，并非核心级别问题。 还有媒体报道指出，攻击者如果要利用这些漏洞，都必须提前获取管理员权限，然后才能通过网络安装...阅读全文
的永久存储和查询能力。 Compactor则是对Bucket里的历史数据进行采样或者清理，有具体需求后再自行研究即可。 上述组件均是可选的，没有历史数据永存需求的可以直接忽略。 方案2：thanos receive + thanos querier thanos提供的另一种方案是计算与存储分离，利用thanos receive组件部署一个分布式存储集群，然后令prometheus通过remote write机制直接写入到thanos receive集群完成分布式存储，这样prometheus本身就无状态了。 再利用thanos querier反向代理到thanos receive集群，最终对外提供统一的promql查询入口，这个阶段就没有prometheus什么事了。 这套方案的工作原理如下...阅读全文
程技术平台。而到了 Novell 之后用了不到三年就使这家公司扭亏为盈，最后的亏损其实很大程度上需要归结为微软的打压和互联网泡沫的破裂，那次失败真不是施密特能控制的。所以 Novell 公司在他担任谷歌 CEO 之后依然为他保留了董事会主席席位，以示尊重。 施密特的地位堪比二位创始人 谷歌由佩奇和布林创立于1998年，但是直到2001年施密特担任 CEO，谷歌依然只是一个技术还不错，但是完全没办法赚钱的小公司，施密特本人就曾直言：“他们在各个方面的看法，都与我不尽相同。让人搞不清他们的思路究竟是令人耳目一新的远见，还是单纯天真。” 而施密特的加入，正好为两位创始人天马行空的设想打下了良好的基础——钱。施密特发现了搜索业务和广告之间的高度关联性，并由此创造了搜索广告这一革命性的盈利模式，直到现...阅读全文
表示： 每个开发者都将能够从开源提供的集体创新中获取工具和代码，以构建现代数据驱动的应用程序，提供差异化的、有吸引力的体验，从而推动收入增长。这将通过创造一种 innersource 文化（将开源文化和工具带入企业）来实现，以加快开发速度、减少项目积压、创造更多乌托邦式的开发者环境。无服务器数据库技术与现代 API 和流媒体技术相结合，将等于一个开放的堆栈，在实现这一目标方面发挥巨大作用，因为它们将减轻基础设施团队的负担（例如管理多个数据中心实例、多云供应商和多个流媒体项目）。 Sumo Logic 的 Reno 还指出，作为这个过程的一部分，开发者需要围绕使用数据本身获得更多的帮助。他以可观察性的 OpenTelemetry 项目进行举例，说明开发者希望从他们所拥有的数据中获得更多的东西...阅读全文
虑增加合适RI，以进行自动匹配针对license机型（Windows， RHEL 等），因不适用灵活匹配，可进行同实例类型的合并拆分针对实例类型，OS平台的修改等则需要可转换RI 本文转自【光环有云】，略有增删。...阅读全文
Android 从来都不存在一样，Arm 也希望 RISC-V 不存在。” Riordan 如此说道。 2019 年可能是 Arm 的转折点。这家英国公司对客户（主要是半导体公司）的微处理器 IP 许可进行了一系列重大更改，目的是提供更好的访问以及更灵活的芯片设计选项。今年早些时候，Arm 推出了 Arm 灵活访问权限（Arm Flexible Access）—— 通过它客户可以以较低的费用访问公司的广泛技术组合，而没有购买完整许可证的义务。 在本周于圣何塞举行的 Arm TechCon 年度技术会议上，Arm 首席执行官 Simon Segars 宣布将自定义指令（Custom Instructions）添加到以 IoT 为重点的 Cortex-M 处理器系列中，并从 2020 年上半年的 Arm...阅读全文
LSI业务正专注于提高NPU（神经处理单元）和调制解调器等基本芯片的性能，并通过与全球行业领先的公司合作，创新CPU（中央处理单元）和GPU（图形处理单元）技术。系统LSI业务也在继续其在超高分辨率图像传感器方面的工作，以便其芯片能够像人眼一样捕捉图像，并且还计划开发能够发挥人类所有五种感官作用的传感器。新一代逻辑芯片亮相三星电子在技术日展台上首次披露了一些先进的逻辑芯片技术，包括5G Exynos Modem 5300、Exynos Auto V920和QD OLED DDI，这些芯片是移动、家电和汽车等各个行业的重要组成部分。今年新发布或宣布的芯片，包括高端移动处理器Exynos 2200，以及20万像素的ISOCELL HP3--拥有业界最小的0.56微米（μm）像素的图像传感器也在展出之...阅读全文
新的技术，特别是在网络和云计算领域。在网络方面，与中国三大运营商，包括中国移动、中国电信、中国联通，还有中兴、华为等开展合作。在云计算方面，Linux 有云原生的一些项目，主要是和 BAT三家大的公司来开展合作。 在Jim 看来，新的企业和机构加入到 Linux 的活动当中，会给 Linux 带来更多的价值。 上周日本丰田宣布在销售最好的产品凯美瑞中使用 Linux 系统。汽车行业的加入，意味着将会对 Linux 内核提出新的要求，这对于为嵌入式系统开发解决方案的厂商来说也是很好的消息。加入 Linux 意味着他们的测试覆盖范围更大了，有更多的人对这个代码进行审议。 “总的来说，我们觉得越多的企业和组织架构加入到 Linux 的阵营，实际上对Linux 的发展是越好的。” （二）谈...阅读全文
channel通道golang的并发模型是序列通信处理CSP（communicating sequential process）——使用通信来共享内存 ，避免goroutine因竞争共享内存频繁加锁产生的性能问题。基本数据结构golang中提供了一个特殊的类型channel实现goroutine之间的通信。channel类似于队列，先进先出。channel数据结构源码在src/runtime/chan.go下。chan 使用 hchan 表示，它的传参与赋值始终都是指针形式，每个 hchan 对象代表着一个 chan。hchan 中包含一个缓冲区 buf，它表示已经发送但是还未被接收的数据缓存。buf 的大小由创建 chan 时的参数来决定。qcount 表示当前缓冲区中有效数据的总量...阅读全文
