更新于:04-06 09:44

有关[技术]分类推荐

容器的四大基础技术

于09-17 08:54 - [email protected] (linux) -
命名空间、控制组、seccomp 和 SELinux 构成了在系统上构建和运行一个容器进程的 Linux 技术基础. 在以前的文章中,我介绍过  容器镜像 及其  运行时. 在本文中,我研究了容器是如何在一些特殊的 Linux 技术基础上实现的,这其中包括命名空间和控制组. 图1:对容器有贡献的 Linux 技术(Nived Velayudhan,  CC BY-SA 4.0).

美团外卖实时数仓建设实践 - 美团技术团队

于08-27 08:00 - -
实时数仓以端到端低延迟、SQL标准化、快速响应变化、数据统一为目标. 美团外卖数据智能组总结的最佳实践是:一个通用的实时生产平台跟一个通用交互式实时分析引擎相互配合,同时满足实时和准实时业务场景. 两者合理分工,互相补充,形成易开发、易维护且效率高的流水线,兼顾开发效率与生产成本,以较好的投入产出比满足业务的多样性需求.

现代API渗透技术

于08-12 22:56 - -
API 有多种不同的形式,攻击 API 的方法会因这些形式的不同而有很大差异. 在一篇文章中涵盖所有攻击类型是不可能的,下面我重点介绍其中一部分. 与 Web 应用程序非常相似,API 可以具有不同级别的可见性. 有些可以通过互联网访问,而有些则只能在内部使用. API 攻击方式之一就是简单地访问你应该无法访问的 API.

Axon Saga的使用 | event sourcing | CQRS | axon | DDD | EdisonXu的技术分享

于08-01 10:01 - -
在上一篇里面,我们正式的使用了CQRS模式完成了AXON的第一个真正的例子,但是细心的朋友会发现一个问题,创建订单时并没有检查商品库存. 库存是否足够直接回导致订单状态的成功与否,在并发时可能还会出现超卖. 当库存不足时还需要回滚订单,所以这里出现了复杂的跨Aggregate事务问题. Saga就是为解决这里复杂流程而生的.

CQRS基本概念 | event sourcing | CQRS | axon | EdisonXu的技术分享

于08-01 09:26 - -
在研究微服务的过程中,跨服务的操作处理,尤其是带有事务性需要统一commit或rollback的,是比较麻烦的. 本系列记录了我在研究这一过程中的心得体会. 本篇主要就以下几个问题进行介绍:. 什么是EventSourcing. EventSourcing和CQRS的关系. CQRS/ES怎么解决微服务的难题.

k8s 重置,更换网络插件_云深不知处的技术博客_51CTO博客

于07-28 19:27 - -
在master节点删除flannel. 安装完毕后使用docker images 查看容器镜像可以看见如下以calico打头的镜像.

如何写好技术文档——来自Google十多年的文档经验

于07-27 12:33 - xindoo - java
本文大部分内容翻译总结自《Software Engineering at Google》 第10章节 _Documentation_. 另外,该书电子版近日已经可以免费下载了 https://abseil.io/resources/swe_at_google.2.pdf,有兴趣的同学可以下载翻阅下.

rsync+inotify-tools实现数据实时同步方案_Ljohn的技术博客_51CTO博客

于07-07 15:30 - -
与传统的cp、tar备份方式相比,rsync具有安全性高、备份迅速、支持增量备份等优点,通过rsync可以解决对实时性要求不高的数据备份需求,例如定期的备份文件服务器数据到远端服务器,对本地磁盘定期做数据镜像等. 随着应用系统规模的不断扩大,对数据的安全性和可靠性也提出的更好的要求,rsync在高端业务系统中也逐渐暴露出了很多不足.

远大集团预制装配技术让一栋10层高楼在一天内建成

于06-17 08:47 - -
据外媒报道,预制装配式建筑被设计成可以在很短的时间内组装在一起--这是它们的一大吸引力所在. 不过估计很难找到一栋楼房能像中国远大集团最近建成的这座10层住宅楼那样快. 据悉, 这座大楼仅用了一天多一点的时间--准确地说,是28小时45分钟. 该高层建筑采用了远大集团的Living Building预制结构体系.

Oracle里收集与查看统计信息的方法_DBA Fighting!的技术博客_51CTO博客

于06-08 08:51 - -
Oracle数据库里的统计信息是这样的一组数据:它存储在数据字典里,且从多个维度描述了Oracle数据库里对象的详细信息. CBO会利用这些统计信息来计算目标SQL各种可能的、不同的执行路径的成本,并从中选择一条成本值最小的执行路径来作为目标SQL的执行计划. Oracle数据库里的统计信息可以分为如下6种类型:.

数据库内核的快照技术实现原理

于06-04 22:10 - ideawu - 数据库
"快照(Snapshot)"是数据库领域非常重要的一个概念, 最初是用于数据备份. 如今, 快照技术已经成为数据库内核(引擎)最核心的技术特性之一. 数据库内核的绝大多数操作, 都依赖于快照, 例如, LevelDB 的每一次读取操作和遍历操作, 其内部都必须创建一个快照, 所以, 对于一个请求量非常大的系统, 数据库内核每秒种就要创建和销毁几十万次快照.

长连接网关技术专题(四):爱奇艺WebSocket实时推送网关技术实践

于05-17 23:12 - Jack Jiang -
本文由爱奇艺技术团队原创分享,原题《构建通用WebSocket推送网关的设计与实践》,有优化和改动. 丛所周之,HTTP协议是一种无状态、基于TCP的请求/响应模式的协议,即请求只能由客户端发起、由服务端进行响应. 在大多数场景,这种请求/响应的Pull模式可以满足需求. 但在某些情形:例如消息推送(IM中最为常见,比如IM的离线消息推送)、实时通知等应用场景,需要实时将数据同步到客户端,这就要求服务端支持主动Push数据的能力.

这个被马斯克嫌弃的新技术,为什么在中国越来越火?

于05-08 20:33 - -
2021 年,中国就有三款搭载激光雷达的量产车型发布,不出意外的话,年底就有不少量产车型跑在路上. 在刚刚过去的车展上,小鹏 P5、极狐阿尔法 S 均在激光雷达上铆足了劲宣传,加上 2020 年美国「造车新势力」lucid Air 车型发布,激光雷达上车变成了一种趋势. 而就在前几年,激光雷达与摄像头的技术路线还是行业内讨论最热烈的分歧之一,马斯克甚至喊出「激光雷达上车是件蠢事」.

使用logstash同步至ES的几个坑 - 一位帅气的网友的个人空间 - OSCHINA - 中文开源技术交流社区

于04-26 15:52 - -
记录使用logstash从sqlserver同步数据到ES中遇到的几点问题. 使用的版本是es6.8.3+logstash6.8.3. jdbc_driver_library => "/usr/local/logstash-6.8.3/logstashconfs/sqljdbc4.jar"#sqlserver的驱动jar包jdbc_driver_class => "com.microsoft.sqlserver.jdbc.SQLServerDriver".

千人万面奇妙自见:爱奇艺短视频推荐技术中多兴趣召回技术的演变

于04-23 17:28 - 爱奇艺技术产品团队 -
推荐系统的本质是信息过滤,多个信息漏斗将用户最感兴趣的内容逐步呈现在用户面前,如图1所示(《爱奇艺短视频推荐之粗排模型优化历程》). 召回阶段作为首个漏斗从多个维度将海量视频中用户可能感兴趣的内容滤出交给后续排序技术处理,它直接决定着后续推荐结果的效果上限. 本文主要介绍爱奇艺随刻推荐团队多兴趣召回技术的发展历程.

能让你纵享丝滑的SSR技术,转转这样实践

于04-22 15:56 - 大转转FE -
秒开率对于用户的留存率有直接的影响,数据表明, 网页加载时间过长会直接导致用户流失.转转集团作为一家电商公司, 对于H5页面的秒开率有着更加严格的需求, 在主要的卖场侧页面(手机频道页、3c频道页、活动页)等重要流量入口我们都采用了SSR(服务端渲染)技术来构建页面,今天就带大家了解一下我们摸索出来的一些最佳实践..

springboot单元测试技术

于04-18 17:20 - qihaiyan - spring boot spring java
整个软件交付过程中,单元测试阶段是一个能够最早发现问题,并且可以重复回归问题的阶段,在单元测试阶段做的测试越充分,软件质量就越能得到保证. 具体的代码参照 示例项目 https://github.com/qihaiyan/springcamp/tree/master/spring-unit-test.

OCR技术在爱奇艺的应用实践及演进

于04-13 09:59 - 爱奇艺技术 -
随着人工智能的热度上升,图像识别这一细分领域也渐渐被人们所关注. 在很多公司的业务中,有很多需要对图片进行识别的需求. 为了帮助业务实现对这些图片、文档的识别和结构化,业界进行了一系列的实践和探索,最终确定了一些可行的方法,总结了在实践过程中可能遇到的问题和难点. 为了更好地了解OCR技术在爱奇艺的应用实践,最近,InfoQ“大咖说”栏目邀请爱奇艺智能平台部助理研究员——Harlon 进行了一场直播分享,结合目前的业务需求,为我们陈述了爱奇艺在探索OCR技术发展过程中遇到的痛点和难点,以及识别技术的一些细节,以下是采访实录.

超3亿活跃用户的多活架构,数据同步与流量调度怎么做? - 架构 - dbaplus社群:围绕Data、Blockchain、AiOps的企业级专业社群。技术大咖、原创干货,每天精品原创文章推送,每周线上技术分享,每月线下技术沙龙。

于04-01 14:05 - -
1、OPPO多活架构原则   . 多活成本比较高的,双活是两倍,三活可能成本会低一些,但三活的难度更大. 因此没有办法对所有业务进行多活,只能对主线做多活. 举个例子,系统有个充值的功能,充值功能本身是强一致的,完全不能允许任何的延迟或者是副本的读. 但是多活切换之后,只有少数用户在切换的前几分钟有充值的,这部分用户余额可能没有通过过去,只需要对这部分用户进行服务降级,其他绝大多数用户是可以使用完整的服务的.

对话中国移动:支撑数亿用户的基础设施如何实施云原生改造? | 顶尖技术团队访谈

于03-17 16:04 - 赵钰莹 -
如今,数字化转型已经成为绝大多数企业重要且迫切的发展战略之一. 在这样的战略之下,企业上云成为大势所趋,基于容器、微服务、DevOps、服务网格等新型云原生技术正在深刻推动着企业 IT 变革,以实现全面数字化转型. 而中国移动作为这批浪潮中的先行者,早已全面拥抱云原生技术并自主创新研发了磐基容器云、磐舟云交付平台.

得物技术聊聊推荐系统是如何做排序的

于03-12 17:59 - 得物技术 - 推荐 排序 推荐系统 系统
信息时代到来以后,我们被各种各样海量的信息所淹没,从新闻、广告、电商、直播、短视频等各种涉及这些场景的APP中,大量个性化的信息被推送到我们眼前. 例如在使用得物APP购物的过程中,我们也常常会听到这样的问题, 为什么会给我推这双鞋/这件衣服. 为什么浏览收藏过的商品反复出现在推荐流中. 推荐的排序逻辑是怎样的,都考虑了哪些因素.

2021 有哪些不容错过的后端技术趋势

于03-12 19:00 - -
2020 年注定是不平凡的一年,虽疫情肆虐,但我国互联网产业展现出巨大韧性,不仅为精准有效防控疫情发挥了关键作用,还在数字基建、数字经济等方面取得了显著进展,成为我国应对新挑战、建设新经济的重要力量. 腾讯在线教育部后台中心团队,作为在线教育行业的从业者,我们尝试整理一下 2020 年后端技术要点,以此窥探后台未来技术的发展趋势:.

2020年大前端技术趋势解读

于12-21 14:20 - 腾讯IMWeb团队 -
如今的前端早已不再拘泥于满足页面展示,而是开始延展到通过全栈来闭环产品. 这表明前端已经有能力透过业务深入产业,继而影响商业结果. 这种表象的改变背后是本质的转变,从更为宏观的角度来说,前端正在通过持续的技术革新和技术融合不断突破自身边界,进而重新定义自身价值. 时光荏苒,非比寻常的一年即将过去. 在这过去的一年中,与其说前端的平稳期即将到来,不如说前端反而进入了技术深水区.

携程Hadoop跨机房架构实践_yukangkk的技术博客-CSDN博客

于12-06 08:57 - -
陈昱康,携程架构师,对分布式计算和存储、调度、查询引擎、在线离线混部、高并发等方面有浓厚兴趣. 本文将分享携程Hadoop跨机房架构实践,包含Hadoop在携程的发展情况,整个跨机房项目的背景,我们跨机房的架构选型思路和落地实践,相关的改造和对未来的展望,希望给大家一些启迪. 一、Hadoop在携程的落地及发展情况.

双链路智能切换 - IP技术专栏 - 技术甜甜圈 - 新华三集团-H3C

于11-23 11:51 - -
将原有线路和新增线路进行链路聚合,可实现流量负载和备份,由于是广域网线路,不推荐进行链路聚合,可能存在极端情况线路故障不能切换问题. 将新增线路设置成三层路由模式,可通过新增加一条等价路由的方式实现流量负载,路由协议可以选用静态路由或者动态路由(ospf等)当其中一条链路故障时,流量会自动切换至另一条线路,同时建议在两条广域网线路上增加NQA检测配置,并绑定至路由上,用于实现流量自动切换.

基于云原生的技术中台规划思考(201008)

于10-08 11:55 - 人月神话 - 微服务架构
今天谈下基于云原生的技术中台产品规划方面的思考. 自己在前面也写了很多关于SOA,中台,DevOps和云原生的相关技术文章. 在这些文章里面也谈了技术中台或传统我们谈的私有云PaaS技术平台,而云原生解决方案的核心是SOA+DevOps+容器云技术的融合,因此今天重点是谈围绕这三个核心点的技术中台规划.

腾讯信息流热点挖掘技术实践

于09-20 00:00 - - dev
分享嘉宾:罗锦文 腾讯 研究员. 编辑整理:Jane Zhang. 出品平台:DataFunTalk. 导读:当前各大资讯社交类APP都在显著的版面展示或者推荐热点相关内容,信息流应用能否快速发现热点、引导用户阅读热点,是影响用户体验的重要因素. 本次分享主要介绍腾讯在热点挖掘方面的工作. 基于搜索数据和自媒体文章,通过时序分析方法和内容聚类相结合的方法挖掘热点,并将热点聚类成事件和话题.

Spring Retry框架——看这篇就够了 - MarvelCode - OSCHINA - 中文开源技术交流社区

于09-14 23:49 - -
    软件架构从当初的单机,演变到后来的集群,再到后来的分布式应用. 原本看似可以信任的服务调用,加上了网络因素就变得不再可靠. 再考虑到一些调用链路的特殊性,又要保证性能,又要尽可能增加成功率,所以调用方必须肩负起重试的责任.     重试并不复杂,首先来分析下重试的调用场景,可以想到业务当中不止一处会需要重试能力,并且业务其实更关乎自己的代码块被重试就可以了,而不在乎如何实现的重试.

投资估值方法和技术

于09-05 09:09 - -
公司估值方法通常分为两类:一类是相对估值方法,特点是主要采用乘数方法,较为简便,如P/E估值法、P/B估值法、EV/EBITDA估值法、PEG估值法、市销率估值法、EV/销售收入估值法、RNAV估值法;另一类是绝对估值方法,特点是主要采用折现方法,如股利贴现模型、自由现金流模型等. 一、企业的商业模式决定了估值模式.

高性能开发十大必须掌握的核心技术

于08-21 22:54 - -
程序员经常要面临的一个问题就是:. 这篇文章,我们循序渐进,从内存、磁盘I/O、网络I/O、CPU、缓存、架构、算法等多层次递进,串联起高性能开发十大必须掌握的核心技术. - I/O优化:零拷贝技术. - 缓存技术 && 布隆过滤器. 首先,我们从最简单的模型开始. 老板告诉你,开发一个静态web服务器,把磁盘文件(网页、图片)通过网络发出去,怎么做.