更新于:10-11 15:31

有关[博客]分类推荐

Java 中使用 HttpClinet 工具详解 · 小豆丁个人博客

于03-30 09:20 - -
  !版权声明:本博客内容均均为原创,每篇博文作为知识积累,写博不易,转载请注明出处. HttpClient 版本:5.0. Apache Httpclient 官方文档. 博文示例项目 Github 地址:. 一、HttpClient 简介.        超文本传输协议(HTTP)可能是当今. Internet上使用的最重要的协议.

Logstash处理json格式日志文件的三种方法_数据库_很多时候,你缺少的不是知识而是热情-CSDN博客

于03-26 17:19 - -
假设日志文件中的每一行记录格式为json的,如:. 默认配置下,logstash处理插入进elasticsearch后,查到的结果是这样的:. 即会将json记录做为一个字符串放到”message”下,但是我是想让logstash自动解析json记录,将各字段放入elasticsearch中. 第一种,直接设置format => json.

Elasticsearch聚合 之 Terms 及准确性 - xingoo - 博客园

于03-24 12:38 - -
之前总结过metric聚合的内容,本篇来说一下bucket聚合的知识. Bucket可以理解为一个桶,他会遍历文档中的内容,凡是符合要求的就放入按照要求创建的桶中. 本篇着重讲解的terms聚合,它是按照某个字段中的值来分类:. 比如性别有男、女,就会创建两个桶,分别存放男女的信息. 默认会搜集doc_count的信息,即记录有多少男生,有多少女生,然后返回给客户端,这样就完成了一个terms得统计.

构建archetype发布到私服 - ronaldo918 - 博客园

于03-14 14:40 - -
由于项目需要,想自己建立骨架,便于大家在同一个骨架下开发,便决定自己写骨架并发布到maven仓库,写好后网上查了好多都发布不成功,反复多次终于成功,总结两个原因. 1.pom文件的distributionManagement节点下的releases和snapshots节点id一定要和.m2/setting.xml中的server节点的id一样.

Gitflow工作流程 - Jeffery-Zou - 博客园

于03-13 20:44 - -
Git的时候,有很多种工作流程可供选择,此时反而会让你手足无措. 本文罗列了企业团队最常用的一些. git工作流程,包括Centralized Workflow、Feature Branch Workflow、Gitflow Workflow、Forking Workflow. 在你开始阅读之前,请记住:这些流程应被视作为指导方针,而非“铁律”.

Docker:Swarm + Stack 一站式部署容器集群_运维_Lunex的博客-CSDN博客

于02-19 19:44 - -
Docker:Swarm + Stack 一站式部署容器集群. Docker将应用沙盒化,将程序的运行与主机的环境隔离开,本身是十分适合进行应用程序的堆砌、组合、互动的. 新推出的(还算新吧)swarm功能将不同的docker容器集成为管理节点-工作节点的集群模式,建立联系的同时也可以分配计算资源,实现以docker容器为单元的并行任务.

Spring Cloud 不停机发布服务(0-downtime Blue/Green deployments) | 帆的博客

于02-15 22:51 - -
项目初期由于BUG和需求改动可能都会比较多,我们会很频繁的发布我们的应用. 但是如果不进行处理,在升级的过程中会导致用户服务中断. 实际上针对这两种情况,在传统的应用中我们是很容易做到不停机升级的. 例如nginx负载均衡2台tomcat实例,在升级的时候切断其中一台访问,升级完成以后切换流量,再升级另外一台.

JHipster生成微服务架构的应用栈(一)- 准备工作 - 羽客 - 博客园

于02-11 15:10 - -
本系列文章演示如何用JHipster生成一个微服务架构风格的应用栈. 环境需求:安装好JHipster开发环境的CentOS 7.4(. 业务微服务:microservice1. 主机IP:192.168.220.120. 本系列文章会说明如何生成uaa(即图中的JHipster UAA),microservice1,gateway这3个微服务.

HBase统计表行数(RowCount)的四种方法_Abysscarry的博客-CSDN博客

于02-09 20:32 - -
对于其他数据存储系统来说,统计表的行数是再基本不过的操作了,一般实现都非常简单;但对于HBase这种key-value存储结构的列式数据库,统计. RowCount的方法却有好几种不同的花样,并且. 测试集群:HBase1.2.0 - CDH5.13.0 四台服务器. 注:以下4种方法效率依次提高.

HBase BulkLoad批量写入数据实战 - 哥不是小萝莉 - 博客园

于02-09 19:17 - -
在进行数据传输中,批量加载数据到HBase集群有多种方式,比如通过HBase API进行批量写入数据、使用Sqoop工具批量导数到HBase集群、使用MapReduce批量导入等. 这些方式,在导入数据的过程中,如果数据量过大,可能耗时会比较严重或者占用HBase集群资源较多(如磁盘IO、HBase Handler数等).

HBase如何合理设置客户端Write Buffer - 大圆那些事 - 博客园

于02-09 19:11 - -
大圆那些事| 转载请以超链接形式标明文章原始出处和作者信息. HBase客户端API提供了Write Buffer的方式,即批量提交一批Put对象到HBase服务端. 本文将结合HBase相关源码,对其进行深入介绍,分析如何在实际项目中合理设置和使用它. 什么时候需要Write Buffer. 默认情况下,一次Put操作即要与Region Server执行一次RPC操作,其执行过程可以被拆分为以下三个部分:.

Oracle的时区问题 - 永春 - 博客园

于02-05 19:50 - -
TIMESTAMP类型不支持时区转换. 如果应用和Oracle的时区不一致,那么应该使用. 对于JDBC程序来说,JVM时区和用户时区保持一致就行了. 如果应用和Oracle的时区不一致,而且需要保存时区信息,那么应该使用. 格式化日期时间字符串函数. TIMESTAMP WITH TIME ZONE来说,使用.

关于Kafka broker IO的讨论 - huxihx - 博客园

于02-03 19:24 - -
  Apache Kafka是大量使用磁盘和页缓存(page cache)的,特别是对page cache的应用被视为是Kafka实现高吞吐量的重要因素之一. 实际场景中用户调整page cache的手段并不太多,更多的还是通过管理好broker端的IO来间接影响page cache从而实现高吞吐量.

kafka集群broker节点扩容方案_watermelonbig的专栏-CSDN博客

于02-03 10:35 - -
在用kafka集群有3个节点,即host1, host2, host3,现需要将broker节点扩容至6个,以提供更高的数据处理能力. 一、上架物理服务器用于提供更多的资源. 新扩容3个broker节点,host4,host5,host6. 二、在三台新增节点上部署kafka应用程序. 三、重新分布原有的topic分区.

Kafka参数影响及性能测试_tom_fans的博客-CSDN博客

于02-02 11:55 - -
Kafka提供了2个测试脚本,kafka-producer-perf-test.sh以及kafka-consumer-perf-test.sh,  kafka参数非常多,有些使用默认即可,有些对性能影响极大,只有经过测试,你才能够对这些参数有直观的感觉. 下面我们先测试producer.. 先看看producer脚本怎么使用:.

利用ogg实现oracle到kafka的增量数据实时同步 | 伦少的博客

于02-01 17:34 - -
ogg即Oracle GoldenGate是Oracle的同步工具,本文讲如何配置ogg以实现Oracle数据库增量数据实时同步到kafka中,其中同步消息格式为json. 下面是我的源端和目标端的一些配置信息:. 注意:源端和目标端的文件不一样,目标端需要下载Oracle GoldenGate for Big Data,源端需要下载Oracle GoldenGate for Oracle具体下载方法见最后的附录截图.

基于OGG的Oracle与Hadoop集群准实时同步介绍 - 偶素浅小浅 - 博客园

于02-01 17:33 - -

定时任务莫名停止,Spring 定时任务存在 Bug?? - 楼下小黑哥 - 博客园

于01-31 14:52 - -
这里楼下小黑哥给大家拜个年,祝大家蒸蒸日上烫烫烫,年年有余屯屯屯. 春节放假,小黑哥坐上高铁回家,突然想到一次生产问题. 那是小黑哥参加工作第一年,那一年国庆假期,小黑哥提前一天请假回家办个护照. 那时候刚开始负责一个生产系统,所以工作日请假,还是有点担心,就怕. 问题看小黑哥不在,悄然上门. 高铁开到一半的时候,同事反馈系统不能获取最新的流水信息(流水信息通过.

使用filebeat收集kubernetes中的应用日志 - 宋净超的博客|Cloud Native|云原生布道师

于01-30 18:02 - -
本文已同步更新到Github仓库. kubernetes-handbook中. 使用Logstash收集Kubernetes的应用日志,发现logstash十分消耗内存(大约500M),经人提醒改用filebeat(大约消耗10几M内存),因此重写一篇使用filebeat收集kubernetes中的应用日志.

为什么 K8s 在阿里能成功?| 问底中国 IT 技术演进 - 阿里巴巴云原生 - 博客园

于01-24 08:13 - -
曾凡松 阿里云云原生应用平台高级技术专家. 张振 阿里云云原生应用平台高级技术专家. 导读:本文描述了阿里巴巴在容器管理领域的技术演进历程,解读了为什么 K8s 最终能够大获成功的原因,以及到今年 双11 阿里巴巴内部的 K8s 应用情况. 内容着重描述了阿里巴巴基于 K8s 的云原生改造实践过程的三大能力升级,在对应能力升级过程中沉淀的技术解决方案,以及通过这些能力升级所取得的业务价值.

LSM-tree 基本原理及应用_LSM数,lsm,lsm-tire_永生只是一场幻梦-CSDN博客

于01-11 09:45 - -
LSM-tree 在 NoSQL 系统里非常常见,基本已经成为必选方案了. 今天介绍一下 LSM-tree 的主要思想,再举一个 LevelDB 的例子. 正文 3056 字,预计阅读时间 8 分钟. 起源于 1996 年的一篇论文《The Log-Structured Merge-Tree (LSM-Tree)》,这篇论文 32 页,我一直没读,对 LSM 的学习基本都来自顶会论文的背景知识以及开源系统文档.

研发环境容器化实施过程(docker + docker-compose + jenkins) - 陈晨_软件五千言 - 博客园

于12-28 22:24 - -
目前公司内部系统(代号GMS)研发团队,项目整体微服务规模大概是4+9+3的规模,4个内部业务微服务,9个是外部平台或者基础服务(文件资源/用户中心/网关/加密等),3个中间件服务(数据库/Redis/Nacos). 需求和排期都是会有交叉,会保证每周都有迭代内容交付,另外技术部门也在进行性能优化以及代码规约的重构.

ASP.NET Core Web API 最佳实践指南 - hippieZhou - 博客园

于12-19 21:38 - -
当我们编写一个项目的时候,我们的主要目标是使它能如期运行,并尽可能地满足所有用户需求. 但是,你难道不认为创建一个能正常工作的项目还不够吗. 同时这个项目不应该也是可维护和可读的吗. 事实证明,我们需要把更多的关注点放到我们项目的可读性和可维护性上. 这背后的主要原因是我们或许不是这个项目的唯一编写者.

Oracle大规模数据快速导出文本文件 - 王亨 - 博客园

于12-17 12:19 - -
哈喽,前几久,和大家分享过如何把文本数据快速导入数据库(点击即可打开),今天再和大家分享一个小技能,将Oracle数据库中的数据按照指定分割符、指定字段导出至文本文件. 首先来张图,看看导出的数据是什么样子. 用到的就是Oracle的spool命令,可以将数据库数据导出一个文本文件,而且也可以指定数据分隔符,其中!^是数据之间的分隔符.

JMeter非GUI模式执行测试-10999785-51CTO博客

于12-14 11:59 - -
实际压测时,强烈建议使用命令行模式,即非GUI模式,消耗压力机资源较低,可以支持较大并发. 注意:如有必要,使用管理员权限打开命令提示符.           如有必要,重启master机或者slave机.           如有必要,重启jmeter.           windows可以直接在脚本目录,打开命令行:按住Shift键,鼠标右键选择“在此处打开命令窗口”.

性能测试流程 - 十八岁 - 博客园

于12-11 21:33 - -
前段时间做了一个压测项目,对压测过程中学到的知识进行了总结,在此和大家分享下:. 通过不断加压,得到服务器峰值,找出系统瓶颈. 确定系统各项指标是否满足上线预估目标. 压测时,要隔离线上环境,以免影响线上其他业务,主要关注以下三点:. 如果只有线上环境,要确保线上环境没有其他业务. 要压测的环境所接入的第三方接口也要确定做到隔离线上环境.

微服务架构~BFF和网关是如何演化出来的 - 大大的橙子 - 博客园

于12-08 21:17 - -
BFF(Backend for Frontend)和网关Gateway是微服务架构中的两个重要概念,这两个概念相对比较新,有些开发人员甚至是架构师都不甚理解. 本文用假想的公司案例+图示的方式,解释BFF和网关是什么,它们是怎么演化出来的. 希望对架构师设计和落地微服务架构有所启发. 我们先把时间推回到大致2011年左右.

微服务的脚手架Jhipster使用(一) - 陆陆起飞啦 - 博客园

于12-08 09:58 - -
随着微服务的普及以及docker容器的广泛应用,有传统的soa服务衍生出微服务的概念,微服务强调的是服务的独立性,屏蔽底层物理平台的差异,此时你会发现微服务跟容器技术完美契合. 在此基础上衍生出的云原生以及DevOps的概念,废话不多说介绍一个非常牛叉的springCloud脚手架- -jhipster.

VisualVM分析与HelloWorld、springBoot项目 - metabolism - 博客园

于12-08 07:46 - -
VisualVM分析与HelloWorld、springBoot项目. 自从1995年第一个JDK版本JDKBeta发布,至今已经快25年,这些年来Java的框架日新月异,从最开始的Servlet阶段,到SSH,SSI,SSM,springboot等,还有一些其他方向的框架微服务SpringCloud、响应式编程Spring Reactor.

终于有人把“TCC分布式事务”实现原理讲明白了! - JaJian - 博客园

于11-29 00:22 - -
之前网上看到很多写分布式事务的文章,不过大多都是将分布式事务各种技术方案简单介绍一下. 很多朋友看了还是不知道分布式事务到底怎么回事,在项目里到底如何使用. 所以这篇文章,就用大白话+手工绘图,并结合一个电商系统的案例实践,来给大家讲清楚到底什么是 TCC 分布式事务. 首先说一下,这里可能会牵扯到一些 Spring Cloud 的原理,如果有不太清楚的同学,可以参考之前的文章:.