最新消息:

最新发布

Flink

Kafka 与 Flink 集成详细解答

admin 4个月前 (06-24) 196浏览 0评论

Apache Flink是新一代的分布式流式数据处理框架,它统一的处理引擎既可以处理批数据(batch data)也可以处理流式数据(streaming data)。在实际场景中,Flink利用Apache Kafka作为上下游的输入输出十分常见,本...

Flink

技术角度深入理解 Apache Flink 核心深层技术

admin 4个月前 (06-24) 124浏览 0评论

Apache Flink(下简称Flink)项目是大数据处理领域最近冉冉升起的一颗新星,其不同于其他大数据项目的诸多特性吸引了越来越多人的关注。本文将深入分析Flink的一些关键技术与特性,希望能够帮助读者对Flink有更加深入的了解,对其他大数据系...

Hadoop

Nginx 配置整理

admin 4个月前 (06-24) 89浏览 0评论

1. C10k问题:无法同时并发超过(1w)客户端请求而出现的问题。   nginx默认配置超过1w并发; 2.配置文件conf/nginx.conf (1)user   www  www;   #定义Nginx运行的用户和用户组 ...

Hadoop

docker

admin 4个月前 (06-24) 104浏览 0评论

yum添加nginx源 1 rpm -Uvh http://nginx.org/packages/centos/7/noarch/RPMS/nginx-release-centos-7-0.el7.ngx.noarch.rpm Docker命令 #d...

抖音

奇葩面试经历分享:喊价二万五,HR 却给了三万块!

admin 4个月前 (06-24) 82浏览 0评论

 写在前面 本文是楼主前两个月 N 家公司的面试简历,总结复盘了面试现场,个人认为干货还是不少,在此和大家分享。 ps:至于题目所说的薪资,是面试过程中一个有意思的小插曲,只是确有其事,不是题目党。。。这块儿先卖个关子,请即席看官尔...

抖音

终于有技术大牛把中台给说清楚了

admin 4个月前 (06-24) 88浏览 0评论

新来朋侪圈被中台相干信息刷屏了,那么今天我们来说说中台! 缘起 百度指数搜索“中台”,可以发明,中台一词前几年差一点都没有搜索,反倒是当年5月21号动手蹭蹭往高涨! 百度指数 过细搜索了一下本来5月21号腾讯召开了全球数字生...

Flink

Flink 介绍和基本概念

admin 4个月前 (06-22) 81浏览 0评论

介绍概述Apache Flink是一个面向数据流处理和批量数据处理的可分布式的开源计算框架,它基于同一个Flink流式执行模型(streaming execution model),能够支持流处理和批处理两种应用类型。 由于流处理和批处理所提供的S...

Flink

一文读懂Apache Flink技术

admin 4个月前 (06-22) 71浏览 0评论

本文来自9月1日在成都举行的Apache Flink China Meetup,分享来自于云邪。 本文目录 一、Flink介绍 1.1 Flink基石 1.2 Flink API 1.3 Flink的用途 1.4 Flink Title的变化 二...

Flink

Flink 原理解析讲解(关于聚合机制)

admin 4个月前 (06-22) 57浏览 0评论

本文所讨论的计算资源是指用来执行 Task 的资源,是一个逻辑概念。本文会介绍 Flink 计算资源相关的一些核心概念,如:Slot、SlotSharingGroup、CoLocationGroup、Chain等。并会着重讨论 Flink 如何对计算...

Flink

Flink的快速入门

admin 4个月前 (06-22) 53浏览 0评论

1. Flink的引入 这几年大数据的飞速发展,出现了很多热门的开源社区,其中著名的有 Hadoop、Storm,以及后来的 Spark,他们都有着各自专注的应用场景。Spark 掀开了内存计算的先河,也以内存为赌注,赢得了内存计算的飞速发展。Spa...

Flink

Flink在美团的实践与应用

admin 4个月前 (06-22) 162浏览 0评论

本文整理自8月11日在北京举行的Flink Meetup,分享嘉宾刘迪珊(2015年加入美团数据平台。致力于打造高效、易用的实时计算平台,探索不同场景下实时应用的企业级解决方案及统⼀化服务)。 美团实时计算平台现状和背景 实时平台架构 上图...

HBase

HBase 二级索引与Coprocessor协处理器

admin 4个月前 (06-21) 95浏览 0评论

Coprocessor简介 (1)实现目的 HBase无法轻易建立“二级索引”; 执行求和、计数、排序等操作比较困难,必须通过MapReduce/Spark实现,对于简单的统计或聚合计算时,可能会因为网络与IO开销大而带来性能问题。 (2...

Hadoop

搜索引擎框架介绍(非原创)

admin 4个月前 (06-21) 131浏览 0评论

一、搜索引擎基础介绍二、常见搜索引擎框架介绍与比较三、参考文章   一、搜索引擎基础介绍 1. 什么是搜索引擎   搜索引擎,通常指的是收集了万维网上几千万到几十亿个网页并对网页中的每一个词(即关键词)进行索引,建立索引数据库的全文搜索引...

Flink

Flink源码分析 – 剖析一个简单的Flink程序

admin 4个月前 (06-21) 80浏览 0评论

在这之前已经介绍了如何在本地搭建Flink环境和如何创建Flink应用和如何构建Flink源码,这篇文章用官方提供的SocketWindowWordCount例子来解析一下一个常规Flink程序的每一个基本步骤。 示例程序 public clas...