-
大数据干货分享:大数据集群的自动化运维实现思路
所属栏目:[设计教程] 日期:2019-11-02 热度:76
摘 要 IT公司的数据平台是支撑大规模数据处理、数据决策支持的重要基础设施,随着大数据及人工智能技术的发展,大数据集群规模变得越来越大。然而,如何快速、高效的管理好成千上万台的大数据集群成为了很多大数据工程师的奋斗目标,设计实现合理的自动化[详细]
-
开打5G价格战,美运营商也搞“互联网思维”
所属栏目:[设计教程] 日期:2019-11-02 热度:75
在5G网络和市场运作领跑全球后,美国运营商市场开始进入真正的刺刀见红阶段。 目前的三大运营商之中,抛开正为并购案发愁的T-Mobile与Sprint不谈。笑的最欢、价格战打得最猛的,是威瑞森(Verizon Communications)。 5G让运营商获益匪浅 上周五,美国最大的[详细]
-
刚刚更新过的大数据书单推荐给你
所属栏目:[设计教程] 日期:2019-11-02 热度:97
给大家推荐一份大数据书单,好像这份书单很久没有人更新过了,我搜罗了一份与您共享。 1、Flink入门与实战 Flink是大数据处理领域最近冉冉升起的一颗新星,它可以基于Hadoop进行开发和使用,与Hadoop紧密结合。本书旨在帮助读者从零开始快速掌握Flink的基[详细]
-
数据分析入门经典问题:你两个朋友同一天过生日的概率有多大?
所属栏目:[设计教程] 日期:2019-11-02 热度:50
假如把N个人分成一组,至少有两个人是同一天生日的概率是多少? 现在来猜一猜:假设这一组有N=30个人。那么有两个人在同一天吃生日蛋糕的概率是多少呢?我们换个说法:你敢不敢用10美元赌里面有两个同月同日生的人? 我们会以这个例子收尾,但首先我们需要收[详细]
-
高级程序员的修养,不得不知的硬核知识:CPU
所属栏目:[设计教程] 日期:2019-11-02 热度:97
大家都是程序员,大家都是和计算机打交道的程序员,大家都是和计算机中软件硬件打交道的程序员,大家都是和CPU打交道的程序员,所以,不管你是玩儿硬件的还是做软件的,你的世界都少不了计算机最核心的 - CPU。 CPU是什么 CPU 的全称是 Central Processing[详细]
-
面试问:Kafka为什么速度那么快?该怎么回答
所属栏目:[设计教程] 日期:2019-10-29 热度:100
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 Kafka的消息是保存或缓存在磁盘上的,一般认为在磁盘上读写数据是会降低性能的,因为寻址会比较消耗时间,但是实际上,Kafka的特性之一就是高吞吐率。即使是普通的服务器,Kafka也可以轻[详细]
-
谷歌首席科学家:搞研究的痛苦,搞工程的人不懂
所属栏目:[设计教程] 日期:2019-10-29 热度:68
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 谷歌首席科学家、谷歌大脑技术负责人Vincent Vanhoucke(万努克)最近发出的一篇劝退文,引发海外科研学者的热议。 在这博客中,万努克直言以研究为业,固然令人羡慕,但会面临着各种各样的[详细]
-
Python爬虫44万条数据揭秘:如何成为网易音乐评论区的网红段子手
所属栏目:[设计教程] 日期:2019-10-29 热度:161
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 获取数据 其实逻辑并不复杂: 爬取歌单列表里的所有歌单url。 进入每篇歌单爬取所有歌曲url,去重。 进入每首歌曲首页爬取热评,汇总。 歌单列表是这样的: 翻页并观察它的url变化,注意[详细]
-
小型企业将如何从5G中受益
所属栏目:[设计教程] 日期:2019-10-29 热度:180
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 在足够多的新设备进入主流市场之前,5G已经在许多领域引起了越来越多的关注。从IT、零售、交通和制造业到医疗、娱乐、教育和农业,几乎每个行业都将在某种程度上受到5G的影响。 越来越多[详细]
-
对PB级非结构化数据的要求
所属栏目:[设计教程] 日期:2019-10-29 热度:112
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 众所周知,非结构化数据很难管理。但是,当组织的非结构化数据资产超过PB阈值时,控制数据集将带来一系列全新的挑战。 大多数传统的网络附加存储(NAS)系统都难以管理100 TB的非结构化数据[详细]
-
女友长期半夜不回家,窃听她手机后令我崩溃...
所属栏目:[设计教程] 日期:2019-10-29 热度:79
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 我女朋友每天七点就下班了,通常七点半就在家,但是最近这段时间她总是三更半夜才回家...... 图片来自 Pexels 她对我态度也极其不耐烦,朋友圈的合照也删了,说有领导看见不太好,可是她[详细]
-
当WiFi6撞上5G,是危机还是商机?
所属栏目:[设计教程] 日期:2019-10-29 热度:192
2019年9月16日 WiFi联盟宣布WiFi6认证计划 而我国的5G牌照早在今年6月份已发放 2019年是5G与WiFi6的商用元年,二者近来也颇具话题性,甚至不少人在争论,未来WiFi6与5G正面碰撞,WiFi6会逐渐被淘汰,但也有不少人认为WiFi6与5G是相互竞争,但也可以是完美[详细]
-
一文详解被阿里腾讯视作核心机密的大数据平台架构
所属栏目:[设计教程] 日期:2019-10-29 热度:131
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 如果我们能够化整为零,在企业内部从宏观、整体的角度设计和实现一个统一的大数据平台,引入单一集群、单一存储,统一服务和统一安全的架构思想,就能很好的帮助企业解决很多问题。 提到[详细]
-
数据及分析的未来--增强分析?
所属栏目:[设计教程] 日期:2019-10-28 热度:99
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 2019年,在澳大利亚悉尼举行的Gartner数据与分析峰会上,Gartner将增强分析作为今年十大战略趋势、整体IT十大战略趋势之一推到了公众面前。在Gartner 最新发布的魔力象限报告中,明确指出[详细]
-
C/C++Linux 深入浅出 TCP/IP 协议栈
所属栏目:[设计教程] 日期:2019-10-28 热度:119
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 TCP/IP 协议栈是一系列网络协议的总和,是构成网络通信的核心骨架,它定义了电子设备如何连入因特网,以及数据如何在它们之间进行传输。TCP/IP 协议采用4层结构,分别是应用层、传输层、[详细]
-
Wireshark网络分析就这么简单,你一定会喜欢的技巧
所属栏目:[设计教程] 日期:2019-10-28 热度:181
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 一、抓包 拿到一个网络包时,我们总是希望它是尽可能小的。操作一个大包相当费时,有时甚至会死机。如果让初学者分析1GB以上的包,估计会被打击得信心全无。所以抓包时应该尽量只抓必要的[详细]
-
动画:用动画给女朋友讲解 TCP 四次分手过程
所属栏目:[设计教程] 日期:2019-10-28 热度:187
【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 写在前边 大家好,我们又见面了,做为一个业余的动画师,上次的用动画的形式讲解 TCP 三次握手过程在各大平台收到了广大读者的喜爱,说文章有趣、有货、有内容,也受到了很多读者的关注。[详细]
-
物理层/数据链路层/网络层工作原理
所属栏目:[设计教程] 日期:2019-10-28 热度:113
物理层 物理层设备 集线器 中继器 编码解码器 传输介质连接器 集线器运行在物理层 所有设备在同一冲突域(二层设备,桥或交换机来隔离冲突域) 所有设备在同一广播域(三层设备,如路由器来隔离广播域) 所有设备共享相同的带宽 网络设备的域 冲突 (collision)[详细]
-
如何用通俗地解释大数据
所属栏目:[设计教程] 日期:2019-10-28 热度:132
人们可能认为每个人现在都知道什么是大数据,但是仍然存在误解。因此需要得到大数据专家的建议。 大数据解释 一段时间以来,大数据一直是企业董事会的流行语。尽管已被广泛使用,但仍可能被人们误解。 技术领导者知道,只有大数据就没有内在的价值。法律技[详细]
-
数据分析必会的六大实用模型
所属栏目:[设计教程] 日期:2019-10-28 热度:61
对于刚刚接触数据分析的人来说,经常会有这样的困惑和疑问:数据分析究竟难不难?难的话难在哪?为什么有时候作分析不知道从何下手,只能眉毛胡子一把抓? 其实就连我这种已经在数据分析行业浸淫十几年的老油条,有时候做起分析来也会手忙脚乱,根本原因就在[详细]
-
TCP 粘包和半包 介绍及解决(上)
所属栏目:[设计教程] 日期:2019-10-28 热度:175
在网络传输中,粘包和半包应该是最常出现的问题,作为 Java 中最常使用的 NIO 网络框架 Netty,它又是如何解决的呢?今天就让我们来看看。 定义 TCP 传输中,客户端发送数据,实际是把数据写入到了 TCP 的缓存中,粘包和半包也就会在此时产生。 客户端给服[详细]
-
边缘计算将如何从5G技术中受益
所属栏目:[设计教程] 日期:2019-10-27 热度:139
随着5G技术的发展,越来越多的国家和地区开始引进和应用,并且越来越多的人关注5G将给技术世界带来的变化。 如果使用5G和边缘计算的公司没有采取预防措施来维护边缘计算的网络安全,那么5G和边缘计算带来的许多好处可能会黯然失色。 5G将帮助边缘计算发展[详细]
-
官方调研重磅发布,Pandas或将重构?
所属栏目:[设计教程] 日期:2019-10-27 热度:148
为指引 Pandas 未来开发方向,Pandas 官方团队于 2019 年夏搞了一次调研,这次调研历时 15 天,共有 1250 条反馈数据。问卷数据保存在 data 文件夹的 2019.csv.zip 文件里。 这里又学一招,原来 pandas 可以直接从压缩文件里读取数据文件,原文用的是 .gz[详细]
-
51信用卡被查引发“爬虫技术”争议 是否侵犯个人信息?
所属栏目:[设计教程] 日期:2019-10-27 热度:158
据中国之声报道:近日,51信用卡被查事件,让本就处在风口浪尖的大数据风险控制领域,再添一把火。业内人士透露,在隐私保护薄弱、数据安全存在漏洞的国内互联网环境中,爬虫技术往往与信息来源违法、滥用等问题交织在一起。 有媒体综合各方消息这样勾勒出[详细]
-
Excel,Python全都靠边站,这才是数据分析应该有的样子
所属栏目:[设计教程] 日期:2019-10-27 热度:54
前段时间,老同学居然和我说她在学编程。当时我很不理解,她是市场专员,又不是程序员,为啥要学编程?直到上周,她请我吃饭,告诉我她调到了新项目组做主管。 学编程不一定就是做程序员,我用python搜集竞品信息,对产品和服务做数据分析,毕竟知己知彼,[详细]
