-
【快讯】工业大数据深度挖掘应用与技术实现“技术·前沿”讲座成
所属栏目:[大数据] 日期:2021-01-16 热度:118
2016年9月20日晚,清华大数据“技术·前沿”系列讲座——工业大数据深度挖掘应用与技术实现在清华大学FIT楼多功能厅顺利举办,本期讲座有幸邀请到清华经研95级校友朱喻先生。朱喻先生先后供职于华为公司、用友软件,目前于优奕数据科技有限公司领导数据智[详细]
-
50款大数据分析神器 :你还在用Excel
所属栏目:[大数据] 日期:2021-01-16 热度:188
副标题#e# 你平时用什么大数据分析工具? ?D3? R? 还是Processing? PS和计算器... 只有你还在用excel! 工欲善其事,必先利其器! 一款好的工具可以让你事半功倍。 大数据时代,需要工具实现数据可视化,需要倚仗大数据可视化工具,这些工具中不乏有适用[详细]
-
KaraTsuba乘法——高效的大数乘法
所属栏目:[大数据] 日期:2021-01-16 热度:76
今天看Coursera课程时,看到一个牛逼的算法,叫KaraTsuba乘法。普通乘法复杂度一般都是O(n^2),而这个算法,仅有O( nlog3)。下面,我就来介绍一下这个算法。 ? ? ? ? 首先来看看这个算法是怎么进行计算的,见下图: 图中显示了计算5678*1234的过程,首先是[详细]
-
BI主仓MPP分布式数据库迁移改造实战分享
所属栏目:[大数据] 日期:2021-01-16 热度:146
点击上方蓝色字体关注我们 汤人杰 ? ? ? ? ? 资深大数据架构师 骆似骏 ? ? ? ? ? 项目经理 刘刚 ? ? ? ? ? ? ?大数据工程师 徐彬馨 ? ? ? ? ? 大数据工程师 刘文兵 ? ? ? ? ? 大数据工程师 一、背景分析 DB2作为IBM公司开发的一套关系型数据库管理系统,被[详细]
-
【今日直播】工业大数据深度挖掘应用与技术实现
所属栏目:[大数据] 日期:2021-01-16 热度:85
大数据与工业数据的结合,使制造过程能进行分析、推理、判断、构思和决策等。通过人与机器的合作共事,去扩大、延伸和部分地取代人类专家在制造过程中的脑力劳动。它把制造自动化的概念更新,扩展到柔性化、智能化和高度集成化。然而,这一切又都必须服从[详细]
-
学习总结--统计原理对数据分析的重要
所属栏目:[大数据] 日期:2021-01-16 热度:126
最近开始业余学习CDA的课程,就发现统计原理对自己来说是很难的。去年在学SAS的过程中,就听说过,如果你能把那么复杂的统计函数及统计公式全部理解清楚的话,那你需要达到统计学博士的水平。而就数据分析跟数据挖掘来说,统计知识好像又占到了很大[详细]
-
干货推荐 |大数据分析在银行业的应用(附pdf)
所属栏目:[大数据] 日期:2021-01-16 热度:75
副标题#e# 点击“阅读原文”,获取全文pdf。? 访问密码 c397 文章来源:数据猿 #p#副标题#e#[详细]
-
hdu 1753 大数相加(高精度)
所属栏目:[大数据] 日期:2021-01-16 热度:54
C -?大明A+B Time Limit:1000MS?????Memory Limit:32768KB?????64bit IO Format:%I64d %I64u Submit? Status Description 话说,经过了漫长的一个多月,小明已经成长了许多,所以他改了一个名字叫“大明”。? 这时他已经不是那个只会做100以内加法的那个“[详细]
-
pythoncookbook深入挖掘------------访问者模式
所属栏目:[大数据] 日期:2021-01-16 热度:166
问题 你要处理由大量不同类型的对象组成的复杂数据结构,每一个对象都需要需要进行不同的处理。 比如,遍历一个树形结构,然后根据每个节点的相应状态执行不同的操作。 解决方案 这里遇到的问题在编程领域中是很普遍的,有时候会构建一个由大量不同对象组[详细]
-
2017校招数据分析岗笔试#92;/面试知识点
所属栏目:[大数据] 日期:2021-01-16 热度:136
副标题#e# 作者:蓝先生 原文链接:http://www.jianshu.com/p/a64aa70d0fbc 2017校招正在火热的进行,后面会不断更新涉及到的相关知识点。 尽管听说今年几个大互联网公司招的人超少,但好像哪一年都说是就业困难,能够进去当然最好,不能进去是不是应该也抱[详细]
-
漏洞挖掘方法之静态扫描+经典栈溢出实例
所属栏目:[大数据] 日期:2021-01-16 热度:115
副标题#e# 这篇文章是关于漏洞挖掘的一种方法—静态扫描潜在危险函数。为了使文章内容充实有干活,笔者在自己使用静态扫描发现的漏洞中选择一个经典栈溢出来讲解,包括对该溢出的挖掘过程,利用方法,shell?code构造等。 Part?Ⅰ静态扫描方法论及工具开发[详细]
-
顶点着色器和像素着色器的数据处理流程
所属栏目:[大数据] 日期:2021-01-12 热度:95
顶点着色程序从GPU前端模块(寄存器)中提取图元信息(顶点位置、法向量、纹理坐标等),并完成顶点坐标空间转换、法向量空间转换、光照计算等操作,最后将计算好的数据传送到指定寄存器中;然后片断着色程序从中获取需要的数据,通常为“纹理坐标、光照信[详细]
-
51nod 1028 大数乘法 V2
所属栏目:[大数据] 日期:2021-01-12 热度:84
标准做法是FFT,偷懒用了java。。。 import java.util.*;import java.math.*;public class acm {public static void main(String[] args){BigInteger a,b;Scanner input=new Scanner(System.in); while(input.hasNextBigDecimal()){ a=input.nextBigIntege[详细]
-
51nod 1029 大数除法
所属栏目:[大数据] 日期:2021-01-12 热度:101
java大法过的。。。。 import java.util.*;import java.math.*;public class acm {public static void main(String[] args){BigInteger a,b,c,d;Scanner input=new Scanner(System.in); while(input.hasNextBigDecimal()){ a=input.nextBigInteger(); b=in[详细]
-
大数据处理:关于hadoop
所属栏目:[大数据] 日期:2021-01-12 热度:94
副标题#e# Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。 [1]??Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDF[详细]
-
AndroidNative层文件解析漏洞挖掘指南
所属栏目:[大数据] 日期:2021-01-12 热度:74
| 导语?本文以手Q的一次文件解析类漏洞挖掘为例,叙述了Android Native层文件解析类型漏洞挖掘的过程 手Q这个应用从功能来说十分的庞大,如果使用类似MFFA的框架去挖掘文件解析类漏洞,效率低,而且文件入口在哪儿、如何利用脚本进行自动化都是非常大的问[详细]
-
布尔财经想做金融领域的今日头条,并从信息中挖掘交易机会
所属栏目:[大数据] 日期:2021-01-12 热度:132
副标题#e# 布尔财经可以提供200多个单一主题的回归测试,平均准确率也在60%左右。在选股方面,布尔财经的模型可以做到在题材股爆发行情中段给出信号,帮助投资者获取爆发行情末段的超额收益。 文 | 老扎 上世纪七十年代美国宇航局NASA裁员缩减开支,一大批[详细]
-
利用UDW构建企业级数据仓库和BI系统
所属栏目:[大数据] 日期:2021-01-12 热度:144
副标题#e# 背景 随着大数据应用的发展与普及,越来越多的企业认识到企业运行中所产生数据本身也是一种高价值资产。并且,商业智能在企业的经营与决策中所扮演的角色,既可以是操作层中的数据指导,也可以是战术层与战略层上的决策顾问。 商业智能——即Busi[详细]
-
Thinking in BigData(六)大数据技术核心之ETL
所属栏目:[大数据] 日期:2021-01-12 热度:107
? 前几篇文章都是根据自己所见所知,在前人的基础上加以整合,对大数据概念有了初步的了解。接下来的四篇文章,抛开大数据的概念与基本知识,进入核心。我们从:数据采集、数据存储、数据管理、数据分析与挖掘,四个方面讨论大数据在实际应用中涉及的技术[详细]
-
Elastic Stack (ELK 5)- 运维数据分析系统
所属栏目:[大数据] 日期:2021-01-12 热度:159
概述 本文将简单介绍运维数据分析系统 Elastic Stack,并描述其基础部署过程。 简介 ELK(Elasticsearch + Logstash + Kibana)用于日志集中分析系统,Elasticsearch 用于存储、搜索、分析数据,Logstash 用于接收并处理数据,Kibana 提供 Web UI 管理数据[详细]
-
生态环境大数据分析应用示范平台总结
所属栏目:[大数据] 日期:2021-01-12 热度:123
生态环境大数据分析应用示范平台总结 1、前言 这个项目从2015年12月开始到2016年11月结束,历时一年,一年的时间有接近八个月的时间我待在呼和浩特。经历了冷暖交替,基本熟悉了当地的饮食生活习惯,结束的时候真有点依依不舍。这是第一个独立负责完成的项[详细]
-
四种BI 开源工具介绍-SpagoBI,openI,JasperSoft,Pentaho
所属栏目:[大数据] 日期:2021-01-12 热度:90
1 BI系统的简述 从技术角度来说 BI 包含了 ETL、DW、OLAP、DM等多环节。简单的说就是把交易系统已经发生过的数据,通过ETL工具抽取到主题明确的数据仓库中,OLAP后生成Cube或报表,透过Portal展现给用户,用户 利用这些经过分类、聚集、描述和可视化的数据[详细]
-
神经网络:请不要开始就让我sigmoid(wTx),谢谢!
所属栏目:[大数据] 日期:2021-01-12 热度:123
副标题#e# 神经网络:请不要开始就让我sigmoid(wTx),谢谢! 引子 学习机器学习,翻阅了一些神经网络的文章,上来就是sigmoid ( 1/(1+exp(x)) )和W T X,让不少初学者摸不着头脑。一些市面上评价很高的机器学习的书也是直接开始sigmoid和收敛性的讨论,想踏[详细]
-
课程丨大数据分析专题Hadoop/MapReduce/Hive原理及应用
所属栏目:[大数据] 日期:2021-01-12 热度:107
副标题#e# ?课程目的 1.掌握Hadoop,Hive以及MapReduce的基本原理及应用; 2.学会在本地与AWS进行交互,并利用AWS Elastic MapReduce进行实战数据分析。 ?课程项目图 ?讲师介绍 Eason 卡内基梅隆大学硕士。热衷于研究各类大数据框架,拥有数年AWS开发经验。[详细]
-
机器学习中的相似性度量!
所属栏目:[大数据] 日期:2021-01-12 热度:106
副标题#e# 在做分类时常常需要估算不同样本之间的相似性度量(Similarity Measurement),这时通常采用的方法就是计算样本间的“距离”(Distance)。采用什么样的方法计算距离是很讲究,甚至关系到分类的正确与否。 本文的目的就是对常用的相似性度量作一个总[详细]
