2018-03-19作者：光环大数据
编程用sort进行排序，然后从最后一个元素开始判断a=[1,2,4,2,4,5,7,10,5,5,7,8,9,0,3]?没看懂题啥意思 Python里面match()和search()的区别？ match()函数只检测RE是不是在string的开始位置匹配，search()会扫描整个st...大数据培训
-
linux熟悉么 光环大数据培训
2018-03-19作者：光环大数据
linux熟悉么,linux查看文件用什么命令，你知道几种, linux创建文件夹命令 cat vi vim mkdir python你常用的框架有哪些Django它是个开放源代码的Web应用框架，由Python写成的Django应该是最出名的Pyth...
-
光环大数据培训告诉你面对反爬虫如何解决
2018-03-19作者：光环大数据
你遇到过反爬虫么，怎么解决的
源网站一般会有下面几种限制
1、一定时间内单个IP访问次数，一个正常用户访问网站，除非是随意的点着玩，否则不会在一段持续时间内过快访问一个网站，持续时间也不会太长，我们可以采用大量不规...
-
有没有用过mysql数据库 光环大数据数据库培训
2018-03-19作者：光环大数据
MySQL是一种开放源代码的关系型数据库管理系统（RDBMS），MySQL数据库系统使用最常用的数据库管理语言--结构化查询语言（SQL）进行数据库管理。你常用的数据库是什么因为公司不是特别大，要求不是特别高，加之本身对mysql比较熟...
-
python的序列是什么 光环大数据培训
2018-03-19作者：光环大数据
在Python中，最基本的数据结构是序列（sequence）。序列中的每个元素被分配一个序号——即元素的位置，也称为索引。第一个索引是 0，第二个则是 1，以此类推。序列中的最后一个元素标记为 -1，倒数第二个元素为 -2，以次...
-
爬取好的数据为什么不适用python一次性的处理完成
2018-03-19作者：光环大数据
爬取好的数据为什么不适用python一次性的处理完成，进行展示爬取的数据有两点，一数据量大，这就导致了使用python处理数据的难度非常大，异常缓慢，二数据内容杂，很多缺项的数据混进来，对我们的分析处理产生干扰，而python是难以...
-
python爬虫 光环大数据python培训
2018-03-19作者：光环大数据
使用python爬虫的时候怎么爬取数据，爬取哪些数据，爬去之后用来进行做什么样的业务。通过分析要爬取的网页请求，和请求的返回数据类型，如果是html页面，那么就去通过BeautifulSoup等XML解析工具去解析，如果是JSON数据，那么直...
-
Java写字符串的倒序输出_光环大数据培训
2018-03-19作者：光环大数据
手写MR中主函数内容、用Java写字符串的倒序输出字符串倒叙
String str = “abcdefg”;
StringBuffer sb = new StringBuffer();
for(int i=str.length()-1;i>=0;i--){
sb.append(str.charAt(i));
}
Syst...
-
大数据面试题汇总 光环大数据培训
2018-03-19作者：光环大数据
MR提交时是否有失败，失败了怎么办
出现错误主要有以下三种：
1、Task任务
2、JobTracker失败
3、TaskTracker失败
Task任务
1、当map或者reduce子任务中的代码抛出异常，JVM进程会在退出之前向服务tasktracker进程发...
-
关于项目数据你需要知道的东西 光环大数据培训
2018-03-19作者：光环大数据
项目数据的来源
1.越来越多的机器配备了连续测量和报告运行情况的装置。几年前，跟踪遥测发动机运行仅限于价值数百万美元的航天飞机。现在，汽车生产商在车辆中配置了监视器，连续提供车辆机械系统整体运行情况。一旦...
-
光环大数据培训分享大数据面试题
2018-03-19作者：光环大数据
每天跑多少数据？100g数据跑多久
hadoop 十分钟
spark 几秒钟—不超一分钟
项目大概有多少mr
一般来讲---大概三十多个
介绍几个reduce计算的什么
自己发挥
说一下项目字段
自己发挥
为什么用mr计算而...
-
光环大数据培训分享Kafka的zookeeper是怎么管理
2018-03-19作者：光环大数据
Kafka的zookeeper是怎么管理
管理broker、consumer
创建Broker后，向zookeeper注册新的broker信息，实现在服务器正常运行下的水平拓展。具体的，通过注册watcher，获取partition的信息。
Topic的注册，zookeeper会维护topic...
-
光环大数据培训分享什么是负载均衡
2018-03-19作者：光环大数据
什么是负载均衡
建立在现有网络结构之上，它提供了一种廉价有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。
分摊到多个操作单元上进行执行，例如Web服务器...
-
大数据面试题 光环大数据培训
2018-03-19作者：光环大数据
sort by 和 group by 的区别：当时她问完我Hadoop就问我，我就有点蒙，总觉得是在说Hadoop里面有这两个东西，但是我又想不起来哪里有，就说了不知道，他就说不应该啊~后来才反应过来是数据库的知识。。。额！！
order by 排序查询...
-
关于hbase 光环大数据培训
2018-03-19作者：光环大数据
hbase里边有10亿条记录，请问用实时技术检索该记录用了多长时间?
因为HBASE基于内存做检索，在ROWKEY设计非常理想状态下检测速度大概在10秒钟左右实时分析架构用到了哪些技术 这些技术在大数据分析流程里边的作用是什...
-
关于hive的问题你都知道么？光环大数据培训告诉你
2018-03-19作者：光环大数据
hive的外部表怎么创建？如何使用hive来操作hbase里边的数据？
创建外部表的好处是数据可以随时从hdfs中挂载进表中
使用分区的好处是可以缩短查询范围
例：CREATE EXTERNAL TABLE my_daily_report(
last_update str...
-
光环大数据分享百度公司的大数据面试题附答案
2018-03-19作者：光环大数据
大数据面试是很多人的弱点，明明自身技术还可以，但总是面试关过不去，大数据面试分为笔试和面试两方面，笔试必须要做好充足的准备，因为这个没有投机取巧的方法。下面分享百度公司的大数据面试题附答案。 百度公司的大数据...
-
光环大数据分享大企业招聘Java工程师最爱问的面试题
2018-03-19作者：光环大数据
网上有各种各样的Java面试题，很多是着重Java基础。实际上，如果要应聘高级开发工程师职务，仅仅懂得Java的基础知识是远远不够的，还必须懂得常用数据结构、算法、网络、操作系统等...
-
大数据与云计算专业制作求职简历时应注意的几点
2018-03-19作者：光环大数据
又是一年毕业季，大学生纷纷开始了投简历的漫长求职生涯，小编今天整理了一些资料，告诉你们大数据与云计算专业制作求职简历时应注意的几点。大数据与云计算专业制作求职简历时应注意的几点一、 突...
-
学大数据好找工作吗？找不到工作怎么办？
2018-03-19作者：光环大数据
有很多学习大数据的同学都很迷茫，不知道自己学习完大数据工作好不好找，找不到工作该怎么办啊？下面光环大数据小编就给大家介绍一下，到底你们所担心的问题是否会成为问题。为什么这么说，咱们先看一组数据，数联寻英发布《大...
-
大数据人才这样投简历会提高命中率
2018-03-19作者：光环大数据
如今随着高校的不断扩招，毕业大学生的数量逐年递增，就业压力也随之增大，拥有一份好的简历，可以使你的面试成功率大大增加。虽然大数据现在的人才缺口巨大，就业压力相对来说没有其他专业那么大，但一份好的简历同样可以让你...
-
一线企业愿意招聘哪类大数据人才
2018-03-19作者：光环大数据
一线企业愿意招聘哪类大数据人才，大数据近年来发展的风生水起，猎聘大数据研究院随机抽取了猎聘平台上5509797个相关行业的样本，覆盖全国31个省市自治区，研究时段以2017年1-7月为主，参照时间跨度最远可追溯到2014年1月。...
-
通过网络课程学习大数据可行吗？
2018-03-19作者：光环大数据
随着云计算和人工智能的崛起，大数据时代降临。人们与大数据的联系越来越紧密，企业对大数据人才的需求越来越大。随着学习大数据的人越来越多，大数据培训机构也开始盛行起来，现在的大数据培训主要分两种方式：一种方式是网...
-
大数据工程师面试对学历有要求吗？
2018-03-19作者：光环大数据
想学大数据的朋友很多，但是大数据是有一定门槛的，它是一门比较深奥的学科，大数据工程师面试对学历有要求吗？大数据是国内新兴的一个工种，正在快速的扩展到整体市场，各大公司都急需大数据人才，学习大数据前景怎么样？一般来说...
-
Java大数据面试常见的几大算法问题
2018-03-19作者：光环大数据
目前Java大数据的人才稀缺，很多想进入大数据行业的人们经过了大数据培训学成出来，只剩下最后一步就能顺利进入大数据行业，就是Java大数据面试。很多IT人才技术操作很优秀，没有可挑剔的，但是就是在面试时总卡壳，同时毕业的...
