那一次试过了用sparkstreaming读取文件logstash启动时的tcpserver的数据。只不过要是你有多台logstash的时候，这种就比较不好办了——就算你给logstash集群先申请一个vip，也很难考虑说微博转发完全符合。所以才一般来说，更多的选择是常规kafka等队列由sparkstreaming去以及订阅者某些数据。
这是一个相当好的问题，以及一名it从业者，另外确实是一名教育工作者，我来能回答看看。
大数据经多年的发展，早渐渐地自然形成了一个都很异常庞大且系统的知识体系，整体的技术成熟度也巳经都很高了，所以才当前学习大数据技术也会有一个也很好的学习体验。
而大数据牵涉到的内容比较比较多，但是大数据技术与行业领域也有比较密切的联系，所以才在去学习大数据的时候，既也可以从技术角度出发，也可以不立足行业来学习大数据。这对学生来说，这个可以从大数据技术体系来学，而是对职场人来说，可以结合自身的行业和岗位任务来自学大数据。
论是学生那就职场人，要想怎么学习大数据都是需要掌握100元以内几个都差不多内容：
第一：计算机基础知识。计算机基础知识对此自学大数据技术是非常重要的，其中操作系统、编程语言和数据库这三方面知识是要先怎么学习的。编程语言也可以从python就开始学起，不过如果不是未来要普通机电设备专业的大数据开发，也这个可以从java就开始学起。计算机基础知识的学习更具一定的难度，学习过程中要非常重视实验的作用。
第二：数学和统计学基础知识。大数据技术体系的核心目的是“数据价值化”，数据价值化的过程一定都离不开数据分析，因为另外数据分析基础的数学和统计学知识就比较好重要了。数学和统计学基础是对大数据从业者未来的成长空间有比较不重要的影响，所以要先非常重视这两个方面知识的学习。
第三：大数据平台基础。大数据开发和大数据分析都都离不开大数据平台的支撑，大数据平台比较复杂到分布式存储和分布式计算等基础性工作功能，手中掌握大数据平台也会相对于大数据技术体系自然形成较深的认知程度。对于初学者来说，也可以从hadoop和spark正在学起。
我从事外贸互联网行业多年，目前也在带计算机专业的研究生，比较多的研究方向集中在一起在大数据和人工智能领域，我会先后写一些关于互联网技术方面的文章，很有兴趣朋友可以参与我，我相信当然会有了。
要是有互联网、大数据、人工智能等方面的问题，或是是考研方面的问题，都可以在评论区留言，或则私聊我！
