本文目录一览：
大数据获取方法有哪些?
大数据***集方法有多种，常见的方法包括爬虫***集、API接口***集、数据抓取工具***集等。其中，八爪鱼***集器是一种功能全面、操作简单的数据抓取工具，适用于各类网站数据的***集。
大数据***集方法有多种，其中一种常用的方法是使用网络爬虫技术。网络爬虫可以自动抓取互联网上的数据，并将其存储到数据库或其他数据存储介质中。
火车***集器：一款专业的互联网数据抓取、处理、分析，挖掘软件，可以灵活迅速地抓取网页上散乱分布的数据信息。八爪鱼：简单实用的***集器，功能齐全，操作简单，不用写规则。特有的云***集，关机也可以在云服务器上运行***集任务。
从数据库导入 在大数据技术风靡起来前，关系型数据库(RDMS)是主要的数据分析与处理的途径。
数据收集的四种常见的方式包括问卷调查、查阅资料、实地考查、试验，几种方法各有各的又是和缺点，具体分析如下。一是问卷调查。问卷调查是数据收集最常用的一种方式，因为它的成本比较低，而且得到的信息也会比较全面。
这几个大数据GitHub项目,太强了吧
1、首推 heibaiying 的 BigData-Notes，该项目目前已经有高达 2K 的star，正如该仓库的介绍上简短几个字：大数据入门指南。这个项目也是我认为目前 最适合初学者学习和参考的项目 。
2、项目地址：***s：//github***/FreezingMoon/AncientBeast Dark Days Ahead 是一款回合制生存 游戏 ，背景设置在后世界末日的世界中。
3、Github Star 数 8676，基于 Vue 和 Bulma 的控制面板。Github Star 数 8668，基于 iView 的 Vue 0 控制面板。Github Star 数 7111，基于 Bootstrap 4 和 Material 风格的控制面板。
4、scikit-learn是一个Python的机器学习项目。是一个简单高效的数据挖掘和数据分析工具。基于NumPy、SciPy和matplotlib构建。基于BSD源许可证。
5、TileMap 著名的TileMap编辑器，做2D游戏开发的一定不会陌生。litego Go语言的集成开发环境。Clementine Music Player 功能很完善且跨平台支持做得很好的音乐播放器，完成度高，跨平台项目可以参考它。
大数据平台最核心的软件是
大数据的核心是云技术和BI。大数据（bigdata）是指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据***。
在大数据时代，最基础的技术平台是Apache Hadoop。Hadoop是一个开源的分布式计算框架，它能够高效地存储和处理大规模数据集。
数据库，大数据平台类，星环，做Hadoop生态系列的大数据平台公司。Hadoop是开源的，星环主要做的是把Hadoop不稳定的部分优化，功能细化，为企业提供Hadoop大数据引擎及数据库工具。
思迈特软件Smartbi：动静结合的数据可视化。
思迈特软件Smartbi大数据分析平台：定位为一站式满足所有用户全面需求场景的大数据分析平台。
数据分析的工具千万种，综合起来万变不离其宗。无非是数据获取、数据存储、数据管理、数据计算、数据分析、数据展示等几个方面。而SAS、R、SPSS、python、excel是被提到频率最高的数据分析工具。
开源精粹(二)!22个实用、有趣的开源项目
我觉得有意思，很cool的来源项目还是挺多的，比如FartHero，Tiimo，Zones，Hello以及Camerons World等，我感觉都是有趣且炫酷的开源项目。 FartHero 这个 APP 用来评估你的屁。
scikit-learn是一个Python的机器学习项目。是一个简单高效的数据挖掘和数据分析工具。基于NumPy、SciPy和matplotlib构建。基于BSD源许可证。
Seata 是一款开源的分布式事务解决方案，提供高性能和简单易用的分布式事务服务。
人脸生成器 这个开源项目是基于 StyleGAN2 制作的新版人脸生成器，可以生成 网红脸 、 明星脸、超模脸 、 萌娃脸、港风美女脸等 ，而且还能够对人脸属性进行编辑，比如调节年龄、加个眼镜。
Gu***a 中文是石榴的意思，该项目是 Google 的一个开源项目，包含许多 Google 核心的 J***a 常用库。