
数据科学
rainyrainbow
深挖一门技术-云计算与大数据
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
数据科学 学习入门
数据科学用数据的方法来研究科学生物信息,天体信息,数字地球等用科学的方法来研究数据统计学,机器学习,数据挖掘等数据分析数据类型数据的数学结构主要困难1.数据量大2.数据维数高(最难)3.数据类型复杂算法角度看处理大数据的思路1.降低算法的复杂度(随机梯度下降SGD)2.分布式计算(MapReduce)数据科学的课程体系...原创 2018-11-19 11:05:32 · 1331 阅读 · 0 评论 -
数据采集----网络爬虫(一)
网络爬虫(Web Crawler/Spider)数据采集的主要方式按照一定规则,自动抓取万维网信息的程序或者脚本部分或者全部抽取抓取到的信息,使数据进一步结构化合法性–Robots协议深度与广度优先* 静态和动态网页爬虫静态网页:爬虫逻辑比较简单动态网页:网页读取过程需要额外的加载过程泛用和主爬虫网络爬虫的基本架构爬取模块URL批量获取数据,模拟http请求过程抽...原创 2018-11-21 15:55:51 · 2432 阅读 · 0 评论 -
数据可视化 Django
Django安装在linux系统中安装Djangopip install Django此时,可以进入python环境,再终端中输入python,然后敲入以下代码,可以查看django版本管理工具Django-admin.py创建项目1.首先创建一个项目目录,然后切换到该目录下,接着用django-admin.py来创建目录这样djangofirst项目就创建完成了。看下...原创 2018-11-19 18:50:20 · 3702 阅读 · 0 评论 -
了解大数据 之 商业智能BI和大数据
企业核心目的之一是创造利润,为达到利润最大化,企业管理者需协调各职能部门包含财务、销售、市场、研发、生产、售后、人资、IT等,让大家能齐心协力地创造收入,节约成本,提高效能,把控风险,管理合规,分配合理。为保证流程一致性并收集作业环节中的所有数据,于是企业有了CRM、ERP、MES、HR、OA等业务系统;为更好保证目标达成,于是有了**各种管理措施包含MBO(OKR)管理、计划管理(包含预算和...转载 2019-06-30 16:01:29 · 1376 阅读 · 0 评论