题目内容： Go Green! vape_nation.png 下载下来这玩意（gay gay 的） 因为分值低所以应该不难，丢到Stegsolve去做数据抽取，当Grenn plane 0 时出现flag flag：IceCTF{420_CuR35_c4NCEr} 总结：图像隐写，Stegsolv ...
分类：
其他好文 时间：
2019-01-07 17:26:47
阅读次数：
192
1. 过拟合 1.1 产生原因 训练集中的数据抽取错误，太少，或者不均衡，不足以有效代表业务逻辑或场景； 训练集中的数据噪音（异常值）干扰过大； 训练模型的“逻辑假设“到了模型应用时已经不能成立 参数太多，模型复杂度太高； 特征量太多，模型训练过度，比如决策树模型，神经网络模型 1.2 解决方法 减 ...
分类：
其他好文 时间：
2019-01-02 00:04:48
阅读次数：
221
在大数据时代，一切数据都可以通过软件智能分析出对企业有效的分析报告。BI就是商业智能的意思，他是一整套完整的解决方案，用于企业，将企业中已有数据做有效整合，快速准确的提供分析报表提供决策依据，帮助企业做出明智的战略规划。系统主要由三层构成：1.数据抽取层即传统的ETL2.数据分析层，即传统的数据仓库3.数据展示层，即传统的OLAP。BI大数据系统是一种提供给使用者对数据进行分析的工具，它具有强大的
分类：
其他好文 时间：
2018-12-19 17:59:45
阅读次数：
253
时间戳方式抽取数据 介绍：它是一种基于快照比较的变化数据捕获方式，在源表上增加一个时间戳字段，系统中更新修改表数据的时候，同时修改时间戳字段的值。当进行数据抽取时，通过比较上次 抽取时间与时间戳字段的值来决定抽取那些数据。有的数据库的时间戳支持自动更新，即表的其他字段的数据发生变化时，自动更新时间戳 ...
分类：
其他好文 时间：
2018-12-10 14:04:10
阅读次数：
215
互联网技术上不断发展，Python的普及以及代理ip的进一步稳定，爬虫技术也得到了前所未有的优化。过去我们或许还会为抓取海量数据而头痛。但现在，不断优化的网络爬虫技术，却能够轻松应对这个问题，为高效搜索用户关注的特定领域与主题提供了有力支撑。而网络爬虫现在也逐渐发展成为涵盖数据抽取、机器学习、数据挖掘、语义理解等多种方法综合应用的智能工具。凡事都有两面性，网络爬虫带太阳HTTP来便利的同时，也网站
分类：
Web程序 时间：
2018-11-15 17:13:55
阅读次数：
191
下面是一些关于大数据挖掘的知识点，今天和大家一起来学习一下。数据、信息和知识是广义数据表现的不同形式。主要知识模式类型有：广义知识，关联知识，类知识，预测型知识，特异型知识web挖掘研究的主要流派有：Web结构挖掘、Web使用挖掘、Web内容挖掘一般地说，KDD是一个多步骤的处理过程，一般分为问题定义、数据抽取、数据预处理、.数据挖掘以及模式评估等基本阶段。数据库中的知识发现处理过程模型有：阶梯处
分类：
其他好文 时间：
2018-11-07 21:39:19
阅读次数：
159
我们先看看维基百科的定义 网络爬虫（英语：web crawler），也叫网络蜘蛛（spider），是一种用来自动浏览万维网的网络机器人。 通俗的说爬虫就是通过一定的规则策略，自动抓取、下载互联网上网页，在按照某些规则算法对这些网页进行数据抽取、 索引。 像百度、谷歌、今日头条、包括各类新闻站都是通过 ...
分类：
其他好文 时间：
2018-10-30 17:05:19
阅读次数：
226
HANA数据库是把数据存储到内存中的，因此比普通的数据库读写速度是快很多的，我们公司使用了1T的内存作为存储资源，因此成本还是挺高的。废话不多说了... 使用前提： 1. 公司运维已经部署了DS服务器 2. 运维提供DS安装程序 安装过程很简单基本是下一步，因此省略... 正题开始： 1.首先登录 ...
分类：
数据库 时间：
2018-10-15 14:48:55
阅读次数：
352
6.1项目背景和业务分析需求的提出 ...... 6.2数据分析师参与需求讨论 针对需求收集相关的背景数据和指标，熟悉业务相关逻辑 从数据分析的专业角度评价初步的业务分析需求是否合理，是否可行 6.3制定需求分析框架和分析计划 确定项目目标变量的定义 分析思路的大致描述 分析样本的数据抽取规则 潜在 ...
分类：
其他好文 时间：
2018-10-14 11:42:58
阅读次数：
151
2018-10-11:明天科三考试，加油！ 使用python selenium的web访问方式； import sys reload(sys) sys.setdefaultencoding('utf8') from selenium import webdriver import time brow ...
分类：
编程语言 时间：
2018-10-12 01:27:31
阅读次数：
356
