大数据基础知识【大数据导论】

各位大佬好 ,这里是阿川的博客,祝您变得更强

在这里插入图片描述 个人主页:在线OJ的阿川

大佬的支持和鼓励,将是我成长路上最大的动力在这里插入图片描述

阿川水平有限,如有错误,欢迎大佬指正在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

大数据基础知识前 必看
【大数据导论】—大数据序言
【大数据导论】—大数据、人工智能、云计算、物联网、区块链序言

目录

  • 大数据素养
  • 大数据基本知识

大数据素养

技术性内容

  • 采集
  • 处理
  • 储存
  • 分析
  • 技术
  • 工具
    在这里插入图片描述

非技术性内容

  • 大数据安全
  • 大数据伦理
  • 大数据思维
    在这里插入图片描述

大数据基本知识

在这里插入图片描述

  • 其中大数据交易
    买卖数据的活动,是以货币为媒介 获取数据商品的过程
    在这里插入图片描述
    数据商品三大特征

    • 处理后的数据才能交易
      在这里插入图片描述
    • 数据交易主体涉及众多
      在这里插入图片描述
    • 交易过程涉及多个产业链
      在这里插入图片描述
      大数据交易形式
      • 大数据交易公司
        在这里插入图片描述
      • 提供个人数据场所公司
        在这里插入图片描述
      • 数据交易所
        在这里插入图片描述
      • API模式
        用户提供接口允许用户对平台数据进行访问
        在这里插入图片描述
        大数据交易技术支撑
        在这里插入图片描述
        大数据交易发展现状
        在这里插入图片描述
        大数据数据来源
        • 政府公开数据
        • 企业内部数据
        • 数据供应方数据
        • 网页爬虫数据
          在这里插入图片描述
          大数据数据产品类型
          • API
          • 数据包
          • 云服务
          • 解决方案
          • 数据产品
          • 数据定制服务
            在这里插入图片描述
            大数据交易平台类型
            • 综合数据服务平台
              为用户提供定制化的服务,涉及数据的处理和加工
            • 第三方数据交易平台
              对交易过程进行监管,并提供数据出售、数据购买、数据供应方查询、数据需求发布等一系列服务
              在这里插入图片描述
              从运行角度划分
              • 政府主导的大数据交易平台
              • 企业以市场需求为导向建立的大数据交易平台
              • 产业联盟性质的大数据交易平台
                在这里插入图片描述
                大数据交易平台的运营模式
                数据中介数据处理加工功能的交易平台
                在这里插入图片描述
                只具备中介功能的交易平台
                在这里插入图片描述
  • 其中大数据思维
    在这里插入图片描述
    大数据思维主要指

    • 全样而非抽样
      在这里插入图片描述
      因为有了分布式储存和处理技术,从而可以对全部的数据进行分析而不是只能对小样本处理
    • 效率而非精确
      在这里插入图片描述
      处理数据时往往要"秒级"响应,所以效率往往是被关注的重点,分析的精确度达到一定的程度即可。
    • 相关而非因果
      在这里插入图片描述
      解释事物背后发展的机理
      预测未来可能发生事件
    • 以数据为中心
      在这里插入图片描述
      海量的数据进行计算,从而推测结果
    • 我为人人,人人为我
      在这里插入图片描述
      其中涉及
      • 数据采集
      • 数据处理
      • 信息发布
        在这里插入图片描述
  • 其中大数据安全
    重点关注数据

    • 保密性
    • 完整性
    • 可用性
      在这里插入图片描述
      大数据安全的隐患
      • 大数据成为网络攻击的显著目标
        在这里插入图片描述

      • 大数据加大隐私泄露风险
        在这里插入图片描述

      • 大数据技术被应用到攻击手段中
        在这里插入图片描述

      • 大数据成为高级可持续攻击的一个载体
        在这里插入图片描述
        大数据安全的变化

        • 静态安全到动态安全
          在这里插入图片描述
          大数据安全范围
          • 隐私和个人信息安全
            在这里插入图片描述
            其中包含个人的
            在这里插入图片描述
  • 其中大数据伦理

    • 个人信息被无形滥用
      在这里插入图片描述
    • 生活隐私被窥探利用
      在这里插入图片描述
    • 数据安全漏洞
      在这里插入图片描述
    • 数据垄断
      在这里插入图片描述
  • 其中数据共享
    不数据共享会导致

    • 数据孤岛
      政府和企业里各个部门各自储存数据,部门之间的数据无法共通,导致数据像各个孤岛一样缺乏关联性
      在这里插入图片描述
      数据共享意义
      • 对于政府\企业意义
        在这里插入图片描述
  • 其中数据开放
    数据开放三大理论
    在这里插入图片描述

好的,到此为止啦,祝您变得更强

在这里插入图片描述
想说的话

学习来源厦门大学林子雨老师的 《大数据导论》(反反复复学习了5遍哈并且做了相应的练习 然后才进行的这篇博客的书写)
实不相瞒,写的这篇博客要写五个小时以上(加上自己学习和纸质笔记,共七小时吧),很累希望大佬支持一下

在这里插入图片描述

道阻且长 行则将至
个人主页:在线OJ的阿川大佬的支持和鼓励,将是我成长路上最大的动力 在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/diannao/39805.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Golang | Leetcode Golang题解之第206题反转链表

题目: 题解: func reverseList(head *ListNode) *ListNode {if head nil || head.Next nil {return head}newHead : reverseList(head.Next)head.Next.Next headhead.Next nilreturn newHead }

vue3基于uni-app 封装小程序request请求

const BASE_URL https://47.122.26.142; // 替换为你的 API 基础 URL const token uni.getStorageSync(token);const request (url: string, method: any, data {}, headers {}) > {return new Promise((resolve, reject) > {uni.request({url: ${BASE_URL}${url},m…

【1.1】动态规划求解不同的子序列

一、题目 给定一个字符串s和一个字符串t,计算在s的子序列中t出现的个数。 字符串的一个子序列是指,通过删除一些(也可以不删除)字符且不干扰剩余字符相对位置 所组成的新字符串。(例如,"ACE"是…

6.2、函数的定义

代码 #include <iostream> using namespace std; #include <string>//函数定义//语法&#xff1a;//返回值类型 函数名(参数列表) {函数体语句 return表达式}//加法函数 int add(int num1, int num2) {int sum num1 num2;return sum; } int main() {cout <&l…

SpringBoot异步接口实现 提升吞吐量

前言 Servlet 3.0之前&#xff1a;HTTP请求由单一线程处理。Servlet 3.0之后&#xff1a;支持异步处理&#xff0c;提高系统吞吐量。 SpringBoot 异步接口实现方式 AsyncContext&#xff1a;Servlet层级&#xff0c;不常用。Callable&#xff1a;使用java.util.concurrent.C…

聊聊Redis持久化策略RDB

写在文章开头 为避免服务器宕机着情况导致redis内存数据库数据丢失&#xff0c;redis默认出通过rdb保证可靠性&#xff0c;本文将从源码的角度带读者了解rdb读写时机和写入流程。 Hi&#xff0c;我是 sharkChili &#xff0c;是个不断在硬核技术上作死的 java coder &#xff…

刷代码随想录有感(124):动态规划——最长公共子序列

题干&#xff1a; 代码&#xff1a; class Solution { public:int findLength(vector<int>& nums1, vector<int>& nums2) {vector<vector<int>>dp(nums1.size() 1, vector<int>(nums2.size() 1, 0));int res 0;for(int i 1; i <…

数据集采样策略对模型性能的影响问题

数据集采样策略对模型性能的影响问题&#xff0c;需要具体代码示例 随着机器学习和深度学习的快速发展&#xff0c;数据集的质量和规模对于模型性能的影响变得越来越重要。在实际应用中&#xff0c;我们往往面临着数据集规模过大、样本类别不平衡、样本噪声等问题。这时&#…

uni.showShareMenu({}) 和 uni.showShareImageMenu({}) 的区别

ChatGPT uni.showShareMenu({}) 和 uni.showShareImageMenu({}) 是 Uni-app 中两个不同的 API&#xff0c;它们的作用和用法有所不同&#xff1a; uni.showShareMenu({}) 作用&#xff1a;用于显示当前页面的分享菜单&#xff0c;通常显示在页面的右上角&#xff08;类似于微…

lnternet 发展史

一&#xff0c;lnternet 发展史 ARPA net &#xff08;上世纪50年代二战结束&#xff09; 无线 战场指挥通信协议落后 TCP/IP 包交换 WEB (70年代 ) 80年代 90年代 二&#xff0c;互联网的典型应用&#xff1a; 96年到2008年 第一代技术…

AJAX的概述 ,同步和异步的区别 ,AJAX 的交互模型和传统交互模型的区别

一. AJAX的概述 1.1 什么是ajax 同步&#xff1a; 异步&#xff1a; 1.AJAX Asynchronous JavaScript and XML&#xff08;异步的 JavaScript 和 XML&#xff09;。 ​ 说明&#xff1a;异步&#xff1a;就是不同步。例如我们向后台发送请求&#xff0c;同步的方式是后台必…

日语笔记——jy

敬语尊敬自兼丁寧するされるいたすします先生が詳細に説明されるご説明いたします説明しますいうおっしゃる申す言うお名まえはなんとおっしゃいますかほかのことは申すまでもない親の言う事をよく聞く行くいらっしゃる参る行きます先生もいらっしゃるのですかご一緒に参りまし…

Node.js学习路线

Node.js是一个基于Chrome V8引擎的JavaScript运行环境&#xff0c;它允许JavaScript在服务器端运行。Node.js的核心内容和高阶内容涵盖了多个方面&#xff0c;以下是对Node.js的详细解析、核心内容以及高阶内容的归纳&#xff1a; 一、Node.js简介 运行环境&#xff1a;Node.…

svn忽略上传文件node_modules文件

文章目录 1.点击svn项目右键-》选中svn的属性2. 点击 新建3. 点击其他4. 选择属性 svn:global-ignores5. 输入忽略文件 1.点击svn项目右键-》选中svn的属性 2. 点击 新建 3. 点击其他 4. 选择属性 svn:global-ignores 5. 输入忽略文件

四、【源码】Bean属性注入

源码地址&#xff1a;https://github.com/spring-projects/spring-framework 仓库地址&#xff1a;https://gitcode.net/qq_42665745/spring/-/tree/04-porperty-inject Bean属性注入 属性注入相关的类 1.PropertyValue&#xff1a;属性对象&#xff0c;name:value 2.Prope…

【Asterinas】Asterinas 进程启动与切换

Asterinas 进程启动与切换 进程启动 进程创建&#xff1a; Rust pub fn spawn_user_process( executable_path: &str, argv: Vec, envp: Vec, ) -> Result<Arc> { // spawn user process should give an absolute path debug_assert!(executable_path.starts_with…

数据结构 —— 二叉树

1.树的概念及结构 1.1树的概念 树是一种非线性的数据结构&#xff0c;它有着多分支&#xff0c;层次性的特点。 由于其形态类似于自然界中倒过来的数&#xff0c;所以我们将这种数据结构称为“树形结构” 注意&#xff1a; 树形结构中&#xff0c;子树之间不能有交集&#x…

降重工具大揭秘:AI如何帮你轻松搞定论文重写?

已经天临五年了&#xff0c;大学生们还在为论文降重烦恼……手动降重确实是个难题&#xff0c;必须要先付点小经费去靠谱的网站查重&#xff0c;再对着红字标注去改&#xff0c;后面每一次的论文呢查重结果都像赌//博&#xff0c;谁也不知道明明是同一篇文章&#xff0c;第二次…

2024鲲鹏昇腾创新大赛集训营Ascend C算子学习笔记

异构计算架构&#xff08;CANN&#xff09; 对标英伟达的CUDA CuDNN的核心软件层&#xff0c;向上支持多种AI框架&#xff0c;向下服务AI处理器&#xff0c;发挥承上启下的关键作用&#xff0c;是提升昇腾AI处理器计算效率的关键平台。主要包括有各种引擎、编译器、执行器、算…

(番外篇)指针的一些相关习题讲解(速进,干货满满)(2)

前言&#xff1a; 小编感觉最近有点太堕落&#xff0c;于是我开始从事这篇文章的撰写&#xff0c;现在也是进入七月份了&#xff0c;我现在文章开头定一个小目标&#xff0c;我决定在七月份发布至少十篇文章&#xff0c;希望我可以说到做到&#xff08;我前面就口头欠了不少文章…