【D3.js in Action 3 精译_022】3.2 使用 D3 完成数据准备工作

当前内容所在位置

  • 第一部分 D3.js 基础知识
    • 第一章 D3.js 简介(已完结)
      • 1.1 何为 D3.js?
      • 1.2 D3 生态系统——入门须知
      • 1.3 数据可视化最佳实践(上)
      • 1.3 数据可视化最佳实践(下)
      • 1.4 本章小结
    • 第二章 DOM 的操作方法(已完结)
      • 2.1 第一个 D3 可视化图表
      • 2.2 环境准备
      • 2.3 用 D3 选中页面元素
      • 2.4 向选择集添加元素
      • 2.5 用 D3 设置与修改元素属性
      • 2.6 用 D3 设置与修改元素样式
      • 2.7 本章小结
    • 第三章 数据的处理 ✔️
      • 3.1 理解数据
      • 3.2 准备数据 ✔️
        • 3.2.1 将数据集加载到 D3 项目 ✔️
        • 3.2.2 格式化数据 ✔️
        • 3.2.3 测量数据集 ✔️
      • 3.3 将数据绑定到 DOM 元素(精译中 ⏳)
      • 3.4 让数据适应屏幕
      • 3.5 加注图表标签
      • 3.6 本章小结

文章目录

    • 3.2 数据准备 Preparing data
      • 3.2.1 将数据集加载到 D3 项目 Loading a dataset into a D3 project
      • 3.2.2 格式化数据 Formatting a dataset
      • 3.2.3 测量数据集 Measuring a dataset

3.2 数据准备 Preparing data

有了数据集,下一步就是用 D3 将其 加载 到项目中,如图 3.8 中的步骤 2 所示。然后就是确保数据按正确的格式进行处理,其间也可能需要对数据进行多方位的测量。本节介绍的 D3 方法都是为了完成上述准备工作,并为示例条形图的创建提供有效数据。

图 3.8 D3 数据工作流的第二步即利用 D3 的数据获取方法,将数据集加载到项目中

图 3.8 D3 数据工作流的第二步即利用 D3 的数据获取方法,将数据集加载到项目中

3.2.1 将数据集加载到 D3 项目 Loading a dataset into a D3 project

D3 提供了极为方便的工具函数来处理项目数据的加载。具体工具函数的选择,取决于当前数据集的特定格式。例如,CSV 格式的数据集使用 d3.csv() 进行加载,JSON 数据集则使用 d3.json()。这些函数的第一个参数均为该数据文件的路径。此外,D3 还专门提供了用于加载文本甚至 XML 格式数据的工具函数。它们都分属 d3-fetch 模块(详见 https://d3js.org/d3-fetch)。

注意

本章代码已放到 GitHub 仓库(详见 http://mng.bz/Y7Po)。各章节代码都存放在代码仓库相应的文件夹下。在 3.2 开头的文件夹中可以看到本小节示例代码,数字后跟章节主题,如 3.2-Preparing_data。各文件夹下都有一组子文件夹 startend。若需从最基本的代码开始练习,请使用 start 文件夹。要是遇到困难,可以在 end 文件夹找到对应的参考代码。分章节练习时,建议一次只打开一个 start 或一个 end 文件夹。如果用 Live Server 工具一次性打开所有章节的文件并启动本地服务器,某些路径可能无法正常工作,尤其是往项目中加载数据集时,需要特别注意。

下面再回到上一章介绍过的那个条形图练习,将我们从《2021 年数据可视化行业状态调查》中搜集的样本数据集(详见 www.datavisualizationsociety.org/survey)加载到示例中。该数据集为 CSV 格式,位于 /data 文件夹下。数据集的具体内容如代码清单 3.1 所示。第一行为列标题,technologycount 分别表示调查中涉及的数据可视化工具(即从 ArcGISP5)、以及选用该工具的从业者投票数。其中 D3.js 为 414 票,Python 为 530 票:

代码清单 3.1 数据从业人员最常用的工具统计情况(data.csv)

technology,count
ArcGIS,147
D3.js,414
Angular,20
Datawrapper,171
Excel,1078
Flourish,198
ggplot2,435
Gephi,71
Google Data Studio,176
Highcharts,58
Illustrator,426
Java,29
Leaflet,134
Mapbox,167
kepler.gl,24
Observable,157
Plotly,223
Power BI,460
PowerPoint,681
Python,530
QGIS,193
Qlik,61
R,561
React,145
Tableau,852
Vega,48
Vue,51
Web Components,79
WebGL,65
Pen & paper,522
Physical materials,69
Canvas,121
P5/Processing,55

鉴于目标数据集为 CSV 文件,因此选用 d3.csv() 进行数据加载,并将文件路径 "../data/data.csv" 作为第一参数。这里的双句点符号 .. 表示上一层目录,即文件夹 /js 所在的项目根目录。然后进入 /data 文件夹,最终定位到数据文件 data.csv

d3.csv("../data/data.csv");

这样就完成了数据工作流中的第 2 步。接下来需要对数据做格式化处理并完成相关测量工作。在此之前,还要知道数据的访问方法。注意,这里的数据加载是一个 异步过程(asynchronous process,所涉及的异步操作,是指那些数据结果不会立即返回的数据请求。我们可以通过访问 d3.csv() 的回调函数,或者 JavaScriptPromise 接口,确保数据在执行相关操作前已加载完毕。

3.2.2 格式化数据 Formatting a dataset

本节介绍 D3 处理数据格式的具体方法,对应工作流中的第三步,如图 3.9 所示:

图 3.9 数据工作流的第三步,从数据格式化开始,以便在构建可视化时使用

图 3.9 数据工作流的第三步,从数据格式化开始,以便在构建可视化时使用

d3.csv() 中的回调函数,又称为 行转换函数(row conversion function),能够逐行访问数据。在下面的代码中,d3.csv() 的第一个参数为数据路径,第二个参数即为回调函数。该函数将访问到的数据输出到控制台显示。复制本段代码到 main.js 并保存项目:

const svg = d3.select(".responsive-svg-container").append("svg").attr("viewBox", "0 0 1200 1600").style("border", "1px solid black");d3.csv("../data/data.csv", d => {console.log(d);
});

打开浏览器检查工具,转到控制台(即 Console)标签,将会看到如图 3.10 所示的输出结果。数据逐行记录,每一行都是一个包含 technologycountJavaScript 对象:

图 3.10 获取到数据后,由 d3.csv() 回调函数输出到控制台的部分数据显示情况

图 3.10 获取到数据后,由 d3.csv() 回调函数输出到控制台的部分数据显示情况

d3.csv("../data/data.csv", d => {return {technology: d.technology,count: +d.count};
});

这里的关键在于,回调函数中返回的这些键值对(key-value pairs),是数据集加载完毕后唯一可以访问的内容。该策略可以有效过滤原始数据中的无关字段列。但如果需要保留的列过多,逐一返回目标键值对可能稍显冗余。这时可能需要跳过回调函数中的处理逻辑,待 D3 返回完整数据集后再统一进行格式化。完整数据集的具体访问方法将在下一节进行介绍。

3.2.3 测量数据集 Measuring a dataset

D3 数据工作流的第三步还可以包含一个可选操作,即数据测量,如图 3.11 所示。尽管逐行读取数据很实用,但有时也需要访问整个数据集。这就要用到 JavaScript 的期约接口 Promise 了。Promise 是异步操作的结果,并以对象的形式存在。例如函数 d3.csv() 返回的对象。读取 Promise 结果的一个简单方法是调用其 then() 方法。

图 3.11 在第三步的第二小步,可以测量并探索数据

图 3.11 在第三步的第二小步,可以测量并探索数据

在以下代码段中,工具函数 d3.csv() 链式调用了 then() 方法。一旦数据加载完毕,Promise 即转为 兑现(fulfilled) 状态,完整数据集将在 then() 方法中的回调函数中备用。按如下代码将该数据集一次性输出到控制台,并保存项目:

d3.csv("../data/data.csv", d => {return {technology: d.technology,count: +d.count};
}).then(data => {console.log(data);
});

在控制台中,您会看到一个被转换为对象数组的完整数据集,其中的每个对象对应 CSV 原始数据集中的某一行。此时 D3 让该数据集变为可迭代对象,对于后续可视化开发非常有用。如图 3.12 所示,还可以确认计数值已正确转为数字形式。查看数组最后一项,还能看到经过 D3 处理后的原始 CSV 数据的列标题数组。尽管我们的条形图小练习暂不需要,但它偶尔也可以派上用场。

图 3.12 完整的数据集以对象数组的形式记录在控制台中

图 3.12 完整的数据集以对象数组的形式记录在控制台中

在数据工作流的第 3.a 步骤中,我们已经完成了数据格式化的工作,此时仍然可以利用 D3 来探索并测量获取到的数据。测量数据的特定维度有助于提前做好相关准备工作。

虽然从何处开始探索数据并没有严格的规范,但从数据集 Promise 的 then() 方法切入不失为一个好思路。首先要考察数据集包含了多少种技术。这可以通过数组的 length 属性直接查看。打印到控制台,将得到结果 33。也就是说,条形图将包含 33 个矩形元素:

d3.csv("../data/data.csv", d => {...
}).then(data => {console.log(data.length);   // => 33(数据集包含的总行数)
});

此外,我们还想知道哪种技术最受欢迎,以及有多少从业人员在定期使用它;最热门的有了,最冷门的情况又如何?这些指标都可以通过 d3.max()d3.min() 函数获得。如以下代码段所示,这些函数都接受两个参数:第一个参数是包含这些极值的可迭代对象(即数据集本身),由 Promise 提供;第二个参数是一个 访问器函数(accessor function),用于指定参与比较的健(本例中即为 count)。

若要在控制台中分别输出最大值和最小值,同样可利用 Promisethen() 方法,分别得到结果 107820

d3.max(data, d => d.count)      // => 1078
d3.min(data, d => d.count)      // => 20
d3.extent(data, d => d.count)   // => [20, 1078]

注意

还可以使用 d3.extent() 方法,它接受相同的参数并返回一个包含最小值和最大值的结果数组。

考察数据中的最大值与最小值有助于预判图表中条形区域的长度,并能预估最高值和最低值之间的差异对比是否易于在屏幕上渲染。

条形图中的数据常按降序排列,这样可读性更强,观众看了也能一目了然,明确哪些技术使用频率较高、哪些较低。JavaScript 的原生方法 sort() 可以轻松实现排序。它接受一个 比较函数(compare function) 作参数,如以下代码所示。该函数用于比较两个技术的 count 值,参数 a 和参数 b 分别表示参与比较的两个技术对象。若 b 中的 count 值大于 a 中的,则 b 应该排在 a 的前面,以此类推:

data.sort((a, b) => b.count - a.count);

排序逻辑可以放到 then() 方法内。如果打印到控制台,会看到 Excel 位于技术列表的首位,计数为 1078;其次是 Tableau,计数值 852Angular 则以 20 的最小计数值垫底,如图 3.13 所示。

此外,d3-array 模块(详见 https://d3js.org/d3-array)还包含大量用来测量及转换数据的实用方法,本书后续将选取一部分进行介绍。但 d3.max()d3.min()d3.extent() 函数应该这当中是最常用的。

图 3.13 输出到控制台并按降序排列的数据集

图 3.13 输出到控制台并按降序排列的数据集

完成了数据的加载、转换与测量工作,接下来通常需要将数据集传递给另一个函数进行处理。该函数负责可视化效果的构建。如以下代码段所示,可以看到此时 main.js 中的内容;注意观察在 then() 方法的末尾,数据是怎样传递给 createViz() 函数的。该函数的实现逻辑将在下一节进行介绍。

代码清单 3.2 数据的加载、转换与测量逻辑(main.js)

const svg = d3.select(".responsive-svg-container").append("svg")  // 添加一个 SVG 容器.attr("viewBox", "0 0 1200 1600")     .style("border", "1px solid black");  d3.csv("../data/data.csv", d => { // 加载数据集// 对数据进行格式化处理return {technology: d.technology,  count: +d.count            };
}).then(data => {// 对数据集进行测量console.log(data.length); // => 33console.log(d3.max(data, d => d.count)); // => 1078         console.log(d3.min(data, d => d.count)); // => 20          console.log(d3.extent(data, d => d.count)); // => [20, 1078]// 让数据集按降序排列data.sort((a, b) => b.count - a.count);// 将数据集传给另一个函数作进一步处理createViz(data);
});// 构建条形图的处理函数
const createViz = (data) => {};

在结束本节内容前,您可以参照图 3.14 中的内容,简要回顾一下前面学过的数据加载、行转换以及 Promise 等相关概念。总结归纳如下:

  1. 加载数据要用到 D3 的数据获取函数(fetch function),如 d3.csv()
  2. 数据的格式化是在行转换函数中进行的。
  3. 数据加载完毕后,可以通过链式调用 then() 方法来访问整个数据集。该方法也是探究数据及执行其他数据操作的理想场所。
  4. 将最终的数据传递给另一个函数,由该函数负责具体的可视化构建。

图 3.14 D3 中数据加载、转换及测量的实现方法与位置示意图

图 3.14 D3 中数据加载、转换及测量的实现方法与位置示意图

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/pingmian/54097.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

飞机表面缺陷检测系统源码分享

飞机表面缺陷检测检测系统源码分享 [一条龙教学YOLOV8标注好的数据集一键训练_70全套改进创新点发刊_Web前端展示] 1.研究背景与意义 项目参考AAAI Association for the Advancement of Artificial Intelligence 项目来源AACV Association for the Advancement of Computer…

3.Java高级编程实用类介绍(一)

三、Java高级编程实用类介绍(一) 文章目录 三、Java高级编程实用类介绍(一)一、枚举类型二、包装类三、Math 一、枚举类型 使用enum进行定义 public enum 枚举名字{值1,值2.... }二、包装类 每个基本类型在java.lang包中都有一个相应的包装类 /** new包装类(字符…

4、(PCT)Point Cloud Transformer

4、(PCT)Point Cloud Transformer 论文链接:PCT论文链接 本篇论文介绍Transformer在3D点云领域的应用,Transformer在NLP领域和图像处理领域都得到了广泛的应用,特别是近年来在图像领域的应用,本篇论文主要…

Neo4j入门案例:三星堆

创建一个关于三星堆的知识图谱可以是一个非常有趣的项目,它可以帮助理解如何使用Neo4j来存储和查询复杂的关系数据。三星堆文化以其独特的青铜器、金器和其他文物而闻名,这为我们提供了一个丰富的历史背景来构建知识图谱。 数据模型定义 实体类型&#…

[Python]一、Python基础编程

F:\BaiduNetdiskDownload\2023人工智能开发学习路线图\1、人工智能开发入门\1、零基础Python编程 1. Python简介 Python优点: 学习成本低开源适应人群广泛应用领域广泛1.1 Python解释器 下载地址:Download Python | Python.org 1.2 Python开发IDE -- Pycharm 2. 基础语法…

JAVA—组件及事件处理

对于使用JAVA的GUI程序的学习了解,学习常用的组件,容器和常用的一些API 1.java Swing 概述 java Swing 包下提供了强大的用于开发桌面程序的API 理解面向对象编而简单学习一些内容 2.窗口 介绍: 窗口是基于JFrame类实例的一个底层容器&#…

C++中的new与delete

目录 1.简介 2.底层 1.简介 new是升级版的malloc,它会先开空间再去调用构造函数。 delete是升级版的free,它会先调用析构函数再free掉空间。 class A { public:A(int a10, int b10){a a1;b b1;}private:int a;int b; };int main() {//new会先开空间…

Leetcode—322. 零钱兑换【中等】(memset(dp,0x3f, sizeof(dp))

2024每日刷题&#xff08;159&#xff09; Leetcode—322. 零钱兑换 算法思想 dp实现代码 class Solution { public:int coinChange(vector<int>& coins, int amount) {int m coins.size();int n amount;int dp[m 1][n 1];memset(dp, 0x3f, sizeof(dp));dp[0][…

Vue(12)——路由的基本使用

VueRouter 作用&#xff1a;修改地址栏路径时&#xff0c;切换显示匹配的组件 基本步骤&#xff08;固定&#xff09; 下载&#xff1a;下载VueRouter模块到当前工程引入安装注册创建路由对象注入&#xff0c;将路由对象注入到new Vue 实例中&#xff0c;建立关联 发现了#/表…

高德地图2.0 绘制、编辑多边形覆盖物(电子围栏)

1. 安装 npm i amap/amap-jsapi-loader --save移步&#xff1a;官方文档 2. map组件封装 <script lang"ts" setup> import AMapLoader from amap/amap-jsapi-loader import { onMounted, ref } from vue import { propTypes } from /utils/propTypesdefineO…

企业CAD图纸防泄密措施有哪些?10个真实有效方法分享

在工程设计领域&#xff0c;CAD图纸作为核心设计资料&#xff0c;其安全性至关重要。为了确保CAD图纸在存储、传输和使用过程中的机密性&#xff0c;企业需采取多种加密方法。以下介绍十种常用的CAD图纸加密方法&#xff0c;帮助企业有效保护其知识产权。 1.安秉网盾图纸加密 …

venn可视化

文章目录 前言一、数据准备二、可视化1.二维2.三维 3.数据保存总结 前言 韦恩图&#xff08;Venn diagram&#xff09;是一种用于可视化集合之间关系的图形工具。它是由英国逻辑学家约翰韦恩于1880年引入的。 韦恩图由一组圆和它们的交集区域组成。每个圆代表一个集合&#x…

Mac笔记本上查看/user/目录下的文件的几种方法

在Mac笔记本上查看/user/下的文件&#xff0c;可以通过多种方法实现。以下是一些常见的方法&#xff1a; 一、使用Finder 打开Finder&#xff1a;点击Dock栏中的Finder图标&#xff0c;或者使用快捷键Command F。 导航到用户目录&#xff1a; 在Finder的菜单栏中&#xff0…

简单了解微服务--黑马(在更)

认识微服务 单体架构 不适合大型复杂项目 微服务架构 将单体结构的各个功能模块拆分为多个独立的项目 拆取的独立项目分别开发&#xff0c;在部署的时候也要分别去编译打包&#xff0c;分别去部署&#xff0c;不同的模块部署在不同的服务器上&#xff0c;对外提供不同的功能…

2024ICPC网络赛1: C. Permutation Counting 4

题意&#xff1a; 给定 n n n个区间 [ L i , R i ] [L_i,R_i] [Li​,Ri​]设集合 A { { p i } ∣ p i 为排列&#xff0c; L i < p i < R i } A\{ \{ p_i\} | p_i为排列&#xff0c;Li<p_i<R_i\} A{{pi​}∣pi​为排列&#xff0c;Li<pi​<Ri​}&#xff…

MySQL底层为什么选择用B+树作为索引

首先&#xff0c;我们来想想为什么这么多数据结构&#xff0c;为什么要用树这种数据结构&#xff1f; 众多的数据结构在逻辑层面可分为&#xff1a;线性结构 和 非线性结构。 线性结构有&#xff1a;数组、链表&#xff0c;基于它们衍生出的有哈希表&#xff08;哈希表也称散…

[网络]从零开始的计算机网络基础知识讲解

一、本次教程的目的 本次教程我只会带大叫了解网络的基础知识&#xff0c;了解网络请求的基本原理&#xff0c;为后面文章中可能会用到网络知识做铺垫。本次我们只会接触到网络相关的应用层&#xff0c;并不涉及协议的具体实现和数据转发的规则。也就是说&#xff0c;这篇教程是…

Windows11:解决近期更新补丁后无法上网的问题

点击开始菜单&#xff0c;打开设置&#xff0c;点击Windows更新&#xff0c;点击更新历史记录&#xff0c;点击“卸载更新“&#xff0c;找到这个补丁更新卸载即可。

【Linux】网络层协议——IP

一、IP协议 在前面&#xff0c;我们学习了应用层和传输层&#xff0c;接下来&#xff0c;我们来学习网络层&#xff0c;网络层的主要功能是在复杂的网络环境中确定一个合适的路由。 1.1 IP协议的基本概念 主机&#xff1a;配有IP地址&#xff0c;有可以进行路由控制的设备路由…

香港电讯SASE解决方案:终端与云端的安全护航

现代工作模式存在网络安全隐忧 随着远程办公模式的普及&#xff0c;越来越多员工使用各种个人终端设备&#xff0c;如台式电脑、笔记本电脑、智能手机、平板电脑等进行协作办公。然而&#xff0c;由于IT人才短缺和员工隐私等因素&#xff0c;许多企业无法统一管理端点设备的安…