一张引人注目的可视化图表的背后

buncf674 8年前
   <h2>可视化之根</h2>    <p>多年前读过一篇非常震撼的文章,叫 《Lisp之根》 (英文版: The roots of Lisp ),大意是Lisp仅仅通过一种数据结构(列表)和有限的几个函数,就构建出了一门极为简洁,且极具扩展性的编程语言。当时就深深的被这种设计哲学所震撼:一方面它足够简单,每个单独的函数都足够简单,另一方面它有非常复杂,像宏,高阶函数,递归等机制可以构建出任意复杂的程序,而复杂的机制又是由简单的组件组成的。</p>    <p>数据的可视化也是一样,组成一幅内容清晰、表达力强、美观的可视化信息图的也仅仅是一些基本的元素,这些元素的不同组合却可以产生出令人着迷的力量。</p>    <p>要列出“可视化元素之根”很容易:位置、长度、角度、形状、纹理、面积(体积)、色相、饱和度等几种有限的元素,邱南森在他的 《数据之美》 中提供了一张视觉元素的图,其中包含了大部分常用的元素。</p>    <p style="text-align:center"><img src="https://simg.open-open.com/show/a7967041b1fa4fc0edfea7ebb311c1ad.png"></p>    <p>令人振奋的是,这些元素可以自由组合,而且组合的结果往往是 1+1>2 的。</p>    <h3>心理学与认知系统</h3>    <p>数据可视化其实是基于人类的视觉认知系统的,因此对人类视觉系统的工作方式有一些了解可以帮助我们设计出更为高效(更快的传递我们想要表达的信息给读者)的可视化作品。</p>    <p>心理物理学</p>    <p>在生活中,我们会遇到这样的场景:一件原价10元的商品,如果降价为5元,则消费者很容易购买;而一件原价100元的商品,降价为95元,则难以刺激消费者产生购买的冲动。这两个打折的绝对数字都是5元,但是效果是不一样的。</p>    <p>韦伯-费希纳定理 描述的正是这种 <em>非理性</em> 的场景。这个定理的一个比较装逼的描述是:</p>    <p>感觉量与物理量的对数值成正比,也就是说,感觉量的增加落后于物理量的增加,物理量成几何级数增长,而心理量成算术级数增长,这个经验公式被称为费希纳定律或韦伯-费希纳定律。</p>    <p>– 摘自百度百科</p>    <p>这个现象由人类的大脑构造而固有,因此在设计可视化作品时也应该充分考虑,比如:</p>    <ul>     <li>避免使用面积图作为对比</li>     <li>在做对比类图形时,当差异不明显时需要考虑采用非线性的视觉元素</li>     <li>选用多种颜色作为视觉编码时,差异应该足够大</li>    </ul>    <p>比如:</p>    <p style="text-align:center"><img src="https://simg.open-open.com/show/be29c222811621482c068651a8e58487.png"></p>    <p>如上图中,当面积增大之后,肉眼越来越难从形状的大小中 <strong>解码</strong> 出实际的数据差异,上边的三组矩形(每行的两个为一组),背后对应的数据如下,可以看到每组中的两个矩形的绝对差都是 <strong>5</strong> :</p>    <pre>  <code class="language-javascript">var data = [    {width: 5, height: 5},    {width: 10, height: 10},      {width: 50, height: 50},    {width: 55, height: 55},      {width: 100, height: 100},    {width: 105, height: 105}  ];  </code></pre>    <p>格式塔学派</p>    <p><a href="/misc/goto?guid=4959739569388842094" rel="nofollow,noindex">格式塔学派</a> 是心理学中的一个重要流派,她强调整体认识,而不是 结构主义 的组成说。格式塔认为,人类在看到画面时,会优先将其简化为一个整体,然后再细化到每个部分;而不是先识别出各个部分,再拼接为整体。</p>    <p>比如那条著名的斑点狗:</p>    <p style="text-align:center"><img src="https://simg.open-open.com/show/f2159bcfde72636a585cbfae9023e391.png"></p>    <p>我们的眼睛-大脑可以很容易的看出阴影中的斑点狗,而不是先识别出狗的四条腿或者尾巴(事实上在这张图中,人眼无法识别出各个独立的部分)。</p>    <p>格式塔理论有几个很重要的原理:</p>    <ul>     <li>接近性原理</li>     <li>相似性原理</li>     <li>封闭性原理</li>     <li>连续性原理</li>     <li>主体/背景原理</li>    </ul>    <p>当然,格式塔学派后续还有一些发展,总结出了更多的原理。工程上,这些原理还在大量使用,指导设计师设计各式各样的用户界面。鉴于网上已经有众多的格式塔理论及其应用的文章,这里就不在赘述。</p>    <h3>视觉设计的基本原则</h3>    <p><a href="/misc/goto?guid=4959739569469883161" rel="nofollow,noindex">《写给大家看的设计书》</a> 一书中,作者用通俗易懂的方式给出了几条设计的基本原则,这些原则完全可以直接用在数据可视化中的设计中:</p>    <ul>     <li>亲密性(将有关联的信息物理上放在一起,而关联不大的则通过留白等手段分开)</li>     <li>对齐(将元素通过水平,垂直方向对齐,方便视觉识别)</li>     <li>重复(重复使用某一模式,比如标题1的字体颜色,标题2的字体颜色等,保持重复且一致)</li>     <li>对比(通过强烈的对比将不同的信息区分开)</li>    </ul>    <p style="text-align:center"><img src="https://simg.open-open.com/show/e12ace9f8ea432a2066c7066100b1bd0.png"></p>    <p>如果稍加留意,就会发现现实世界中在大量的使用这几个原则。1,2,3三个标题的形式就是重复性的体现;每个标题的内容自成一体是因为组成它的元素(数字,两行文字)的距离比较近,根据亲密性原则,人眼会自动将其归为一类;超大的数字字体和较小的文字形成了对比;大标题的颜色和其他内容形成了对比等等。</p>    <p>这些原则其实跟上面提到的格式塔学派,以及韦伯-费希纳定理事实上是相关的,在理解了这些人类视觉识别的机制之后,使用这些原则就非常自然和得心应手了。</p>    <p>一些例子</p>    <ul>     <li>淡化图表的网格(和数据图形产生对比)</li>     <li>通过深色来强调标尺(强烈的线条和其余部分产生对比)</li>     <li>离群点的高亮(通过不同颜色产生对比)</li>     <li>使用颜色(通过不同的颜色,利用亲密性原则方便读者对数据分组)</li>     <li>元素颜色和legend(使用重复性原则)</li>     <li>同一个页面上有多个图表,采取同样的图例,色彩选择(强调重复性原则)</li>    </ul>    <p style="text-align:center"><img src="https://simg.open-open.com/show/84509848130e3a51838d26e07c1e47a6.png"></p>    <h3>实例</h3>    <p>上篇文章提到我通过一个手机App收集到了女儿成长的一些记录,包括哺乳信息,换尿布记录,以及睡眠信息。这个例子中,我会一步步的介绍如何将这些信息可视化出来,并解释其中使用的视觉原理。</p>    <p>可视化的第一步是要明确 你想要从数据中获取什么信息 ,我想要获取的信息是孩子的睡眠总量以及睡眠时间分布情况。</p>    <p>进阶版的条形图</p>    <p>确定了可视化的目的之后,第二步是选取合适的视觉编码。上面提到过,对于人眼来说,最精确的视觉编码方式是长度。我们可以将 睡眠时间 转化为 长度 来展现,最简单的方式是按天聚合,然后化成柱状图。比如:</p>    <pre>  <code class="language-javascript">2016/11/21,768  2016/11/22,760  2016/11/23,700  </code></pre>    <p>不过这种图无法看出时间的分布。我们可以考虑通过条形图的变体来满足前面提到的两个核心诉求。先来在纸上画一个简单的草图。纵轴是24小时,横轴是日期。和普通的条形图不一样的是,每个条形的总长度是固定的,而且条形代表的不是简单非数据类型,而是24小时。在草稿中,每个画斜线的方块表示孩子在睡眠状态,而虚线部分表示她醒着。</p>    <p style="text-align:center"><img src="https://simg.open-open.com/show/509df5bb77a74577d81308a3be238dfb.png"></p>    <p>原始数据</p>    <pre>  <code class="language-javascript">name,date,length,note  心心,2016/11/21 19:23,119,  心心,2016/11/21 22:04,211,  心心,2016/11/22 02:03,19,  心心,2016/11/22 02:23,118,  心心,2016/11/22 05:58,242,  心心,2016/11/22 10:57,128,  心心,2016/11/22 14:35,127,  心心,2016/11/22 17:15,127,  心心,2016/11/22 20:02,177,  心心,2016/11/23 01:27,197,  </code></pre>    <p>这里有个问题,我们的纵轴是24小时,如果她晚上23点开始睡觉,睡了3个小时,那么这个条形就回超出24格的轴。我写了一个函数来做数据转换:</p>    <pre>  <code class="language-javascript">require 'csv'  require 'active_support/all'  require 'json'    csv = CSV.read('./visualization/data/sleeping_data_refined.csv', :headers => :first_row)    data = []  csv.each do |row|      date = DateTime.parse(row['date'], "%Y/%m/%d %H:%M")        mins_until_end_of_day = date.seconds_until_end_of_day / 60      diff = mins_until_end_of_day - row['length'].to_i        if (diff >= 0) then          data << {              :name => row['name'],              :date => row['date'],              :length => row['length'],              :note => row['note']          }      else          data << {              :name => row['name'],              :date => date.strftime("%Y/%m/%d %H:%M"),              :length => mins_until_end_of_day,              :note => row['note']          }            data << {              :name => row['name'],              :date => (date.beginning_of_day + 1.day).strftime("%Y/%m/%d %H:%M"),              :length => diff.abs,              :note => row['note']          }      end  end  </code></pre>    <p>有了 <em>干净</em> 的数据之后,我们可以编写一些前端的代码来绘制条形图了。画图的时候有几个要注意的点:</p>    <ul>     <li>每天内的时间段对应的矩形需要有相同的X坐标</li>     <li>不同的睡眠长度要有颜色区分(睡眠时间越长,颜色越深)</li>    </ul>    <pre>  <code class="language-javascript">var dateRange = _.uniq(data, function(d) {    var date = d.date;    return [date.getYear(), date.getMonth(), date.getDate()].join("/");  });    xScale.domain(dateRange.map(function(d) { return d.date; }));    function getFirstInDomain(date) {    var domain = xScale.domain();      var index = _.findIndex(domain, function(d) {        return date.getYear() === d.getYear()            && date.getMonth() === d.getMonth()            && date.getDate() === d.getDate();    });      return domain[index];  }  </code></pre>    <p>函数 getFirstInDomain 可以根据一个日期值返回一个 X 坐标,这样 2016/11/21 19:23 和 2016/11/21 22:04 都会返回一个整数值(借助d3提供的标尺函数)。</p>    <p>另外,我们根据每次睡觉的分钟数将睡眠质量划分为5个等级:</p>    <pre>  <code class="language-javascript">var level = d3.scale.threshold()    .domain([60, 120, 180, 240, 300])    .range(["low", "fine", "medium", "good", "great", "prefect"]);  </code></pre>    <p>然后在绘制过程中,根据实际数据值来确定不同的 <em>CSS Class</em> :</p>    <pre>  <code class="language-javascript">svg.selectAll(".bar")    .data(data)    .enter()    .append("rect")    .attr("class", function(d) {        return level(d.length)+" bar";    })  //...  </code></pre>    <p>实现之后,看起来是这个样子的。事实上这个图标可以比较清楚的看出大部分睡眠集中在0-6点,而中午的10-13点以及黄昏18-20点基本上只有一些零星的睡眠。</p>    <p style="text-align:center"><img src="https://simg.open-open.com/show/82b422212c56fd9de57e60c9a25491ad.png"></p>    <p>星空图</p>    <p>上面的图有一个缺点,是当日期很多的时候(上图差不多有100天的数据),X轴会比较难画,如果缩减成按周,或者按月,又会增加很多额外的复杂度。</p>    <p>另外一个尝试是变形:既然这个统计是和时间相关的,那么圆形的钟表形象是一个很好的隐喻,每天24小时自然的可以映射为一个圆。而睡眠时间可以通过弧长来表示,睡眠时间越长,弧长越大:</p>    <p style="text-align:center"><img src="https://simg.open-open.com/show/10b2382147cd73b8caead346fc883f4a.png"></p>    <p>角度转弧度</p>    <p>我们首先将整个圆(360度)按照分钟划分,则每分钟对应的角度数为: 360/(24*60) ,再将角度转化为弧度: degree * π/180 :</p>    <pre>  <code class="language-javascript">var perAngle = (360 / (24 * 60)) * (Math.PI/180);  </code></pre>    <p>那么对于指定的时间,比如 10:20 ,先计算出其分钟数: 10*60+20 ,再乘以 preAngle ,就可以得出起始弧度,</p>    <pre>  <code class="language-javascript">function startAngle(date) {      var start = (date.getHours() * 60 + date.getMinutes()) * perAngle;      return Math.floor(start*1000)/1000;  }    function endAngle(date, length) {      var end = (date.getHours() * 60 + date.getMinutes() + length) * perAngle;      return Math.floor(end*1000)/1000;  }  </code></pre>    <p>实现的结果是这样的:</p>    <p style="text-align:center"><img src="https://simg.open-open.com/show/a57ef97fa09d17cb1390cdf867ef0be3.png"></p>    <p>初看起来,它像是星空图,但是不同的颜色含义没有那么直观,引入 Legend 之后。</p>    <pre>  <code class="language-javascript">var colorScale = d3.scale.linear()    .range(["#2c7bb6", "#00a6ca","#00ccbc","#90eb9d","#ffff8c","#f9d057"].reverse());    var defs = vis.append("defs");    var linearGradient = defs.append("linearGradient")      .attr("id", "linear-gradient")      .attr("x1", "0%")      .attr("y1", "0%")      .attr("x2", "100%")      .attr("y2", "0%");    linearGradient.selectAll("stop")    .data( colorScale.range() )    .enter().append("stop")    .attr("offset", function(d,i) { return i/(colorScale.range().length-1); })    .attr("stop-color", function(d) { return d; });  </code></pre>    <p>启用该 Legend 之后:</p>    <pre>  <code class="language-javascript">var legendWidth = 300;    var legendsvg = vis.append("g")    .attr("class", "legendWrapper")    .attr("transform", "translate(" + (width/2+legendWidth) + "," + (height - 40) + ")");    //Draw the Rectangle  legendsvg.append("rect")    .attr("class", "legendRect")    .attr("x", -legendWidth/2)    .attr("y", 0)    .attr("width", legendWidth)    .attr("height", 3.5)    .style("fill", "url(#linear-gradient)");    //Append title  legendsvg.append("text")    .attr("class", "legendTitle")    .attr("x", 0)    .attr("y", -10)    .style("text-anchor", "middle")    .text("Sleeping Minutes");  </code></pre>    <p style="text-align:center"><img src="https://simg.open-open.com/show/cc3d429366a34976997f86c9713e091a.png"></p>    <p>图上的每段弧都会有鼠标移动上去的tooltip,这样可以很好的和读者大脑中的钟表隐喻对照起来,使得图表更容易理解。</p>    <p style="text-align:center"><img src="https://simg.open-open.com/show/a6f476dbdcf7a3fc08855f9dbd0ea44c.png"></p>    <p>由于我将整个圆分成了24份,这点和普通的钟表事实上有差异,那么如果加上钟表的刻度,会不会更好一些呢?从结果来看,这样的标线反而有点画蛇添足,所以我在最后的版本中去掉了钟表的标线。</p>    <p>更进一步</p>    <p>一个完整的可视化作品,不但要运用各种视觉编码来将数据转换为视觉元素,背景信息也同样重要。既然这个星空图是关于 睡眠主题 的,那么一个包含她在睡觉的图片集合则会加强这种视觉暗示,帮助读者快速理解。</p>    <p>当然,背景信息只是补充作用,需要避免喧宾夺主。因此图片做了模糊处理,且加上了深灰色的半透明Mask(此处应用了格式塔理论中的主体/背景原理)。</p>    <p style="text-align:center"><img src="https://simg.open-open.com/show/14d4da56051fdcf57bae4d55d011dbb9.png"></p>    <h3>小结</h3>    <p>这篇文章讨论了可视化作品背后的一些视觉元素理论,以及人类的视觉识别机制。在这些机制的基础上,介绍了如何运用常用的设计原则来进行视觉编码。最后,通过一个实例来介绍如何运用这些元素 – 以及更重要的,这些元素的组合 – 来制作一个漂亮的、有意义的可视化图表。</p>    <h3>参考资料:</h3>    <ul>     <li><a href="/misc/goto?guid=4959739569563031553" rel="nofollow,noindex">《认知与设计》</a></li>     <li><a href="/misc/goto?guid=4959739569469883161" rel="nofollow,noindex">《写给大家看的设计书》</a></li>     <li><a href="/misc/goto?guid=4959739569657686742" rel="nofollow,noindex">《数据之美》</a></li>    </ul>    <p> </p>    <p>来自:http://icodeit.org/2017/03/visualise-the-data-around-you/</p>    <p> </p>