今天写分析系统的时候看到一段关于 sum 的用法，有点意思： 1fruits = ['Apples', 'Pears', 'Nectarines', 'Plums', 'Grapes', 'Strawberries'] 2 3data = {'fruits' : fruits, 4 '2015' : [2, 1, 4, 3, 2, 4], 5 '2016' : [5, 3, 3, 2, 4, 6], 6 '2017' : [3, 2, 4, 4, 5, 3]} 7 8counts = sum(zip(data['2015'], data['2016'], data['2017']), ()) 这段代码来自于： …

阅读更多

前几天一个创业朋友 Q 同学咨询我如何学习做游戏。这是个很普遍的问题，经常会有其他行业的程序员向我咨询转到游戏行业应该做什么准备，所以我把回答整理了一下，希望对大家有用。 Q 同学问 小弟最近有一个想法，想要做一个网页联网的2D（或者伪3D）大富翁游戏。主要目的是： （1）增进一下技术，了解一下相关的技术栈。 （2）未来有在这个领域创业的想法。不想把技术钻的太深，未来产品可能会找外包团队，但是自己要懂一些，可以做技术管理。 我想要通过做这个网页联网2D（或者伪3D）大富翁游戏把下面的技术串一串，实践一下： （1）网页游戏开发，框架，引擎。 （2）联网游戏的服务器同步机理。 （3）微服务，Docker（当然我不知道游戏服务器是不是在做 …

阅读更多

BI 是一个成熟的概念。 根据 前面的讨论，我们知道 BI 系统是一套综合了 数据仓库、查询引擎和前端展示 的复杂系统，是企业进行互联网营销的必备工具。有大量的公司和团体进入这个领域，开发出了优秀的整体解决方案。 我们今天就来聊聊已经存在的 BI 系统解决方案。 我正在构建一个用于游戏运营的 BI(Busniness Intelligence)系统，该系统用于指导 SAGI GAMES 游戏的投放，把运营和投放岗位从重复繁重的数据分析工作中解放出来。 我会用文字把整个构建中的学习、思考、决策的流程记录下来，形成这个系列： 构建BI。 由于时间仓促，能力有限，这个系列中一定有许多疏漏错误之处，欢迎指出和讨论。 商业方案 阿里云 …

阅读更多

在 构建BI：大数据系统概念 一文中，我们提到过 OLAP 系统的特点： OLAP 强调 SQL 执行时长，强调磁盘 IO、磁盘分区和磁盘子系统吞吐量。OLAP 同时处理的数据量大，DML 少，更多的执行是报表作业和聚合类操作。 这些特点让 OLAP 对于存储和查询的要求都很高。业界也有大量成熟的技术解决方案来处理这两类问题。 本文从个人喜好的角度来简单讨论查询引擎 Presto 和数据仓库 ClickHouse。 注意：本篇为技术讨论，对技术不感兴趣的读者可以跳过不看。 我正在构建一个用于游戏运营的 BI(Busniness Intelligence)系统，该系统用于指导 SAGI GAMES 游戏的投放，把运营和投放岗位从重复繁 …

阅读更多

我正在构建一个用于游戏运营的 BI(Busniness Intelligence)系统，该系统用于指导 SAGI GAMES 游戏的投放，把运营和投放岗位从重复繁重的数据分析工作中解放出来。 我会用文字把整个构建中的学习、思考、决策的流程记录下来，形成这个系列： 构建BI。 由于时间仓促，能力有限，这个系列中一定有许多疏漏错误之处，欢迎指出和讨论。 本文的目标是理解大数据系统的相关概念。 生产-存储-消费 计算广告是唯一得到充分商业化的规模化的大数据应用。BI(Business Intelligence)系统属于一种大数据洞察应用。它处在 生产、存储、消费 流程中的消费环节。 参见：计算广告：免费模式的本质 图中，数据源 处于生产环 …

阅读更多

从 WizNote 为知笔记到 Joplin（上） 一文中讲到了我为什么要从为知笔记转到 Joplin。本文讲一讲其中的技术细节。 wiz2joplin 项目是开源的，我在源码中写的注释也很详细，所以本文就不列举所有实现，而是主要讲一下设计思路和需要关注的问题。文中标注了报名和函数名称，方便大家在 wiz2joplin 项目中寻找对应源码查看。 要理解下面讲述的细节，请先阅读：WizNote 为知笔记 macOS 版本本地文件夹分析 。 读取为知笔记 从为知笔记本地数据库中读取为知笔记。 读取为知笔记的目录信息，在为知笔记中称为 location。 读取为知笔记的 TAG 信息。 解压缩为知笔记每个文档的压缩包到临时文件夹： …

阅读更多

我在 配置 Joplin Server 一文中谈到了如何配置 Joplin Server 以实现 Jopin 笔记同步。对于普通使用者来说，这显然是相当麻烦了，恐怕只有程序员愿意去折腾一下。 根据该文评论中的提示，我找到了使用腾讯云对象存储(COS)实现同步的方法。配置更少，而且免费。 腾讯云 COS 官方介绍： 对象存储（Cloud Object Storage，COS）是由腾讯云推出的无目录层次结构、无数据格式限制，可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务。腾讯云 COS 的存储桶空间无容量上限，无需分区管理，适用于 CDN 数据分发、数据万象处理或大数据计算与分析的数据湖等多种场景。COS 提供网页 …

阅读更多

在 从 WizNote 为知笔记到 Joplin（上） 一文中，我介绍了把自己积累十年的笔记从 WizNote 搬家到 Joplin 的心路历程。 Joplin 是一个开源的笔记工具，拥有 Windows/macOS/Linux/iOS/Android/Terminal 版本的客户端，关于它的优势可以看 这里。 我们知道，多端同步功能是笔记工具最重要的功能。只有实现了多端同步，我们才能在工作电脑和手机之间无缝切换笔记体验。Joplin 在同步上做得不错，支持 Dropbox、OneDrive 和 AWS s3（当然国内都没法用），支持 WebDAV 协议，也支持自家的 Joplin Server。 本文介绍如何在自己的服务器上搭建 …

阅读更多

我是 为知笔记 WizNote 的忠实+重度用户。使用 WizNote 接近 10 年，笔记 3000 多篇。日常工作和个人记事，读书笔记和备忘均在为知笔记上，每天都要使用它。 在 2021 牛年春节假期中，我下定决心转向 Joplin 了。我花了几天时间开发了一个工具 wiz2joplin，目前已经成功将我的所有笔记完美转换到 Joplin 。 这是一个怎样的故事？十年使用，有什么样的爱恨情仇？请读下去。 我的知识管理工具尝试 myBase -> CyberArticle -> WizNote 我最早购买的知识管理工具是 myBase ，目前软件还在更新，而且出了 macOS 和 Linux 版本。 由于 myBase 对于网页抓 …

阅读更多

本文分析为知笔记 WizNote for Mac 2.8.7(2020.8.20 10:28) 本地文件夹结构以及数据库结构。 分析这些信息，目的是为了从为知笔记转向其他的笔记系统。我写了一个 WizNote 向 Joplin 转换的工具，详见： WizNote to Joplin 。 文件夹结构 ~/.wiznote/ 我使用的Wiznote 版本不是在 AppStore 下载的，因此软件文件夹位于 ~/.wiznote/。 ~/.wiznote/wiznote.ini 为知笔记的配置文件，其中包含用户 GID 等信息。 ~/.wiznote/cache/ avatar/ 不重要，略过 editor/ 不重要，略过 …

阅读更多