Python 在程序并行化方面多少有些声名狼藉。撇开技术上的问题，例如线程的实现和 GIL，我觉得错误的教学指导才是主要问题。常见的经典 Python 多线程、多进程教程多显得偏"重"。而且往往隔靴搔痒，没有深入探讨日常工作中最有用的内

并发与并行的区别。Erlang 之父 Joe Armstrong 用一张5岁小孩都能看懂的图解释了并发与并行的区别。并发是两个队列交替使用一台咖啡机，并行是两个队列同时使用两台咖啡机。如果是串行，一个队列使用一台咖啡机，那么哪怕前面那个人便秘了去厕所呆了半

存储基础设施采用人工智能技术提高了容量和性能方面的要求。对于采用人工智能或机器学习的存储环境来说，存储容量增长到几十TB甚至数百TB的情况并不少见。尽管提供全闪存阵列产品的供应商声称，这么庞大的数据无法全部存储在全闪存阵列上，但由于它们具有的并行性质，大多

大规模的人工智能在容量和性能方面提高了存储基础设施的门槛。对于人工智能或机器学习环境，期望增长到数十个甚至数百TB的容量并不少见。尽管那些只提供全闪存阵列的供应商可能会宣称，这些环境实在太大而无法仅存储在全闪存的一层上。这些环境中的大多数在硬盘的服务几乎与

当今数据驱动的世界，高性能计算成为企业的首选平台。转向云计算，提供按需的HPC具有成本效益与高度灵活性。高性能计算通常是指以比提供更高性能的方式聚合计算能力的实践。它可以高效进行并行操作，在计算过程中，各节点协同工作。基于并行任务的角度对高性能计算进行分类

介绍如何使用Celery运行并行任务，以及我们如何和为什么在Celery的Canvas任务基本数据类型上构建一个API。Zymergen的技术目标之一是使生物学家能够以高通量和高度自动化的方式探索微生物的基因编辑。Zymergen的计算生物学团队负责构建软

Hadoop：大数据集群，只能运行在Linux平台RDBMS：表字段、数据类型、约束结构化数据关系数据库在数据中占据重要的地位但不是所有的数据都可以结构化结构化数据：structured data非结构化数据：unstructured data半结构化数据

Workers : 在一个节点上可以运行一个或多个独立的JVM 进程。但一般默认每个executor只执行一个task。一个worker可以包含一个或多个executor, 每个component 至少对应于一个executor, 所以可以说executo

现在把早上看到的云计算和分布式计算，网格计算，并行计算的概念对比分析一下。其实是要了解云计算，但是这几个名字叫得容易把问题搞混。并行计算或称平行计算是相对于串行计算来说的；所谓并行计算可分为时间上的并行和空间上的并行。从程序和算法设计人员的 角度来看，并行

> 线程：任务调度的基本单元2.队列种类：串行队列、并发队列、主队列、全局队列。一个程序猿在做需求期间可抽空学习或接私活。一个工厂可以接10个订单同时去生产。单核CPU可同时处理多个应用程序。单核cpu非并发执行任务：单核CPU一次处理一个完整任务单

PHP下的异步尝试一：初识生成器PHP下的异步尝试二：初识协程PHP下的异步尝试三：协程的PHP版thunkify自动执行器PHP下的异步尝试四：PHP版的Promise[PHP下的异步尝试五：PHP版的Promise的继续完善]多任务 在讲协程之前，先谈

Java 企业版架构是基于组件的，拥有可以高效管理应用程序事务和有状态性、多线程和资源池的特性。即使是复杂的需求，JEE 应用程序也很容易实现，因为业务逻辑是以可重用的组件组织的，并且服务器为各种组件提供了底层服务 。本文将介绍给 JEE 容器和应用程序扩

企业级和移动软件公司Sybase，SAP旗下的公司近日宣布向测试用户推出Sybase IQ 15.3。Sybase IQ 15.3引入了基于“大规模并行处理”架构的PlexQ分布式查询平台，通过将任务分散到网格配置中的多台计算机，加速了高度复杂的查询。与无

数据级并行,数据级并行架构，可以并行地在大量数据上施加同一操作。对于共享内存的多处理器系统，每个处理器都能访问整个内存，处理器之间的通信主要通过内存进行。用并发的目的，不仅仅是为了让程序并行运行从而发挥多核的优势。若正确使用并发，程序还将获得以下优点:及时

本文讨论了Kafka主题的体系架构，讨论了如何将分区用于故障转移和并行处理。将主题视为类别，流名称或提要。Kafka使用分区在多个服务器上扩展主题以进行生产者写入。Kafka一个分区中维护记录顺序。Kafka使用分区作为结构化提交日志连续附加到分区。如果消

我们先来看看 Hadoop 自带的示例程序 WordCount，这个程序用于统计一批文本文件中单词出现的频率，完整的代码可在下载的 Hadoop 安装包中得到。代码中 LongWritable, IntWritable, Text 均是 Hadoop 中实

Hadoop 是一个开源的可运行于大规模集群上的分布式并行编程框架，由于分布式存储对于分布式编程来说是必不可少的，这个框架中还包含了一个分布式文件系统 HDFS。从 Nutch 0.8.0 版本之后，Doug Cutting 把 Nutch 中的分布式文件

随着我们向众核处理器时代的迈进，对并行方法的有效使用已成为提升应用性能的关键。为了与新一代编码人员分享宝贵的专业知识，来自英特尔并行编程领域的三位资深工程师将向大家传授他们的亲身经验。传统编程常陷于其顺序序列中，而对于并行编程人员而言，这一点必须改变。编码

本书第六章的读书笔记，也是我这个系列的最后一篇读书笔记。后面7、8、9章分别讲的“测试、调试与重构”、“设计和架构的原则”以及“使用Lambda表达式编写并发程序”，因为笔记不好整理，就不写了，感兴趣的同学自己买书来看吧。如果已经有了一个Stream对象，

Go 语言相比Java等一个很大的优势就是可以方便地编写并发程序。Go 语言内置了 goroutine 机制，使用goroutine可以快速地开发并发程序， 更好的利用多核处理器资源。这篇文章学习goroutine 的应用及其调度实现。使用 go 关键字用