1、进化算法
自从达尔文的生物进化论被接受，基于自然界中生物优胜劣汰的生存规则发展起来的生物进化的理论研究得到了空前的发展。将生物遗传变异、优胜劣汰的生存机制应用到优化领域，就得到了进化计算(Evolutionary Computation, EC)。以种群形式存在的物种，想要生存下去，就必须通过遗传变异来适应环境，通过自身的不断完善来适应生存环境。遗传的目的在于将父代的优良性能传递给子代，让子代能更好更快地适应环境，而变异的目的则是使子代产生更好地更能适应当前环境的个体。适应能力好的个体被保留下来，而适应能力差的则被慢慢淘汰，这就是“物竞天择，适者生存”的原理。通过不断的自我完善和更新，物种的适应能力就得到了提升。
进化计算源于对生物进化论的研究，其基本原理如下：生物从简单到复杂、从低级到高级的进化过程本身就具有相当的自然性、自适应性、并行性和鲁棒性，其本身就是一个优化的过程；而进化计算正是模拟了这一优化过程，通过类似优胜劣汰遗传变异的操作来执行算法。
进化计算的提出是优化领域的一个里程碑。它比传统的优化算法具有更好的性能，主要表现为智能性和并行性，具体区别如下：
- 进化计算对变量进行编码，使所有被优化变量作为一个整体被操作。
- 适应度函数不受连续可微的限制，扩大了应用领域。
- 优化采用多点搜索，不同于传统算法的单点搜索，全局寻优性能得到提高。
- 采用启发式搜索，具有一定的隐含并行性，适用于非线性优化。
- 在适应度函数的引导下，采用搜索方向明确的随机化基本操作。
同时，进化计算也有一些自身的限制，比如：局部搜索能力较差、多样性有待提高、具体的遗传变异算子应结合不同情况调整等。进化计算的步骤可简要表述为图3.1。
依据不同的分类标准，不同的学者对进化算法做了不同的分类，进化算法的典型分类如下：遗传算法(GeneticAlgorithm，GA)、进化规划(Evolutionary Programming，EP)和进化策略(Evolutionary Strategies，ES)。这三种进化算法都是基于多点并行迭代优化算法提出的。
2、协同进化算法
达尔文通过对自然界生物进化过程的研究，提出了“适者生存，优胜劣汰”的生物进化论。生物进化论指出，自从生命诞生以来，以种群形式存在的物种经历了从简单到复杂，从低级到高级的进化过程。在这个过程中，越能 适应环境并随环境改变的个体和种群，越能保持和生存下去；而不能随环境变化作出改变的物种则慢慢被淘汰，也就是说生物的进化是一个竞争的过程。但是生物的进化关系不仅仅只有竞争，同样存在着协同关系。个体是以种群存在的，而不同的种群构成了生态系统，种群是依赖生态系统存在的，也就是说生态系统中的各个种群不仅仅是竞争关系，同样存在着相互协同、共同发展的关系；任何种群想要独立存在都是不可能的。不同的种群相互竞争、同时又相互合作，使得各种群一代一代地发展下去。种群内存在着协同关系，比如，蜜蜂的分工合作；蚂蚁的相互配合。同时种群间也存在着协同关系，比如，蜜蜂和花粉的合作，鳄鱼和鸟的合作等。
达尔文进化论经过长期的发展，逐渐变得完善。Jazen认为协同进化是指两个种群中个体的特性为适应对方而相互进化； 罗森则认为协同进化有联系的休戚与共的种群之间的联合进化。卡罗尔认为，广义上的协同进化是生物之间的交互变化。不论怎么定义，可以看出，协同进化的主体是种群，种群之间通过发生一定的关系来达到共同进化的目的。
协同进化算法的生物学基础就是生物之间的协同进化发展。各个不同种群通过或合作或竞争来达到一起进化的目的。基于此提出的协同进化算法已经被广泛应用到了各个领域，比如机器学习等，同时可以跟神经网络、心理学等结合使用。
协同进化的研究范围包括：竞争物种之间的协同进化；捕食者和猎物系统的协同进化；寄生物和寄主系统的协同进化；拟态的协同进化；互利作用的协同进化等等。
3、协同进化算法基本原理
协同进化算法和普通进化算法的最大的区别在于协同进化算法利用了种群之间相互协同、共同进化的关系，而不仅仅是只考虑竞争的关系。协同进化还有一些自己本身的特点：
- 协同进化算法的本质是多种群同时进化，跟普通进化算法的单种群进化不同，协同进化算法的优势就在于种群间的相互作用。
- 因为协同进化算法具有很大的搜索空间，所以避免了早熟收敛。
- 协同进化算法具有并行性，但它主要是依赖种群间的协同模式来实现并行性的；而普通的并行进化算法是利用多个处理器来实现的。
根据协同方式的不同，协同进化算法大致可以分为以下几种：
（1）合作型协同进化；
（2）竞争型协同进化；
（3）辅助式共生协同进化；
（4）基于混合策略的协同进化；
（5） 基于种群密度的协同进化；
目前，合作型协同进化和竞争型协同进化应用比较广泛，基于混合策略的协同进化思想跟别的协同进化思想略有不同，它不强调多种群，而是将解的个体和不同的进化策略结合，通过调整不同的策略来达到协同的目的。下面对这几种协同进化算法做一简单介绍：
（1）合作型协同进化
遗传算法进化采用单种群进化，每个个体表示优化问题的一个完整的解，而合作型协同进化算法采用多种群进化，同时每个种群中的个体只维持整体解的一部分；同时个体适应度的计算不再只依赖于本种群，需要联合别的种群中的个体进行适应度评价。合作型协同进化算法将复杂问题分解为多个子问题，每个子问题维持一个种群，各子种群进行独立进化，进化过程中个体适应度的评价需要和其他子种群进行信息交互，而不仅仅依赖于当前子种群；进化完成各子种群的解组合成为问题的最终解。
合作型协同进化算法步骤如下：
①编码：根据实际问题，采用不同的编码方式。
②种群初始化：依据实际问题，分为多个种群，对各种群随机初始化，每个种群维持解
的一部分。
③适应度评价：对于每个种群中的待评价个体，需要和别的种群中的个体联合来进行适
应度的评价：其他联合个体可以选取其余种群中的当前最优个体，也可以选取随机个体。
④进化操作：每个种群执行或相同或不同的进化流程，比如选择交叉变异等遗传流程，生成新的子种群。
⑤判断是否结束：如果满足各种群组成的完整解满足终止条件，或者达到进化代数等，
则结束进化；否则返回③继续。
（2）竞争型协同进化
竞争型协同进化算法是基于自然界中捕食和被捕食的关系提出的。它们之间是相互竞争的关系，被捕食者必须通过各种方式来提升自己的防御能力，才能保证自己生存下去；而捕食者也必须加强自己的攻击力，来维持生存。
在竞争过程中，一个种群中个体的适应度通过和另一个种群中的个体竞争来计算得到的。两个种群根据待评价个体所属的范围，依次作为主种群和从种群。计算出适应度以后，再依赖这个适应度来进行选择交叉编译等遗传操作。随着进化的不断进行，各个种群将进化出不同的特性。
基于上述的描述，竞争型协同进化的步骤一般如下：
- 初始化两个种群：种群1和种群2。
- 种群1中的个体通过与种群2的子集竞争，得到适应度。
- 利用此适应度，对种群1执行遗传操作；直到满足其终止条件。
- 种群2中的个体和种群1的子集竞争，得到适应度。
- 基于上述适应度，对种群2执行遗传操作；直到满足其终止条件。
- 判断是否满足算法的总终止条件，满足就结束算法；否则转回②继续。