豪翔天下

Change My World by Program

0%

迁移MySQL的数据库目录,其实并不难呀

  1. 查看MySQL数据存放目录
    > show variables like '\%dir\%';
datadir的值就是mysql当前的存放目录,默认是/usr/local/mysql/data
  1. 进行迁移
    service mysqld stop
cp -r /usr/local/mysql/data/*  /path/to/mypath
  1. 修改配置
    chown mysql:mysql -R /path/to/mypath




# 修改/etc/my.cnf文件和/etc/init.d/mysqld文件,




将datadir的值更改为新目录
  1. 重启服务
    service mysqld start



创建型
1\. Factory Method(工厂方法)
2\. Abstract Factory(抽象工厂)
3\. Builder(建造者)
4\. Prototype(原型)
5\. Singleton(单例)

结构型
6\. Adapter Class/Object(适配器)
7\. Bridge(桥接)
8\. Composite(组合)
9\. Decorator(装饰)
10\. Facade(外观)
11\. Flyweight(享元)
12\. Proxy(代理)

行为型
13\. Interpreter(解释器)
14\. Template Method(模板方法)
15\. Chain of Responsibility(责任链)
16\. Command(命令)
17\. Iterator(迭代器)
18\. Mediator(中介者)
19\. Memento(备忘录)
20\. Observer(观察者)
21\. State(状态)
22\. Strategy(策略)
23\. Visitor(访问者)

创建型

  1. Factory Method(工厂方法)

意图:
定义一个用于创建对象的接口,让子类决定实例化哪一个类。Factory Method使一个类的实例化延迟到其子类。
适用性:
当一个类不知道它所必须创建的对象的类的时候。
当一个类希望由它的子类来指定它所创建的对象的时候。
当类将创建对象的职责委托给多个帮助子类中的某一个,并且你希望将哪一个帮助子类是代理者这一信息局部化的时候。

  1. Abstract Factory(抽象工厂)

意图:
提供一个创建一系列相关或相互依赖对象的接口,而无需指定它们具体的类。

适用性:
一个系统要独立于它的产品的创建、组合和表示时。
一个系统要由多个产品系列中的一个来配置时。
当你要强调一系列相关的产品对象的设计以便进行联合使用时。
当你提供一个产品类库,而只想显示它们的接口而不是实现时。

  1. Builder(建造者)

意图:
将一个复杂对象的构建与它的表示分离,使得同样的构建过程可以创建不同的表示。

适用性:
当创建复杂对象的算法应该独立于该对象的组成部分以及它们的装配方式时。
当构造过程必须允许被构造的对象有不同的表示时。

  1. Prototype(原型)

意图:
用原型实例指定创建对象的种类,并且通过拷贝这些原型创建新的对象。

适用性:
当要实例化的类是在运行时刻指定时,例如,通过动态装载;或者
为了避免创建一个与产品类层次平行的工厂类层次时;或者
当一个类的实例只能有几个不同状态组合中的一种时。建立相应数目的原型并克隆它们可能比每次用合适的状态手工实例化该类更方便一些。

  1. Singleton(单例)
    意图:
    保证一个类仅有一个实例,并提供一个访问它的全局访问点。

适用性:
当类只能有一个实例而且客户可以从一个众所周知的访问点访问它时。
当这个唯一实例应该是通过子类化可扩展的,并且客户应该无需更改代码就能使用一个扩展的实例时。

  1. Adapter Class/Object(适配器)

意图:
将一个类的接口转换成客户希望的另外一个接口。Adapter模式使得原本由于接口不兼容而不能一起工作的那些类可以一起工作。

适用性:
你想使用一个已经存在的类,而它的接口不符合你的需求。
你想创建一个可以复用的类,该类可以与其他不相关的类或不可预见的类(即那些接口可能不一定兼容的类)协同工作。
(仅适用于对象Adapter)你想使用一些已经存在的子类,但是不可能对每一个都进行子类化以匹配它们的接口。对象适配器可以适配它的父类接口。

  1. Bridge(桥接)

意图:
将抽象部分与它的实现部分分离,使它们都可以独立地变化。

适用性:
你不希望在抽象和它的实现部分之间有一个固定的绑定关系。例如这种情况可能是因为,在程序运行时刻实现部分应可以被选择或者切换。
类的抽象以及它的实现都应该可以通过生成子类的方法加以扩充。这时Bridge模式使你可以对不同的抽象接口和实现部分进行组合,并分别对它们进行扩充。
对一个抽象的实现部分的修改应对客户不产生影响,即客户的代码不必重新编译。
(C++)你想对客户完全隐藏抽象的实现部分。在C++中,类的表示在类接口中是可见的。
有许多类要生成。这样一种类层次结构说明你必须将一个对象分解成两个部分。Rumbaugh称这种类层次结构为“嵌套的普化”(nested
generalizations )。
你想在多个对象间共享实现(可能使用引用计数),但同时要求客户并不知道这一点。一个简单的例子便是Coplien的String类[ Cop92
],在这个类中多个对象可以共享同一个字符串表示(StringRep)。

  1. Composite(组合)

意图:
将对象组合成树形结构以表示“部分-整体”的层次结构。C o m p o s i t e 使得用户对单个对象和组合对象的使用具有一致性。

适用性:
你想表示对象的部分-整体层次结构。
你希望用户忽略组合对象与单个对象的不同,用户将统一地使用组合结构中的所有对象。

  1. Decorator(装饰)

意图:
动态地给一个对象添加一些额外的职责。就增加功能来说,Decorator模式相比生成子类更为灵活。

适用性:
在不影响其他对象的情况下,以动态、透明的方式给单个对象添加职责。
处理那些可以撤消的职责。
当不能采用生成子类的方法进行扩充时。一种情况是,可能有大量独立的扩展,为支持每一种组合将产生大量的子类,使得子类数目呈爆炸性增长。另一种情况可能是因为类定义
被隐藏,或类定义不能用于生成子类。

  1. Facade(外观)

意图:
为子系统中的一组接口提供一个一致的界面,Facade模式定义了一个高层接口,这个接口使得这一子系统更加容易使用。

适用性:
当你要为一个复杂子系统提供一个简单接口时。子系统往往因为不断演化而变得越来越复杂。大多数模式使用时都会产生更多更小的类。这使得子系统更具可重用性,也更容易对
子系统进行定制,但这也给那些不需要定制子系统的用户带来一些使用上的困难。Facade可以提供一个简单的缺省视图,这一视图对大多数用户来说已经足够,而那些需要
更多的可定制性的用户可以越过facade层。
客户程序与抽象类的实现部分之间存在着很大的依赖性。引入facade将这个子系统与客户以及其他的子系统分离,可以提高子系统的独立性和可移植性。
当你需要构建一个层次结构的子系统时,使用facade模式定义子系统中每层的入口点。如果子系统之间是相互依赖的,你可以让它们仅通过facade进行通讯,从而简
化了它们之间的依赖关系。

  1. Flyweight(享元)

意图:
运用共享技术有效地支持大量细粒度的对象。

适用性:
一个应用程序使用了大量的对象。
完全由于使用大量的对象,造成很大的存储开销。
对象的大多数状态都可变为外部状态。
如果删除对象的外部状态,那么可以用相对较少的共享对象取代很多组对象。
应用程序不依赖于对象标识。由于Flyweight对象可以被共享,对于概念上明显有别的对象,标识测试将返回真值。

  1. Proxy(代理)

意图:
为其他对象提供一种代理以控制对这个对象的访问。

适用性:
在需要用比较通用和复杂的对象指针代替简单的指针的时,使用Proxy模式。下面是一些可以使用Proxy模式常见情况:

  1. 远程代理(Remote Proxy)为一个对象在不同的地址空间提供局部代表。
    NEXTSTEP[Add94]使用NXProxy类实现了这一目的。Coplien[Cop92]称这种代理为“大使”(Ambassador)。
    2 )虚代理(Virtual Proxy)根据需要创建开销很大的对象。在动机一节描述的ImageProxy就是这样一种代理的例子。
  2. 保护代理(Protection Proxy)控制对原始对象的访问。保护代理用于对象应该有不同的访问权限的时候。例如,在Choices操作系统[
    CIRM93]中KemelProxies为操作系统对象提供了访问保护。
    4 )智能指引(Smart Reference)取代了简单的指针,它在访问对象时执行一些附加操作。它的典型用途包括:

对指向实际对象的引用计数,这样当该对象没有引用时,可以自动释放它(也称为SmartPointers[Ede92 ] )。
当第一次引用一个持久对象时,将它装入内存。
在访问一个实际对象前,检查是否已经锁定了它,以确保其他对象不能改变它。

  1. Interpreter(解释器)

意图:
给定一个语言,定义它的文法的一种表示,并定义一个解释器,这个解释器使用该表示来解释语言中的句子。

适用性:
当有一个语言需要解释执行,并且你可将该语言中的句子表示为一个抽象语法树时,可使用解释器模式。而当存在以下情况时该模式效果最好:

该文法简单对于复杂的文法,文法的类层次变得庞大而无法管理。此时语法分析程序生成器这样的工具是更好的选择。它们无需构建抽象语法树即可解释表达式,这样可以节省空
间而且还可能节省时间。

效率不是一个关键问题最高效的解释器通常不是通过直接解释语法分析树实现的,而是首先将它们转换成另一种形式。例如,正则表达式通常被转换成状态机。但即使在这种情况
下,转换器仍可用解释器模式实现,该模式仍是有用的。

  1. Template Method(模板方法)

意图:
定义一个操作中的算法的骨架,而将一些步骤延迟到子类中。TemplateMethod使得子类可以不改变一个算法的结构即可重定义该算法的某些特定步骤。

适用性:
一次性实现一个算法的不变的部分,并将可变的行为留给子类来实现。
各子类中公共的行为应被提取出来并集中到一个公共父类中以避免代码重复。这是Opdyke和Johnson所描述过的“重分解以一般化”的一个很好的例子[ OJ93
]。首先识别现有代码中的不同之处,并且将不同之处分离为新的操作。最后,用一个调用这些新的操作的模板方法来替换这些不同的代码。
控制子类扩展。模板方法只在特定点调用“hook ”操作(参见效果一节),这样就只允许在这些点进行扩展。

  1. Chain of Responsibility(责任链)

意图:
使多个对象都有机会处理请求,从而避免请求的发送者和接收者之间的耦合关系。将这些对象连成一条链,并沿着这条链传递该请求,直到有一个对象处理它为止。

适用性:
有多个的对象可以处理一个请求,哪个对象处理该请求运行时刻自动确定。
你想在不明确指定接收者的情况下,向多个对象中的一个提交一个请求。
可处理一个请求的对象集合应被动态指定。

  1. Command(命令)

意图:
将一个请求封装为一个对象,从而使你可用不同的请求对客户进行参数化;对请求排队或记录请求日志,以及支持可撤消的操作。

适用性:
抽象出待执行的动作以参数化某对象,你可用过程语言中的回调(call
back)函数表达这种参数化机制。所谓回调函数是指函数先在某处注册,而它将在稍后某个需要的时候被调用。Command模式是回调机制的一个面向对象的替代品。
在不同的时刻指定、排列和执行请求。一个Command对象可以有一个与初始请求无关的生存期。如果一个请求的接收者可用一种与地址空间无关的方式表达,那么就可将负
责该请求的命令对象传送给另一个不同的进程并在那儿实现该请求。
支持取消操作。Command的Excute操作可在实施操作前将状态存储起来,在取消操作时这个状态用来消除该操作的影响。Command接口必须添加一个Unex
ecute操作,该操作取消上一次Execute调用的效果。执行的命令被存储在一个历史列表中。可通过向后和向前遍历这一列表并分别调用Unexecute和Exe
cute来实现重数不限的“取消”和“重做”。
支持修改日志,这样当系统崩溃时,这些修改可以被重做一遍。在Command接口中添加装载操作和存储操作,可以用来保持变动的一个一致的修改日志。从崩溃中恢复的过
程包括从磁盘中重新读入记录下来的命令并用Execute操作重新执行它们。
用构建在原语操作上的高层操作构造一个系统。这样一种结构在支持事务( transaction)的信息系统中很常见。一个事务封装了对数据的一组变动。Comman
d模式提供了对事务进行建模的方法。Command有一个公共的接口,使得你可以用同一种方式调用所有的事务。同时使用该模式也易于添加新事务以扩展系统。

  1. Iterator(迭代器)

意图:
提供一种方法顺序访问一个聚合对象中各个元素,而又不需暴露该对象的内部表示。

适用性:
访问一个聚合对象的内容而无需暴露它的内部表示。
支持对聚合对象的多种遍历。
为遍历不同的聚合结构提供一个统一的接口(即,支持多态迭代)。

  1. Mediator(中介者)

意图:
用一个中介对象来封装一系列的对象交互。中介者使各对象不需要显式地相互引用,从而使其耦合松散,而且可以独立地改变它们之间的交互。

适用性:
一组对象以定义良好但是复杂的方式进行通信。产生的相互依赖关系结构混乱且难以理解。
一个对象引用其他很多对象并且直接与这些对象通信,导致难以复用该对象。
想定制一个分布在多个类中的行为,而又不想生成太多的子类。

  1. Memento(备忘录)

意图:
在不破坏封装性的前提下,捕获一个对象的内部状态,并在该对象之外保存这个状态。这样以后就可将该对象恢复到原先保存的状态。

适用性:
必须保存一个对象在某一个时刻的(部分)状态,这样以后需要时它才能恢复到先前的状态。
如果一个用接口来让其它对象直接得到这些状态,将会暴露对象的实现细节并破坏对象的封装性。

  1. Observer(观察者)

意图:
定义对象间的一种一对多的依赖关系,当一个对象的状态发生改变时,所有依赖于它的对象都得到通知并被自动更新。

适用性:
当一个抽象模型有两个方面,其中一个方面依赖于另一方面。将这二者封装在独立的对象中以使它们可以各自独立地改变和复用。
当对一个对象的改变需要同时改变其它对象,而不知道具体有多少对象有待改变。
当一个对象必须通知其它对象,而它又不能假定其它对象是谁。换言之,你不希望这些对象是紧密耦合的。

  1. State(状态)

意图:
允许一个对象在其内部状态改变时改变它的行为。对象看起来似乎修改了它的类。

适用性:
一个对象的行为取决于它的状态,并且它必须在运行时刻根据状态改变它的行为。
一个操作中含有庞大的多分支的条件语句,且这些分支依赖于该对象的状态。这个状态通常用一个或多个枚举常量表示。通常,有多个操作包含这一相同的条件结构。State
模式将每一个条件分支放入一个独立的类中。这使得你可以根据对象自身的情况将对象的状态作为一个对象,这一对象可以不依赖于其他对象而独立变化。

  1. Strategy(策略)

意图:
定义一系列的算法,把它们一个个封装起来,并且使它们可相互替换。本模式使得算法可独立于使用它的客户而变化。

适用性:
许多相关的类仅仅是行为有异。“策略”提供了一种用多个行为中的一个行为来配置一个类的方法。
需要使用一个算法的不同变体。例如,你可能会定义一些反映不同的空间/时间权衡的算法。当这些变体实现为一个算法的类层次时[H087] ,可以使用策略模式。
算法使用客户不应该知道的数据。可使用策略模式以避免暴露复杂的、与算法相关的数据结构。
一个类定义了多种行为,并且这些行为在这个类的操作中以多个条件语句的形式出现。将相关的条件分支移入它们各自的Strategy类中以代替这些条件语句。

  1. Visitor(访问者)

意图:
定义一个操作中的算法的骨架,而将一些步骤延迟到子类中。TemplateMethod使得子类可以不改变一个算法的结构即可重定义该算法的某些特定步骤。

适用性:
一次性实现一个算法的不变的部分,并将可变的行为留给子类来实现。
各子类中公共的行为应被提取出来并集中到一个公共父类中以避免代码重复。这是Opdyke和Johnson所描述过的“重分解以一般化”的一个很好的例子[OJ93]
。首先识别现有代码中的不同之处,并且将不同之处分离为新的操作。最后,用一个调用这些新的操作的模板方法来替换这些不同的代码。
控制子类扩展。模板方法只在特定点调用“hook ”操作(参见效果一节),这样就只允许在这些点进行扩展。

参考地址:

  • 数据库分析调优步骤
    1.将sql语句记录下来
2.看查询更新的比例(如果太多,可以抽样查看)
3.看最多查询的数据表有哪些,最多更新的数据表有哪些
4.看最多查询的数据表最多查询的SQL是什么样子的,最多更新的数据表最多执行的SQL语句是怎样的,算出各自每秒的请求频率
5.关键分析,最多查询的SQL,基于同一主键查询的比例多不多(看能不能缓存化)
6.应对大翻页的问题,其实是不需要精确的返回结果数的,像淘宝这些都不会超过100页的
  • 数据库配置:
    innodb_read_io_threads/innodb_write_io_threads:这两个参数指Innodb数据库读写的IO进程数,默认为4
  • 慢查询日志:
    # 开启慢查询
> show variables like 'slow_query_log'   # 查看是否开起慢查询
> set global slow_query_log_file = ''
> set global log_queries_not_using_indexes = on
> set global long_query_time = 1
  • 分库分表
    表的垂直拆分:把原来一个有很多列的表拆分成多个表,解决了表宽的问题,通常,把不常用的字段单独存放到一个表中,大字段单独存放,一起使用的字段一起存放

  • 语句分析:使用explan查询SQL的执行计划

  • 其它工具

    Mysqldumpslow:慢查询日志的分析工具

架构

  • 一般把读取的请求放在缓存(Redis),而更新请求放在数据库

触发器

一定要慎用目前主流DBMS都支持的触发器功能,一方面由于触发器的性能开销较大,另一方面,触发器的多级触发不好控制,容易发生错误。

视图

为了在数据库和应用程序代码之间提供另一层抽象,可以为应用程序建立专门的视图而不必非要应用程序直接访问数据表。这样做还等于在处理数据库变更时给你提供了更多的自由。

存储过程

不要写,尽量将业务逻辑放在应用服务中。

分库分表

水平切分

水平切分的切分标准可以按照数据范围分,比如1-100万一个表,100万-200万又是一个表;也可以按照时间顺序来切分,比如一年的数据归到一张表中等;也可以按照地域范围来分,比如按照地市来分,每个或多个地市一个库等;也可以按照某种计算公式来切分,比较简单的比如取模的方式,如根据用户id进行水平切分,可通过对ID被2取模,然后分别存放在不同的表中,这样关联时也非常方便。公司著名的凤巢拆库就是采用取模方式进行的拆分。

字段属性

  • datetime和timestamp能保存同样类型的数据:日期和时间,精度为秒。然而,timestamp使用的空间只有datetime一半,还能保存时区,拥有特殊的自动更新能力。
  • 使用整数来保存IP地址。
  • 有符号(signed)和无符号(unsigned)类型占用的存储空间是一样的,性能也一样。因此可以根据实际情况采用合适的类型。
  • MySQL还可以对整数类型定义宽度,比如int(11)。这对于大多数应用程序都是没有意义的:它不会限制值的范围,只规定了MySQL交互工具(如命令行客户端)用来显示字符的个数。对于存储和计算,int(1)和int(20)是一样的。
  • char是固定长度的。MySQL总是为特定数量的字符分配足够的空间。当保存char值的时候,MySQL会去掉任何末尾的空格。

关于索引

  • 数据查询只能用到一个索引,不过这个只是说的是单表查询,联表查询实际上每个表都可以用到其独立的索引

  • 有些时候索引并不会用到,比如
    where key like ‘keyword%‘:这里可以用到key索引
    where key like ‘%keyword%‘:这里用不到key的索引

    • 适当建立复合索引:
      前几天看了“caoz的梦呓”的文章《如何应对并发(1) - 关于数据索引》,理解了建立复合索引所需要考虑的一些东西,顺序不同效率也有很大的不同。
      ‘SELECT * FROM user where area = ‘$area’ order by lastlogin desc limit 30;’
      如果只把area当做索引,那么数据库会把符合这个area的所有结果都拿出来,然后按照lastlogin来进行排序;
      如果只把lastlogin做为索引,那么数据库会从最后一条开始往前遍历,每条都会对比area,直到数出30条
      如果lastlogin+area建立符合,和单独lastlogin索引是一样的
      如果area+lastlogin,把两个字段拼接然后排好序后,看这条SQL在这个数列中查询的提现,所命中的完全是连续的30条,仅仅遍历30条索引即可
      我最先以为简历复合索引也会是先查找出area,再拿出来排序哟,但其实索引都是预先排好了的,这里就相当于先按照area排序,area相同的再按照lastlog
      in进行排序,这样,只要找到area,然后取前面30条就可以了,就像电话簿一样,先找姓氏,姓氏相同的也会按照名排好序的。

在Docker里面,镜像和容器是两个概念,镜像类似操作系统的ISO,而容器则是以该ISO为基础生成而来的。

系统相关

安装方法

boot2docker默认用户名是docker,密码是tcuser

现在docker for mac不再依赖virtualbox等虚拟化软件,但是其采用了虚拟化技术,仍然是有虚拟机的,可以通过这条命令进入虚拟机查看``screen ~/Library/Containers/com.docker.docker/Data/com.docker.driver.amd64-linux/tty 

镜像和容器

1
2
3
4
5
6
7
8
9
10
11
12
13
14
docker pull ubuntu:14.04.1 # 拉取官方镜像
docker pull registry.hub.docker.com/ubuntu:14.04 # 拉取特定网站的镜像
docker pull index.alauda.cn/library/centos:centos6.6 # 灵雀云的镜像,镜像中心https://hub.alauda.cn/
docker images # 列出所有的镜像

docker ps # 列出正在运行的容器
docker ps -a -s # 列出所有容器,-s可以列出大小信息
docker ps -q # 只列出容器的ID

docker rm # 删除容器
docker rmi # 删除镜像
docker builder prune # 清理创建失败的镜像的layer

docker tag id name:tag # 给镜像更改名称,重命名镜像Tag

创建容器

阅读全文 »

想在家里做NAS、DNS等私有云服务,但是无奈家里淘汰下来的电脑已无力承担如此重任。没办法了,就只能试试树莓派。不试不知道,一试吓一跳,完全就是一手掌大小的电脑,听说desktop版本还能使用word等软件,虽然只有1GB内存,但是200多块(淘宝店)就能买到这个东西,那是非常值了。当然,作为一个技术爱好者,别人是完全无法体会这种快乐的。要是其功耗再低点或者能采用其它的供电方式(比如无线供电、电池供电),感觉完全能颠覆智能市场。

系统安装

制作启动镜像

镜像下载:https://www.raspberrypi.org/downloads/,我下载的是RASPBIAN分支,因为其是官方提供且基于Debian,和Ubuntu操作一样.官方镜像raspbian的各个版本地址以及release_notes参见: downloads,更新系统以及重装系统前,一定要先看看release_notes,比如从2016年11月那一版本开始,默认的ssh就没有开启了。。。对于没有显示器的我来说,只能重装。
Mac环境

1
2
3
4
5
6
df  # 查看当前已经挂载的卷,一般sd卡在最后,Filesystem是/dev/disk2s1,Mounted on /Volumes/No Name,可以在Finder里面将sd卡的名字改为Pi(我那个默认是No Name)
diskutil unmount /dev/disk2s1 #将sd卡卸载
>> Volume Pi on disk2s1 unmounted
diskutil list # 查看是否有sd卡设备
dd bs=4m if=pi.img of=/dev/rdisk2 #将镜像文件pi.img写入sd卡,需要注意这条命令使用的是rdisk2,这是原始字符设备
diskutil unmountDisk /dev/disk2 # 再卸载sd卡,此时可以拔出来插入树莓派的sd卡槽了

启动操作系统

收到货的那天,发现其有一个DC接口,还以为是通过DC接口供电,出门走了一圈都没发现有卖这货的,于是回家,自习已看,发现可以用Android的电源为期供电的,那接口名字忘了。和网上建议的一样,我采用的是5V 2A的供电设备(其实是直接插到小米插线板上的)

然后,我又发现,我家里没多的网线,那怎么办,我装的不是desktop版本,没有网线就不能SSH进去。不过还好,它支持HDMI,于是我把它功过HDMI连接上了家里40英寸的电视,(HDMI高清显示,真他妈爽)就像这样,还通过USB插了外置键盘。

默认是通电自动启动的,所以插上电就会进入系统了,默认用户名pi,默认密码是raspberry。

配置

初始化配置

通过sudo raspi-config来运行设置工具:

  • 第一项将sd卡的剩余空间全部用来使用

  • 然后修改Internationalisaton Options里面的时区及默认字符编码zh_CN GB2312/zh_CN.UTF-8 UTF-8

  • 接着修改源,这个国度没办法的事

    1
    2
    3
    4
    5
    6
    # sudo nano /etc/apt/sources.list.d/raspi.list,修改如下
    deb http://mirrors.ustc.edu.cn/archive.raspberrypi.org/debian/ jessie main

    # sudo nano /etc/apt/sources.list,修改为如下:
    deb http://mirrors.ustc.edu.cn/raspbian/raspbian/ jessie main non-free contrib
    deb-src http://mirrors.ustc.edu.cn/raspbian/raspbian/ jessie main non-free contrib
  • 最后,安装必要的软件
    1
    2
    3
    sudo apt-get update && sudo apt-get upgrade -y
    sudo apt-get install vim tree ttf-wqy-microhei git
    sudo rpi-update # 如果想要升级固件,可以这样升级,如果提示命令找不到可以先install rpi-update

WIFI设置

1
2
3
4
5
6
7
8
9
10
11
# 当然,我不可能一直用电视作显示器吧,这时候我买的无线设备就有用场了,直接通过USB插到树莓派上,然后设置wifi  
$ ifconfig # 可以看到wlan0,表示已经识别无线网卡
$ sudo vim /etc/network/interfaces添加或修改关于wlan0的配置
auto wlan0
allow-hotplug wlan0
iface wlan0 inet dhcp
wpa-ssid WIFI名称
wpa-psk WIFI密码

# 然后通过如下命令重启网卡
sudo ifdown wlan0 && sudo ifup wlan0

ownCloud私有云搭建(现在不大推荐,内存占用太高)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
作为私有云方案,我选择的ownCloud,而不是Samba,因为Samba功能仅仅算是ftp的共享,而不是一个私有云方案,当然ownCloud也有为人诟病的地方,比如内存占用高(树莓派2上占用100多MB),另一个是因为它本身是基于Apache的,树莓派内存总共就1G,我可不想既有Apache又有Nginx,所以直接用的是Nginx+php5-fpm的方案,不过这样子,配置过程就有点麻烦了。  
# 首先,安装基本服务
sudo apt-get install php5-common php5-cli php5-fpm
sudo apt-get install nginx
sudo apt-get install mysql-server mysql-client

# 配置MySQL,ownCloud需要提前创建用户、数据库和分配权限
> create database 库名 character set utf8 collate utf8_general_ci;
> grant ALL on 库名.* 用户名@localhost identified by "密码" # 注意,ownCloud是不允许root用户的,因为权限太多

# 配置文件权限
chmod 775 -R owncloud/ # 不要分配777,分配了也不能用
chown -R www-data:www-data owncloud/

# 配置php5-fpm
$ printenv PATH 获取系统环境变量
vim /etc/php5/fpm/pool.d/www.conf,将下面几行前面的注释去掉
;env[HOSTNAME] = $HOSTNAME
;env[PATH] = /usr/local/bin:/usr/bin:/bin # 这里还要修改为刚才获取到的环境变量
;env[TMP] = /tmp
;env[TMPDIR] = /tmp
;env[TEMP] = /tmp

# 配置nginx,按照官网的教程配置Nginx conf:https://doc.owncloud.org/server/7.0/admin_manual/installation/nginx_configuration.html

对于官网的配置,我做了如下几项修改:
location ~ .php(?:$|/)$这里面修改为:
location ~ ^(.+?.php)(/.*)?$ \{
  fastcgi_split_path_info ^(.+.php)(/.+)$;
  include fastcgi_params;
  fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;
  fastcgi_param PATH_INFO $fastcgi_path_info;
  fastcgi_pass unix:/var/run/php5-fpm.sock;
  fastcgi_index index.php;
  include fastcgi_params;
  fastcgi_param PHP_VALUE "post_max_size=10G \n upload_max_filesize=10G"; # 上传默认居然为513MB,这里可以修改大,不然在owncloud无法调整到更大
}
检查配置文件是否正确用# nginx -t nginx.conf

TeamViewer For Raspberry安装

deb包下载地址,然后执行如下命令进行安装和配置:

1
2
3
4
sudo dpkg -i ....deb	# 安装该deb包
sudo apt-get -f install # 安装依赖
sudo dpkg -i ....deb # 重新安装,如果出现错误,可以参见TroubleShooting
sudo setup # 进行配置,输入teamveiwer的用户名和密码即可在外部网络进行访问了,会自动出现在你的Teamviewr联系人中

TroubleShooting

  • apt出现错误xdg-desktop-menu: No writable system menu directory found.
    执行命令sudo mkdir /usr/share/desktop-directories/

  • nodejs各个版本当前的维护情况(10.x已经不再维护,12.x在2022年4月30日停止维护,14.x在2023年4月30日停止维护,16.x在2024年4月30日停止维护)。个人觉得当前应该使用的版本是MAINTENANCE LTS START的,ACTIVE LTS START应该没有MAINTENANCE LTS START的稳定,所以现在直到2022-10-18都应使用14.x

安装

需要注意的是,关于npm的所有命令,最好都不要用root用户执行,否则会出现各种不可预料甚至连官方文档都说不清的问题

稳定版:

1
2
3
4
5
6
7
8
9
10
11
12
13
# centos用下面命令安装指定版本nodejs
sudo curl --silent --location https://rpm.nodesource.com/setup_18.x | sudo bash -
sudo yum install -y nodejs

# ubuntu用下面命令安装指定版本nodejs
sudo curl -sL https://deb.nodesource.com/setup_16.x | sudo -E bash -
# docker里面没有sudo就直接
curl -sL https://deb.nodesource.com/setup_18.x | sudo bash -
apt-get install -y nodejs

# 添加淘宝镜像,既然用的阿里云,那淘宝的镜像也就不介意了
npm install -g nrm && nrm use cnpm # 这样可以防止npm和cnpm混用导致的各种not found的错误
npm install -g cnpm --registry=https://registry.npm.taobao.org

安装package.json 直接npm install后面不加package.json的名字

package.json文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
{
"scripts": { // 指定了运行脚本命令的npm命令行缩写
"start": "node index.js",
"test": "",
"deploy": "next build & next export & copyfiles _redirects out/" // 可以使用copyfiles工具来复制文件,npm install copyfiles --save-dev
},
"bin": { // 用于指定各个内部命令对应的可执行文件的位置
"someTool": "./bin/someTool.js" // 当然这也可以直接在scripts里面写成./node_modules/bin/someTool.js
},
"engines": { // 指定了运行环境
"node": ">=0.10.3 <0.12",
"npm": "~1.0.20"
},
"dependencies": { // 指定项目运行所依赖的模块
"aaa": "~1.2.2", // 波浪号,这里表示>1.2.2(1.2.x)且<1.3.x
"bbb": "^1.2.2", // 插入号,这里表示>1.2.2(1.x.x)且<2.x.x
"ccc": "latest", // 安装最新版本
},
"devDependencies": { // 指定项目开发所依赖的模块

}
}

常用语法

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
// 声明一个类
class Rectangle {
height = 0; // 公有字段声明
static displayName = "Point"; // 静态变量

// 类的构造函数
constructor(height, width) {
this.height = height;
this.width = width;
}

// Getter方法
get area() {
return this.calcArea()
}

// Method方法
calcArea() {
return this.height * this.width;
}

// 静态方法
static distance(a, b) {
const dx = a.x - b.x;
const dy = a.y - b.y;
return Math.hypot(dx, dy);
}
}

nodejs原生http请求

  • 无需安装任何package
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
const https = require('https')

const req = https.request('https://haofly.net', res => {
res.on('data', (chunk) => (body += chunk.toString()));
res.on('error', () => reject(res))
res.on('end', () => {
if (res.statusCode >= 200 && res.statusCode <= 299) {
resolve({statusCode: res.statusCode, headers: res.headers, body: body});
} else {
reject('Request failed. status: ' + res.statusCode + ', body: ' + body);
}
})
})
req.on('error', () => reject)
req.write(body, 'binary')
req.end()

命令行

1
process.argv	// 从命令行接收参数

ECSMAScript/es6概念

  • exportimportes6之后才支持的

  • es的重要版本

    1
    2
    3
    4
    5
    6
    7
    ES6 ES2015 # 2015年6月发布, 之后每年6月出一个新版本
    ES7 ES2016
    ES8 ES2017
    ES9 ES2018
    ES10 ES2019
    ES11 ES2020
    ES12 ES2021
  • 一些比较使用的新的语法

    1
    2
    3
    // 解构赋值
    const [a, b, c] = [value1, value2, value3]
    const {name, age} = obj

常用命令

  • 报名前面带”@”符号的,表示是属于某个组织,又组织上传到镜像源里面的

Nvm

  • 可以通过node -v > .nvmrc将当前node版本限制在文件中,之后在当前目录只需要执行nvm use即可自动选择对应的版本

可以通过nvm来同时使用多个node版本,mac上可以直接brew install nvm进行安装(其他平台直接官网安装方法),安装完成后根据提示添加shrc文件,常用命令如下:

1
2
3
4
5
nvm ls-remote	# 查看所有可用的node版本
nvm install xxx # 下载需要的版本
nvm use xxx # 使用指定的版本
nvm alias default xxx # 设置默认的node版本
nvm uninstall v7.10.1

npm

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
npm init		# 将当前目录设置为一个npm库,自动生成package.json文件,如果没有package.json文件可以用这个方法生成,它也会自动把node_module下的已安装包加进来的
npm install 包名 --save # 安装包,并且更新到package.json中去
npm install 包名 --save-dev # 安装包,并且更新到package.json的开发依赖中区
npm install 包名@3.1.0 --save # 安装指定版本的包
npm install git+https://github.com/haoflynet/example.git # 从Github仓库安装模块
npm install git://github.com/haoflynet/example.git
npm list --depth=0 # 列出已安装模块
npm list -g --depth=0 # 列出全局安装的包
npm list --depth=0 2> /dev/null # 忽略标准错误输出(npm ERR!这种错误将被忽略
npm view 包名 versions # 列出指定包的所有版本
npm update # 升级当前目录下的所有模块
npm update 包名 # 更新指定包
npm install npm -g # 升级npm
npm install -g n && n stable # 升级node.js到最新稳定版
升级node.js
npm install --verbose # 显示debug日志

npm config delete name # 删除某个配置

# 代理设置
npm config set proxy=http://127.0.0.1:1080 && npm config set proxy=https://127.0.0.1:1080

Yarn

  • yarn1.10x开始会在yarn.lock中增加integrity字段,用于验证包的有效性
  • yarn真的笔npm快,而且每次lock文件的变动要少一些
1
2
3
4
yarn add 包名	# 安装包
yarn add -D 包名 # 安装dev依赖
npm install yarn@latest -g # 升级yarn
yarn dev -p 8000 # yarn能直接将参数传递给scripts,npm不行

TypeScript

  • 给js引入type,使开发更加严谨

  • 引入步骤:

    1. npm install --save-dev typescript @types/node
    2. 初始化./node_modules/.bin/tsc --init
    3. 最后使用tsc命令进行编译,将它放入package.jsonscripts里面即可
  • 配置

    1
    2
    3
    4
    5
    6
    7
    8
    9
    {
    "compilerOptions": {
    "target": "es5", // 生成的代码的语言版本
    "skipLibCheck": true, // 跳过类型声明文件的类型检查
    "allowSyntheticDefaultImports": true, // 运行import x from 'y'这种操作,即使模块没有显示指定default的到处
    "strict": true, // 开启严格模式
    },
    "include": ["src"], // 搜索ts文件的路径
    }
  • 函数定义

    1
    2
    // 可变参数
    function test(field1: string, ...fields: string)
  • 常用类型

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    interface MyType {
    [key: string]: string; // mapping类型
    }

    type MyType = {
    username: string;
    pass: string;
    }

    type Type2 = keyof MyType; // Type2会被解析为'username'|'pass'

    enum MyEnum { // 注意定义枚举的时候要把key和value都写出来,如果写成enum MyEnum {VALUE1, VALUE2}这样可能会导致后面无法拿来匹配值,无论字符串还是枚举都匹配不上
    VALUE1 = 'VALUE1', VALUE2 = 'VALUE2', VALUE3 = 'VALUE3'
    }
  • 自定义类型:

    1
    2
    3
    4
    5
    interface MyType {
    name: string;
    children: MyType2[]; // 定义数组
    [index: number]: { id: number; label: string; key: any };
    }
  • 常见错误

    • Object is of type ‘unknown’ typescript generics: 如果程序无法判断准确的类型,那么我们需要强制声明一下类型,例如(error as Error).message
    • Property ‘classList’ does not exist on type ‘Never’: 对于react的ref需要这样定义: const myEl = useRef<HTMLDivElement>(null);
    • window undefined: 尝试生命一个window对象
      1
      2
      3
      4
      export interface CustomWindow extends Window {
      customAttribute: any;
      }
      declare let window: CustomWindow;

使用Forever管理NodeJs应用(生产环境最好用pm2)

  • 直接使用sudo npm install forever -g进行安装

forever常用命令

1
2
3
4
5
6
7
8
9
10
11
12
forever list	# 查看当前所有管理的服务
forever stopall # 停止所有服务
forever stop 服务ID # 停止指定服务
forever restartall # 重启所有服务
forever logs -f 服务ID # 查看某个服务的日志

# 下面这些命令一般用于非config文件启动方式
forever server.js # 直接启动进程
forever start server.js # 以daemon方式启动进程
forever start -l /var/log/forever.log -a server.js # 指定日志文件
forever start -o /var/log/forever/out.log -e /var/log/forever/err.log -a server.js # 分别指定日志和错误日志文件,-a表示追加
forever start -w server.js # 监听文件夹下所有文件的改动并自动重启

常用包推荐

  • adm-zip: 制作zip包工具,很多lambda函数都需要将仓库打包成zip文件,这个库就很有用:

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    const AdmZip = require('adm-zip');

    const zip = new AdmZip();

    zip.addLocalFolder('../repo', './', (path) => {
    if (path.includes('node_modules') || // 忽略特定的文件夹
    path.includes('build/') ||
    path.includes('dist/') ||
    path.includes('.zip') ||
    path.includes('logs/')
    ) {
    return false;
    }
    return true;
    });
    zip.writeZip('./repo.zip');
  • bcrypt: 非常推荐的安全的密码/密码hash库,不用自己维护盐值,它是把计算次数和盐值都放到hash值里面去了

  • dotenv: 支持.env文件读取环境变量

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    // 默认读取项目根目录的.env文件,也可以自定义.env文件的路径
    import { config } from 'dotenv';

    config({
    path: '../.env',
    });

    // 使用require的方式
    require('dotenv').config({
    path: `configs/${process.env.NODE_ENV}.env`,
    });
  • human-numbers:转换数字的大小K、M、B、T,不过它其实就一个方法,都可以不用它这个包

  • node-csv: 读写CSV文件的库,它由cdv-generate,csv-parse,csv-transform,csv-stringify几个部分组成,一个一次性安装,也可以单独安装

  • object-sizeof: 获取变量所占内存的大小,有时候非常需要这样的东西

  • randomstring: 生成随机字符串

  • uuid: uuid首选version 4,每秒生成10亿个,大约需要85年才会重复

  • yup: 非常简单且易于集成的认证库

TroubleShooting

  • Permission Denied问题,使用npm命令总是会出现这个问题,解决方法最简单的是把npm目录的拥有者修改为当前用户的名字 sudo chown -R $(whoami) $(npm config get prefix)/{lib/node_modules,bin,share}

  • 安装包时报错Unexpected end of JSON input while parsing near ‘ : ‘ 尝试先执行npm cache clean --force,然后再安装

  • gyp: No Xcode or CLT version detected!: 需要先安装xcode命令工具: xcode-select --install

  • npm install结果被系统killed掉了: 一般是内存不足,可以使用增加swap的方法,参考Linux 手册

  • ReferenceError: describe is not defined NodeJs: 应该是mocha这个测试库报的错,安装它即可: npm install mocha -g

  • wasm code commit Allocation failed - process out of memory: 在Apple m1(apple silicon)上npm编译失败,可以尝试将node升级到v15.3.0及以上

  • a promise was created in a handler but was not returned from it: 通常是bluebird报错,函数没有正确地返回,遇到这个情况一个是验证回掉函数then是否有正确的返回,如果没有,那么可以添加一个return null语句,需要注意的是,如果then回掉里面只有一个语句,例如.then(res => res + 'abc'),这样不用单独写return,但如果里面的语句不只一句就得加了

  • Node Sass does not yet support your current environment: Windows 64-bit with Unsupported runtime (88): npm rebuild node-sass

  • Error: spawn ../node_modules/optipng-bin/vendor/optipng ENOENT: 尝试执行npm rebuild

  • this._settlePromiseFromHandler is not a function: 尝试删除node_module目录并重新安装

  • gulp: command not found: npm install gulp-cli -g

  • SyntaxError: Unexpected token export: 尝试使用module.exports = XXX来到处模块或方法

  • Unsupported platform for fsevents@1.4.9: wanted {“os”:”darwin”,”arch”:”any”} (current: {“os”:”win32”,”arch”:”x64”}: 原因是在m1的mac上面安装了该包并上传了自己的package-lock.json,得清理一下缓存才行了:

    1
    2
    3
    4
    rm -rf node_modules package-lock.json
    npm cache clean --force
    npm cache verify
    npm install --verbose
  • Uncaught Error: ENOENT: no such file or directory, uv_cwd: 检查一下当前目录是否还存在文件,node_modules这些目录是否还在

  • error TS2694: Namespace ‘NodeJS’ has no exported member ‘TypedArray’.: 尝试yarn add --dev @types/node

  • Cannot invoke an object which is possibly ‘undefined’ 通常是在调用一个可能为undefined的对象的方法的时候出现,需要对方法也是用问号表达式: props.obj?.click?.()

  • npm ERR! integrity checksum failed when using sha1: wanted … but got …: 尝试执行

    1
    2
    npm cache clean -force
    npm cache verify
  • 从Github私有仓库安装: 需要在github生成token,然后放入.npmrc中:

    1
    2
    @optionsai:registry=https://npm.pkg.github.com/
    //npm.pkg.github.com/:_authToken=这里就是token
  • nodejs如何退出进程

    1
    process.exit()
  • nodejs中直接使用await报错: SyntaxError: await is only valid in async functions and the top level bodies of modules

    1
    2
    3
    4
    5
    6
    7
    // 将其修改为一个异步方法
    async function run() {
    // 在这里使用 await
    const result = await someAsyncFunction();
    console.log(result);
    }
    run()
  • /usr/lib/libcurl.dylib (No such file or directory): 在mac上安装失败,可以尝试

    1
    2
    brew install curl-openssl
    export PATH="/opt/homebrew/opt/curl/bin:$PATH" >> ~/.zshrc
扩展阅读

N-club: 使用Koa + MongoDB + Redis搭建的论坛系统

不容错谷哦的Node.js项目架构n

Redis

  • 统计:比如行为指标、点击量统计、访问量统计、排行榜、最新或最高的N个数据等

  • 缓存:会话缓存,页面缓存,全局变量缓存 队列:队列服务

  • 过期:需要设置过期时间的数据

MongoDB

  • 文本:日志、文章等

MariaDB

  • 数据引擎丰富,包含以下的存储引擎:
    • Aria(增强版的MyISAM)
    • XtraDB(增强版的InnoDB)
    • FederatedX
    • OQGRAPH
    • SphinxSE
    • IBMDB2I
    • TokuDB
    • Cassandra
    • CONNECT
    • SEQUENCE
    • Spider
    • PBXT
  • Group commit for the binary log组提交技术,能够将多个并发提交的事物加入一个队列,对这个队列里的事务,利用一次I/O合并提交,解决写日志频繁刷磁盘的问题
  • 基于表的多线程并行复制技术
  • 线程池thread pool技术
  • 时间精确到微妙级别
  • 增加多源复制和基于表的并行复制
  • 发展速度远远超过MySQL

MySQL

Percona

  • 相比于MySQL,它仅仅是针对InnoDB引擎做了性能上的改善,称为XtraDB

背景: 天朝大局域网,网上都说可以打电话叫客服切换到公网IP,但是电信、移动宽带,无论打客服还是安装师傅,居然从上到下都不知道公网IP是什么,他们以为我要公网IP是要独立宽带,公网IP和共享宽带明明是两个概念好不好,你可以封80端口,但是其它什么端口至少给我留一个总行吧,客服没用,就只能自己动手了。

阅读全文 »

经过长达5个月的艰辛历程(实际的编程时间少之又少),终于自己打造出了一个静态博客。虽然没有wordpress那么方便,虽然没有预期中那么漂亮,虽然还有很多功
能还没有完善,但是这是我第一次用自己的技术为自己做了一个“会用”的东西。

开博两年多了,从Github的octopress到wordpress再到自己搭建静态博客,写了总共一百多篇文章,由于本次改版采用的是大重构,所以我是一篇文章
一篇文章的迁移过来的,只是格式有些还没改动,不过大体能成型了。目前博客有我很喜欢的几大特点:

1.静态化,直接使用nginx实现html文件的静态访问

2.ajax异步提交评论,评论不会立即出发更新html的接口,而是后台审核后才能更新

3.SEO自己做,这个还有很多学习的地方

4.每篇文章对应一张大图,其实是自己爱上摄影后才选择的这个主题,因为这样不仅让我在每篇文章编写时用心,还能用心拍照片(当然,实在没照片的时候就使用的Pixe
bay的免费可商用的图片)

5.采用我最喜欢的Python语言进行编写(Djanago框架)

总之,这几个月很少更新博客,原因是公司的事情太多,自己没有合理利用好时间,所以导致这种这个局面。其实,最近几个月的实习,自己还是有很多感悟的,以后会陆续写成
文章发表出来的。也不知道有没有人看,反正,开心就好咯。