Skip to content

Commit 04e21dd

Browse files
committed
更新了最后10天的文档
1 parent ef20e51 commit 04e21dd

7 files changed

+87
-51
lines changed

Day91-100/91.团队项目开发的问题和解决方案.md

Lines changed: 14 additions & 6 deletions
Original file line numberDiff line numberDiff line change
@@ -441,7 +441,9 @@ Git不像SVN那样一定需要中央服务器才能工作,上面我们演示
441441

442442
```Shell
443443
git switch -c release-0.1 develop
444+
git push -u origin release-0.1
444445
... ... ...
446+
git pull
445447
git commit -a -m "............"
446448
```
447449

@@ -457,7 +459,8 @@ Git不像SVN那样一定需要中央服务器才能工作,上面我们演示
457459
git push
458460

459461
git branch -d release-0.1
460-
git tag -a v0.1 master
462+
git push --delete release-0.1
463+
git tag v0.1 master
461464
git push --tags
462465
```
463466

@@ -467,8 +470,10 @@ Git不像SVN那样一定需要中央服务器才能工作,上面我们演示
467470

468471
```Shell
469472
git checkout -b hotfix-0.1.1 master
473+
git push -u origin hotfix-0.1.1
470474
... ... ...
471-
git commit -m "............"
475+
git pull
476+
git commit -a -m "............"
472477
```
473478

474479
`hotfix`分支合并回`develop``master`分支。
@@ -483,7 +488,8 @@ Git不像SVN那样一定需要中央服务器才能工作,上面我们演示
483488
git push
484489

485490
git branch -d hotfix-0.1.1
486-
git tag -a 0.1.1
491+
git push --delete hotfix-0.1.1
492+
git tag v0.1.1 master
487493
git push --tags
488494
```
489495

@@ -501,7 +507,7 @@ Git-flow流程比较容易控制各个分支的状况,但是在运用上github
501507

502508
#### 禅道
503509

504-
[禅道](<https://www.zentao.net/>)是国产的专业项目管理软件,它不仅仅是缺陷管理工具,它提供了完整软件生命周期管理功能,支持Scrum敏捷开发,能够实现需求管理、缺陷管理、任务管理等一系列的功能,而且拥有强大的扩展机制和丰富的功能插件。可以从禅道的官方网站提供的[下载链接](<https://www.zentao.net/download.html>)来下载禅道,推荐使用一键安装包。
510+
[禅道](<https://www.zentao.net/>)是国产的专业项目管理软件,它不仅仅是缺陷管理工具,它提供了完整软件生命周期管理功能,支持[Scrum敏捷开发](<http://www.scrumcn.com/agile/scrum-knowledge-library/scrum.html>),能够实现需求管理、缺陷管理、任务管理等一系列的功能,而且拥有强大的扩展机制和丰富的功能插件。可以从禅道的官方网站提供的[下载链接](<https://www.zentao.net/download.html>)来下载禅道,推荐使用一键安装包。
505511

506512
下面仍然以CentOS Linux为例,讲解如何利用官方提供的一键安装包来安装禅道。
507513

@@ -529,9 +535,11 @@ tar -xvf ZenTaoPMS.pro8.5.2.zbox_64.tar
529535

530536
![](./res/zentao-index.png)
531537

538+
对敏捷开发以及敏捷闭环工具不是特别了解的,可以参考[《基于JIRA的Scrum敏捷开发的项目管理》](<https://blog.51cto.com/newthink/1775427>)一文。
539+
532540
#### Gitlab
533541

534-
一般的代码托管平台或者是我们之前提到的Git私服Gitlab都提供了缺陷管理的功能,当我们要报告一个bug时,可以在如下图所示的界面创建一个新的问题票(issue ticket)。填写的内容包括:
542+
常用的代码托管平台和之前提到的Git私服Gitlab都提供了缺陷管理的功能,当我们要报告一个bug时,可以在如下图所示的界面创建一个新的问题票(issue ticket)。填写的内容包括:
535543

536544
1. **[必填]**出现问题的软件版本号、具体的使用环境(如操作系统)等相关信息。
537545
2. **[必填]**能够稳定重现该问题的相关步骤。
@@ -559,7 +567,7 @@ tar -xvf ZenTaoPMS.pro8.5.2.zbox_64.tar
559567

560568
### 持续集成
561569

562-
为了快速的产生高品质的软件,在团队开发中,持续集成(CI)也是一个非常重要的基础。按照经典的软件过程模型(瀑布模型),集成的工作一般要等到所有的开发工作都结束后才能开始,但这个时候如果发现了问题,修复问题的代价是非常具体的。基本上,集成实施得越晚,代码量越大,解决问题就越困难。持续集成将版本控制、自动化构建、代码测试融入到一起,让这些工作变得自动化和可协作。由于其频繁重复整个开发流程(在指定时间内多次pull源代码并运行测试代码),所以能帮助开发者提早发现问题。
570+
为了快速的产出高质量的软件,在团队开发中持续集成(CI)是一个非常重要的环节。所谓CI,就是一种让计算机自动任意次重复编译、测试、汇报等工作的方法,通过CI可以帮助开发者提早发现问题,降低各种人为失误给项目带来的风险。按照经典的软件过程模型(瀑布模型),集成的工作一般要等到所有的开发工作都结束后才能开始,但这个时候如果发现了问题,修复问题的代价是非常具体的。基本上,集成实施得越晚,代码量越大,解决问题就越困难。持续集成将版本控制、自动化构建、代码测试融入到一起,让这些工作变得自动化和可协作。由于其频繁重复整个开发流程(在指定时间内多次pull源代码并运行测试代码),所以能帮助开发者提早发现问题。
563571

564572
在所有的CI工具中,Jenkins和[TravisCI](<https://www.travis-ci.org/>)是最具有代表性的,前者是基于 Java的开源CI工具,后者是新晋的在线CI工具,下图是Jenkins的工作面板。
565573

Day91-100/92.使用Docker部署应用.md

Lines changed: 6 additions & 5 deletions
Original file line numberDiff line numberDiff line change
@@ -22,10 +22,11 @@ Docker属于对Linux容器技术的一种封装(利用了Linux的namespace和c
2222

2323
下面以CentOS为例讲解如何安装Docker,使用[Ubuntu](https://docs.docker.com/install/linux/docker-ce/ubuntu/)[macOS](https://docs.docker.com/docker-for-mac/install/)[Windows](https://docs.docker.com/docker-for-windows/install/)的用户可以通过点击对应的链接了解这些平台下如何进行安装。
2424

25-
1. 确定操作系统内核版本(CentOS 7要求64位,内核版本3.10+;CentOS 6要求64位,内核版本2.6+),可以通过下面的命令确定Linux系统内核版本
25+
1. 确定操作系统内核版本(CentOS 7要求64位,内核版本3.10+;CentOS 6要求64位,内核版本2.6+),可以通过下面的命令确定Linux系统内核版本并更新底层库文件
2626

2727
```Shell
2828
uname -r
29+
yum update
2930
```
3031

3132
2. 在CentOS下使用yum安装Docker并启动。
@@ -112,7 +113,7 @@ docker rmi hello-world
112113
>
113114
> 国内用户可以通过更换Ubuntu软件下载源来提升下载速度,具体请参照清华大学开源软件镜像站上的[《Ubuntu镜像使用帮助》](<https://mirrors.tuna.tsinghua.edu.cn/help/ubuntu/>)。
114115
115-
安装Docker后,由于直接访问[dockerhub](https://hub.docker.com/)下载镜像会非常缓慢,建议将服务器更换为国内镜像,可以通过修改 `/etc/docker/daemon.js` 文件来做到。一般的云服务器会有自己专属的镜像,就不需要手动修改了。
116+
安装Docker后,由于直接访问[dockerhub](https://hub.docker.com/)下载镜像会非常缓慢,建议将服务器更换为国内镜像,可以通过修改 `/etc/docker/daemon.json` 文件来做到。一般的云服务器会有自己专属的镜像,就不需要手动修改了。
116117
117118
```JavaScript
118119
{
@@ -125,7 +126,7 @@ docker rmi hello-world
125126
126127
### 使用Docker
127128

128-
想要玩转Docker,最简单的办法就是马上用Docker创建一些自己学习和工作中需要用到的容器,接下来我们就带着大家一起来创建这些容器
129+
想要玩转Docker,最简单的办法就是马上用Docker创建一些自己学习和工作中需要用到的容器,下面我们带着大家一起来创建这些容器
129130

130131
#### 运行Nginx
131132

@@ -152,7 +153,7 @@ docker container stop mynginx
152153
然后用下面的命令重新创建容器。
153154

154155
```Shell
155-
docker container run -d -p 80:80 --rm --name mynginx --volume $PWD/html:/usr/share/nginx/html nginx
156+
docker container run -d -p 80:80 --rm --name mynginx --volume /root/docker/nginx/html:/usr/share/nginx/html nginx
156157
```
157158

158159
> 说明:上面创建容器和拷贝文件的命令中,`container`是可以省略的,也就是说`docker container run``docker run`是一样的,而`docker container cp``docker cp`是一样的。此外,命令中的`--volume`也可以缩写为`-v`,就如同`-d``--detach`的缩写,`-p``--publish`的缩写。`$PWD`代表宿主系统当前文件夹,这些对于使用过Unix或者Linux系统的人来说,应该是很容易理解的。
@@ -230,7 +231,7 @@ docker.io/mysql 5.7 f6509bac4980 3 weeks ago
230231
创建并运行MySQL容器。
231232

232233
```Shell
233-
docker run -d -p 3306:3306 --name mysql57 -v $PWD/mysql/conf:/etc/mysql/mysql.cnf.d -v $PWD/mysql/data:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=123456 mysql:5.7
234+
docker run -d -p 3306:3306 --name mysql57 -v /root/docker/mysql/conf:/etc/mysql/mysql.conf.d -v /root/docker/mysql/data:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=123456 mysql:5.7
234235
```
235236

236237
> **注意**:上面创建容器时我们又一次使用了数据卷操作,那是因为通常容器是随时创建随时删除的,而数据库中的数据却是需要保留下来的。

Day91-100/93.MySQL性能优化.md

Lines changed: 33 additions & 4 deletions
Original file line numberDiff line numberDiff line change
@@ -17,8 +17,6 @@
1717

1818
过程,通常也称之为存储过程,它是事先编译好存储在数据库中的一组SQL的集合。调用存储过程可以简化应用程序开发人员的工作,减少与数据库服务器之间的通信,对于提升数据操作的性能是有帮助的,这些我们在之前的[《关系型数据库MySQL》](../Day36-40/36-38.关系型数据库MySQL.md)一文中已经提到过。
1919

20-
21-
2220
### 数据分区
2321

2422
MySQL支持做数据分区,通过分区可以存储更多的数据、优化查询,获得更大的吞吐量并快速删除过期的数据。关于这个知识点建议大家看看MySQL的[官方文档](https://dev.mysql.com/doc/refman/5.7/en/partitioning-overview.html)。数据分区有以下几种类型:
@@ -62,9 +60,40 @@ MySQL支持做数据分区,通过分区可以存储更多的数据、优化查
6260

6361
1. 定位低效率的SQL语句 - 慢查询日志。
6462

65-
```SQL
63+
- 查看慢查询日志相关配置
64+
65+
```SQL
66+
mysql> show variables like 'slow_query%';
67+
+---------------------------+----------------------------------+
68+
| Variable_name | Value |
69+
+---------------------------+----------------------------------+
70+
| slow_query_log | OFF |
71+
| slow_query_log_file | /mysql/data/localhost-slow.log |
72+
+---------------------------+----------------------------------+
6673

67-
```
74+
mysql> show variables like 'long_query_time';
75+
+-----------------+-----------+
76+
| Variable_name | Value |
77+
+-----------------+-----------+
78+
| long_query_time | 10.000000 |
79+
+-----------------+-----------+
80+
```
81+
82+
- 修改全局慢查询日志配置。
83+
84+
```SQL
85+
mysql> set global slow_query_log='ON';
86+
mysql> set global long_query_time=1;
87+
```
88+
89+
或者直接修改MySQL配置文件启用慢查询日志。
90+
91+
```INI
92+
[mysqld]
93+
slow_query_log=ON
94+
slow_query_log_file=/usr/local/mysql/data/slow.log
95+
long_query_time=1
96+
```
6897

6998
2. 通过`explain`了解SQL的执行计划。例如:
7099

Day91-100/95.使用Django开发商业项目.md

Lines changed: 20 additions & 29 deletions
Original file line numberDiff line numberDiff line change
@@ -160,23 +160,14 @@ python manage.py inspectdb > <appname>/models.py
160160
- `filter()` / `exclude()`
161161

162162
- `exact` / `iexact`:精确匹配/忽略大小写的精确匹配查询
163-
164163
- `contains` / `icontains` / `startswith / istartswith / endswith / iendswith`:基于`like`的模糊查询
165-
166164
- `in`:集合运算
167-
168165
- `gt` / `gte` / `lt` / `lte`:大于/大于等于/小于/小于等于关系运算
169-
170166
- `range`:指定范围查询(SQL中的`between…and…`
171-
172167
- `year` / `month` / `day` / `week_day` / `hour` / `minute` / `second`:查询时间日期
173-
174168
- `isnull`:查询空值(`True`)或非空值(`False`
175-
176169
- `search`:基于全文索引的全文检索
177-
178170
- `regex` / `iregex`:基于正则表达式的模糊匹配查询
179-
180171
- `aggregate()` / `annotate()`
181172

182173
- `Avg` / `Count` / `Sum` / `Max` / `Min`
@@ -268,9 +259,9 @@ python manage.py inspectdb > <appname>/models.py
268259

269260
#### 如何设计视图函数
270261

271-
1. 用户的每个操作(用户故事)对应一个视图函数。
262+
1. 用户的每个请求(用户故事)对应一个视图函数,当然也可以将用户要执行的业务逻辑封装到独立的函数中,也就是有专门的模块处理程序中的业务逻辑
272263

273-
2. [每个视图函数可以构成一个事务边界](https://docs.djangoproject.com/en/2.1/ref/settings/)
264+
2. 用户的请求可能会包含多个(持久化)操作,这些操作有可能需要设计成不可分割的原子性操作,那么这里就形成了事务的边界
274265

275266
- 事务的ACID特性。
276267

@@ -356,7 +347,7 @@ python manage.py inspectdb > <appname>/models.py
356347

357348
4. 如果使用`url`函数捕获的路径参数都是字符串,`path`函数可以指定路径参数类型。
358349

359-
5. 可以使用`include`函数引入其他URL配置,捕获的参数会向下传递。
350+
5. 可以使用`include`函数引入其他URL配置并指定`namespace`来解决命名冲突,捕获的参数会向下传递。
360351

361352
6. 在`url``path`函数甚至是`include`函数中都可以用字典向视图传入额外的参数,如果参数与捕获的参数同名,则使用字典中的参数。
362353

@@ -488,21 +479,26 @@ python manage.py inspectdb > <appname>/models.py
488479
- 向浏览器传输二进制数据。
489480

490481
```Python
491-
buffer = ByteIO()
482+
from io import BytesIO
483+
484+
buffer = BytesIO()
492485
493486
resp = HttpResponse(content_type='...')
494487
resp['Content-Disposition'] = 'attachment; filename="..."'
495488
resp.write(buffer.getvalue())
496489
```
497490

498491
```Python
492+
from io import BytesIO
493+
494+
import xlwt
495+
496+
499497
def get_style(name, color=0, bold=False, italic=False):
500-
style = xlwt.XFStyle()
501498
font = xlwt.Font()
502-
font.name = name
503-
font.colour_index = color
504-
font.bold = bold
505-
font.italic = italic
499+
font.name, font.colour_index, font.bold, font.italic = \
500+
name, color, bold, italic
501+
style = xlwt.XFStyle()
506502
style.font = font
507503
return style
508504
@@ -535,7 +531,6 @@ python manage.py inspectdb > <appname>/models.py
535531
# 如果文件名有中文需要处理成百分号编码
536532
resp['content-disposition'] = 'attachment; filename="detail.xls"'
537533
return resp
538-
539534
```
540535

541536
- 大文件的流式处理:`StreamingHttpResponse`
@@ -1089,13 +1084,13 @@ LOGGING = {
10891084

10901085
#### 使用djangorestframework
10911086

1092-
安装djangorestfrmework(为了描述方便,以下统一简称为drf)。
1087+
安装djangorestfrmework(为了描述方便,以下统一简称为DRF)。
10931088

10941089
```Shell
10951090
pip install djangorestframework
10961091
```
10971092

1098-
配置drf
1093+
配置DRF
10991094

11001095
```Python
11011096
INSTALLED_APPS = [
@@ -1412,7 +1407,7 @@ class HouseInfoViewSet(CacheResponseMixin, ReadOnlyModelViewSet):
14121407

14131408
#### 身份认证
14141409

1415-
查看drf中APIView类的代码可以看出,drf默认的认证方案是 `DEFAULT_AUTHENTICATION_CLASSES`,如果修改authentication_classes就可以自行定制身份认证的方案。
1410+
查看DRF中APIView类的代码可以看出,DRF默认的认证方案是 `DEFAULT_AUTHENTICATION_CLASSES`,如果修改authentication_classes就可以自行定制身份认证的方案。
14161411

14171412
```Python
14181413
class APIView(View):
@@ -1499,7 +1494,7 @@ class EstateViewSet(CacheResponseMixin, ModelViewSet):
14991494
15001495
#### 授予权限
15011496

1502-
权限检查总是在视图的最开始处运行,在任何其他代码被允许进行之前。最简单的权限是允许通过身份验证的用户访问,并拒绝未经身份验证的用户访问,这对应于dfr中的`IsAuthenticated`类,可以用它来取代默认的`AllowAny`类。权限策略可以在Django的drf配置中用`DEFAULT_PERMISSION_CLASSES`全局设置。
1497+
权限检查总是在视图的最开始处运行,在任何其他代码被允许进行之前。最简单的权限是允许通过身份验证的用户访问,并拒绝未经身份验证的用户访问,这对应于dfr中的`IsAuthenticated`类,可以用它来取代默认的`AllowAny`类。权限策略可以在Django的DRF配置中用`DEFAULT_PERMISSION_CLASSES`全局设置。
15031498

15041499
```Python
15051500
REST_FRAMEWORK = {
@@ -2011,7 +2006,6 @@ def chrome():
20112006
def test_baidu_index(chrome):
20122007
chrome.get('https://www.baidu.com')
20132008
assert chrome.title == '百度一下,你就知道'
2014-
20152009
```
20162010

20172011
除了Selenium之外,还有一个Web自动化测试工具名叫Robot Framework。
@@ -2243,7 +2237,7 @@ TOTAL 267 176 34%
22432237
sysbench --test=memory --num-threads=512 --memory-block-size=256M --memory-total-size=32G run
22442238
```
22452239
2246-
4. jmeter
2240+
4. JMeter
22472241
22482242
请查看[《使用JMeter进行性能测试》](https://www.ibm.com/developerworks/cn/java/l-jmeter/index.html)。
22492243
@@ -2493,9 +2487,6 @@ TOTAL 267 176 34%
24932487
[mysqld]
24942488
slow_query_log=ON
24952489
slow_query_log_file=/usr/local/mysql/data/slow.log
2496-
long_query_time=1
2490+
long_query_time=1
24972491
```
24982492
2499-
#### 其他
2500-
2501-
请参考《Python性能调优》。

Day91-100/97.电商网站技术要点剖析.md

Lines changed: 14 additions & 7 deletions
Original file line numberDiff line numberDiff line change
@@ -325,10 +325,11 @@ ElasticSearch既是一个分布式文档数据库又是一个高可扩展的开
325325

326326
ElasticSearch的底层是开源搜索引擎[Lucene](https://lucene.apache.org/),但是直接用Lucene会非常麻烦,必须自己编写代码去调用它的接口而且只支持Java语言。ElasticSearch相当于对Lucene进行了一次全面的封装,提供了REST风格的API接口,通过基于HTTP协议的访问方式屏蔽了编程语言的差异。ElasticSearch会为数据构建[倒排索引](https://zh.wikipedia.org/zh-hans/%E5%80%92%E6%8E%92%E7%B4%A2%E5%BC%95),但是ElasticSearch内置的分词器对中文分词的支持几乎为零,因此需要通过安装elasticsearch-analysis-ik插件来提供中文分词服务。
327327

328-
ElasticSearch的安装和配置可以参考[《ElasticSearch之Docker安装》](https://blog.csdn.net/jinyidong/article/details/80475320)。除了ElasticSearch之外,也可以使用Solr、Whoosh等来提供搜索引擎服务,基本上Django项目中可以考虑如下两套方案
328+
ElasticSearch的安装和配置可以参考[《ElasticSearch之Docker安装》](https://blog.csdn.net/jinyidong/article/details/80475320)。除了ElasticSearch之外,也可以使用Solr、Whoosh等来提供搜索引擎服务,基本上Django项目中可以考虑如下几种方案
329329

330330
- haystack(django-haystack / drf-haystack) + whoosh + Jieba
331331
- haystack (django-haystack / drf-haystack)+ elasticsearch
332+
- requests + elasticsearch
332333

333334
####安装和使用ElasticSearch
334335

@@ -660,7 +661,10 @@ ElasticSearch的安装和配置可以参考[《ElasticSearch之Docker安装》](
660661
参数:
661662

662663
```JSON
663-
664+
{
665+
"analyzer": "pinyin",
666+
"text": "张学友"
667+
}
664668
```
665669

666670
响应:
@@ -781,14 +785,17 @@ ElasticSearch的安装和配置可以参考[《ElasticSearch之Docker安装》](
781785
参数:
782786

783787
```JSON
784-
788+
{
789+
"query": {
790+
"term": {
791+
"type": ""
792+
}
793+
}
794+
}
785795
```
786796

787-
响应:
797+
POST搜索是基于DSL的。
788798

789-
```JSON
790-
791-
```
792799

793800
#### Django对接ElasticSearch
794801

147 KB
Loading

Day91-100/res/jenkins-unlock.png

187 KB
Loading

0 commit comments

Comments
 (0)