Download as PDF, PPTX
![dbログ出力設定例 LOGGING['loggers']['django.db.backends'] = { 'level': 'DEBUG', 'handlers': ['console'] } 'console'ハンドラーは標準出力に表示する想定](/image.pl?url=https%3a%2f%2fimage.slidesharecdn.com%2fpycon2014djangoperformance-140913001228-phpapp01%2f75%2fPycon2014-django-performance-11-2048.jpg&f=jpg&w=240)
![django-replicated $ pip install django-replicated DATABASES = {'default': {...}, 'slave1': {...}} DATABASE_SLAVES = ['slave1'] DATABASE_ROUTERS = ['django_replicated.ReplicationRouter'] 更新が master, 参照が slave になります https://github.com/yandex/django_replicated](/image.pl?url=https%3a%2f%2fimage.slidesharecdn.com%2fpycon2014djangoperformance-140913001228-phpapp01%2f75%2fPycon2014-django-performance-40-2048.jpg&f=jpg&w=240)
![レプリ遅延対策 MIDDLEWARE_CLASSES = [ ... 'django_replicated.middleware.ReplicationMiddleware', ] GET, HEADで slave, それ以外で master https://github.com/yandex/django_replicated](/image.pl?url=https%3a%2f%2fimage.slidesharecdn.com%2fpycon2014djangoperformance-140913001228-phpapp01%2f75%2fPycon2014-django-performance-41-2048.jpg&f=jpg&w=240)
Uploaded byhirokiky
PDF, PPTX12,537 views
Pycon2014 django performance
Djangoアプリケーションチューニング、Djangoアプリケーションのチューニング方法、負荷測定方法を紹介します。PyConJP2014での発表資料です。発表の動画はこちら http://youtu.be/1aLAZG4Udg0
Recommended
![[DL輪読会] Residual Attention Network for Image Classification](/image.pl?url=https%3a%2f%2fcdn.slidesharecdn.com%2fss_thumbnails%2fresidualattentionnetworkforimageclassification-170907072057-thumbnail.jpg%3fwidth%3d640%26amp%3bheight%3d640%26amp%3bfit%3dbounds&f=jpg&w=240)
More Related Content
What's hot
Similar to Pycon2014 django performance
More from hirokiky
Pycon2014 django performance
- 1.
- 2.
- 3.話さないこと ミドルウェアパラメータ調整 検証用データの作成方法なんか魔法みたいに速くなる技
- 4.自己紹介 @hirokiky PythonDjango 好き ギョームで100万ユーザーくらいのサイト Django本体への貢献
- 5.
- 6.Djangoアプリ高速化 SQLを吐きまくるコードは誰だ インデックスキャッシュキャッシュキャッシュ アプリケーション外
- 7.
- 8.
- 9.
- 10.
- 11.dbログ出力設定例 LOGGING['loggers']['django.db.backends'] ={ 'level': 'DEBUG', 'handlers': ['console'] } 'console'ハンドラーは標準出力に表示する想定
- 12.SQLを吐きまくるコードを倒す ● .select_related/.prefetch_related.bulk_create / .update .count / .exists
- 13..select_related (demo) ●FK先のデータも一緒に取ってくる 内部的にはJOINなどが走る
- 14..prefetch_related (demo) ●FK元のデータも一緒に取ってくる 複数クエリを実行しPython側で結合
- 15..bulk_create (demo) ●複数のオブジェクトを一度に作成
- 16.
- 17.
- 18.その他 ● .only/ .defer .values / .values_list アプリケーションが複雑化しやすい....
- 19.QuerySetはlazy >>> articles= Article.objects.all() >>> articles = articles.filter(title__startswith='title') >>> print(articles) >>> >>> q = articles.filter(author_id=1) >>> print(q) ここでクエリ実行 https://docs.djangoproject.com/en/1.7/topics/db/queries/#querysets-are-lazy
- 20.ここまでのまとめ ● ORMが実行するSQLを知ろうORMの特性を意識しよう 他にも: https://docs.djangoproject.com/en/1.7/topics/db/optimization/
- 21.インデックス ● 適切なインデックスを使おう結局相手にしてるのはRDB
- 22.インデックス 1) 吐かれてるSQLをみて適応してく2) インデックスがかかるクエリに変更
- 23.吐かれるクエリは？ 検証環境などにデータたっぷりいれて 画面をポチポチしますJetProfilerなどがツールも優秀です
- 24.JetProfiler for MySQLhttp://www.jetprofiler.com/tour/
- 25.
- 26.インデックスがかかるクエリにする .extra: クエリの一部分を生SQLで書く.raw: クエリを生SQLで書く 複雑化しやすいのでキャッシュとの兼ね合いです
- 27.ここまでのまとめ ● クエリを眺めてインデックス適応好みのクエリを走るようにする あとそもそもテーブルの設計ちゃんとしましょう
- 28.
- 29.キャッシュの種類 レスポンスキャッシュ ビューキャッシュテンプレートキャッシュ オブジェクトキャッシュ 効果的 https://docs.djangoproject.com/en/1.7/topics/cache/
- 30.テンプレートキャッシュ {% loadcache %} {% cache 500 sidebar %} .. sidebar .. {% endcache %} https://docs.djangoproject.com/en/1.7/topics/cache/
- 31.
- 32.Redisでキャッシュ Redisならではの型を有効利用: *Set型でユニークユーザーの管理 * SortedSet型でランキング http://redis.io/
- 33.
- 34.アプリケーション外 セッションバックエンド変更 静的ファイル圧縮DBのPrimary/Replica構成
- 35.
- 36.Redisバックエンド $ pipinstall django-redis-sessions SESSION_ENGINE = 'redis_sessions.session' https://pypi.python.org/pypi/django-redis-sessions
- 37.静的ファイル圧縮 django-compressor かdjango-asset
- 38.django-compressor {% loadcompress %} {% compress css %} <link rel="stylesheet" href="/static/css/one.css" type="text/css"> <style type="text/css">p { border:5px solid green;}</style> <link rel="stylesheet" href="/static/css/two.css" type="text/css"> {% endcompress %} http://django-compressor.readthedocs.org/en/latest/
- 39.
- 40.django-replicated $ pipinstall django-replicated DATABASES = {'default': {...}, 'slave1': {...}} DATABASE_SLAVES = ['slave1'] DATABASE_ROUTERS = ['django_replicated.ReplicationRouter'] 更新が master, 参照が slave になります https://github.com/yandex/django_replicated
- 41.レプリ遅延対策 MIDDLEWARE_CLASSES =[ ... 'django_replicated.middleware.ReplicationMiddleware', ] GET, HEADで slave, それ以外で master https://github.com/yandex/django_replicated
- 42.レプリ遅延対策 2 fromdjango_replicated.decorators import use_master, use_slave @use_master def my_view(request, ...): # GETで更新&参照するViewなんだぜ。。。 Viewに強制指定 https://github.com/yandex/django_replicated
- 43.まとめ ORMの使い方は基本としてマスター インデックス+キャッシュのバランスまんべんなくやっとくのが吉です
- 44.Funkloadでパフォーマンス測定 負荷試験ツール (Pythonで書く)セッション付きのシナリオ 静的ファイルの自動取得などリッチ https://funkload.nuxeo.org/
- 45.Funkload (テストシナリオ) 1)一覧画面 2) 詳細画面 3) 編集画面 4) 更新 5) 詳細画面
- 46.Funkload (demo) $fl-run-test test_Wiki.py $ fl-run-bench test_Wiki TestWiki.test_update
- 47.
- 48.
- 49.
- 50.
- 51.
- 52.Funkload レポートビルド $fl-run-test test_Wiki.py $ fl-run-bench test_Wiki TestWiki.test_update
- 53.
- 54.耐えるべき負荷は? アクティブユーザー10万人、1日100万PV ピーク時でその3倍として秒間34PV人間1人5秒/1ページとして同時接続数170 このあたり模索中で良い方法などあれば教えてください
- 55.
- 56.
- 57.感想 カッコいいこと言っても結局 設計とミドルウェアが重要どううまく使うかを考えましょう
- 58.
- 59.