アプリケーションからSQLを実行する際の注意点

PythonなどのアプリケーションからSQLを実行する際のポイントを個人的にまとめてみました。

基本的にPythonの速度はSQLの速度と比べて非常に遅いため, SQLで実行できるものはSQLで実行するのが望ましい。
また、SQL関数を使うことでDBから返される結果が小さくなり通信速度が上がり、メモリの量も節約することができる。

len(sql("SELECT * FROM tbl;"))

sql("SELECT COUNT(1) FROM tbl;")

1000回のSQLを発行するよりも1回のSQLを発行すべきである。
Pythonの処理がSQLに比べて非常に遅いためと、SQLを発行するたびにDBと通信を行うため、SQL発行回数を抑えることで通信回数を減らすことができるから。

for _ in range(1000):
    sql(f"INSERT INTO tbl (id, name) VALUES ({id}, {name});")

sql("BULK INSERT tbl FROM file;")

「SELECTして目的のものが無かったらINSERT」ではなく「INSERTしてみて、もし目的のものが既にあったらエラーでpass」という処理をすべき。
理由は、SQLの発行回数が減らせるためである。

if not sql(f"SELECT 1 FROM tbl WHERE id={id}"):
    sql("INSERT INTO tbl (id, name) VALUES ({id}, {name});")

try:
    sql("INSERT INTO tbl (id, name) VALUES ({id}, {name});")
except UniqueviolationError as e:
    pass

めもちょー