一、數(shù)據(jù)量很大，邏輯不能在內存里做怎么辦

沒有必要考慮是否數(shù)據(jù)加載到內存中，直接使用數(shù)據(jù)庫處理即可；

從描述的內容看，只是判斷轉換的操作，則堅定使用數(shù)據(jù)庫沒有任何問題；

需要做多張表的關聯(lián)操作，這屬于很正常的，關鍵是要關聯(lián)的條件和索引等合理；

對于你的描述不會如你所言超過5，6百行的語句；

最后，提供完整的SQL語句才好給出準確的優(yōu)化建議，重點是SQL語句如何寫，索引如何創(chuàng)建。

延伸閱讀：

二、什么是數(shù)據(jù)庫和數(shù)據(jù)庫管理系統(tǒng)

數(shù)據(jù)庫的應用非常廣泛，舉個例子，我們平時在瀏覽器上搜索內容，就要用到數(shù)據(jù)庫去檢索我們的關鍵字。以前我們可能會用數(shù)組、集合、文件等來存儲數(shù)據(jù)，但是接下來我們就會面臨一個問題，當存儲的數(shù)據(jù)或內容過多的時候，我們如何去精準的找到我們需要的東西，這時候數(shù)據(jù)庫管理系統(tǒng)就派上了用場。除此之外，數(shù)據(jù)庫管理系統(tǒng)還能永久的儲存我們的數(shù)據(jù)。

為了便于大家理解，這里先給大家講解幾個概念

DB數(shù)據(jù)庫（database)：存儲數(shù)據(jù)的“倉庫”。它保存了一系列有組織的數(shù)據(jù)。

DBMS數(shù)據(jù)庫管理系統(tǒng)（Database Management System)：數(shù)據(jù)庫是通過DBMS創(chuàng)建和操作的容器。

SQL，結構化查詢語言（Structured Query Language）用一句話概括，SQL是一種特殊目的的編程語言，一種專門用來與數(shù)據(jù)庫通信的語言。在數(shù)據(jù)庫中，數(shù)據(jù)被結構化并存儲在不同的表中，從而簡化了訪問，更新和操作數(shù)據(jù)的過程。該表由列和行組成。數(shù)據(jù)庫中的表可以在關系的幫助下進行連接。要在數(shù)據(jù)庫中執(zhí)行與數(shù)據(jù)相關的任務，可以使用SQL。SQL代表結構化查詢語言，旨在在特定RDBMS內創(chuàng)建，修改和管理數(shù)據(jù)庫中的數(shù)據(jù)。

SQL優(yōu)點：

1、不是某個特定數(shù)據(jù)庫供應商專有的語言，幾乎所有DBMS（數(shù)據(jù)庫管理系統(tǒng)）都支持SQL

2、簡單易學

3、雖然簡單，但實際上是一種強有力的語言，靈活使用其語言元素，可以進行非常復雜和高級的數(shù)據(jù)庫操作。