在AEM 6中配置節點儲存和資料儲存

簡介

在Adobe Experience Manager(AEM)中，二進位資料可與內容節點分開儲存。 二進位資料儲存在資料儲存器中，而內容節點儲存在節點儲存器中。

可以使用OSGi配置配置資料儲存和節點儲存。 每個OSGi設定都使用永久識別碼(PID)來參照。

配置步驟

要配置節點儲存和資料儲存，請執行以下步驟：

1. 將AEM Quickstart JAR檔案複製到其安裝目錄。

2. 在安裝目錄中建立資料夾crx-quickstart/install。

3. 首先，通過在crx-quickstart/install目錄中建立一個配置檔案，該配置檔案包含要使用的節點儲存選項的名稱。

   例如，Document節點存放區(是AEM MongoMK實作的基礎)使用檔案org.apache.jackrabbit.oak.plugins.document.DocumentNodeStoreService.config。

4. 編輯檔案，並設定您的設定選項。

5. 使用您要使用的資料存放區的PID建立設定檔案。 編輯檔案以設定配置選項。

   注意

   有關配置選項，請參閱節點儲存配置和資料儲存配置。

6. 啟動AEM。

節點儲存配置

段節點儲存

區段節點存放區是Adobe在AEM6中實作TarMK的基礎。 它使用org.apache.jackrabbit.oak.segment.SegmentNodeStoreService PID進行配置。

您可以設定下列選項：

• repository.home:儲存與儲存庫相關資料的儲存庫首頁路徑。預設情況下，段檔案儲存在crx-quickstart/segmentstore目錄下。

• tarmk.size:段的最大大小(MB)。預設最大值為256MB。

• customBlobStore:指示已使用自訂資料存放區的布林值。AEM 6.3及更新版本的預設值為true。 AEM 6.3之前的預設值為false。

以下是範例org.apache.jackrabbit.oak.segment.SegmentNodeStoreService.config檔案：

#Path to repo
repository.home="crx-quickstart/repository"

#Max segment size
tarmk.size=I"256"

#Custom data store
customBlobStore=B"true"

文檔節點儲存

檔案節點存放區是AEM MongoMK實作的基礎。 它使用org.apache.jackrabbit.oak.plugins.document.DocumentNodeStoreService PID。 可使用下列設定選項：

• mongouri:連 🔗 接到Mongo資料庫所需的MongoURI。預設值為mongodb://localhost:27017

• db:Mongo資料庫的名稱。預設為​Oak 。 不過，新的AEM 6安裝會使用​aem-author​作為預設資料庫名稱。

• cache:快取大小(MB)。這分佈在DocumentNodeStore中使用的各種快取中。 預設值為256。

• changesSize:用於快取差異輸出的Mongo中封閉集合的大小(MB)。預設值為256。

• customBlobStore:指示將使用自訂資料存放區的布林值。預設值為false。

以下是範例org.apache.jackrabbit.oak.plugins.document.DocumentNodeStoreService.config檔案：

#Mongo server details
mongouri="mongodb://localhost:27017"

#Name of Mongo database to use
db="aem-author"

#Store binaries in custom BlobStore
customBlobStore=B"false"

資料儲存配置

處理大量二進位檔時，建議使用外部資料存放區，而非預設節點存放區，以發揮最大效能。

例如，如果您的項目需要大量介質資產，則將它們儲存在檔案或S3資料儲存區下將使訪問這些資產的速度比直接儲存在MongoDB中更快。

File Data Store提供的效能比MongoDB更好，而且Mongo備份和還原操作在大量資產的情況下也更慢。

有關不同資料存放區和設定的詳細資訊如下。

檔案資料存放區

這是Jackrabbit 2中FileDataStore的實作。 它提供了將二進位資料作為普通檔案儲存在檔案系統上的方法。 它使用org.apache.jackrabbit.oak.plugins.blob.datastore.FileDataStore PID。

可使用下列設定選項：

• repository.home:儲存各種儲存庫相關資料的儲存庫首頁路徑。預設情況下，二進位檔案將儲存在crx-quickstart/repository/datastore目錄下。

• path:儲存檔案的目錄路徑。如果指定，則其優先於repository.home值。

• minRecordLength:資料儲存中儲存的檔案的最小大小（以位元組為單位）。小於此值的二進位內容會內嵌。

Amazon S3 Data Store

AEM可設定為將資料儲存在Amazon的簡單儲存服務(S3)中。 它使用org.apache.jackrabbit.oak.plugins.blob.datastore.S3DataStore.config PID進行配置。

若要啟用S3資料存放區功能，必須下載並安裝包含S3資料存放區連接器的功能套件。 前往Adobe存放庫，並從1.8.x版的Feature Pack（例如com.adobe.granite.oak.s3connector-1.8.0.zip）下載最新版本。 此外，您還需要下載及安裝AEM 6.4 Service Pack發行說明頁面中所列的最新AEM Service Pack。

java -jar aem6.4.jar -r crx3tar-nofds

下載後，您可以依照下列方式安裝及設定S3 Connector:

1. 將Feature Pack zip檔案的內容解壓縮至臨時資料夾。

2. 前往臨時資料夾，並導覽至下列位置：

   jcr_root/libs/system/install
   

   將上述位置的所有內容複製到<aem-install>/crx-quickstart/install.

3. 如果AEM已配置為使用Tar或MongoDB儲存，請先從aem-install/crx-quickstart/install資料夾中刪除任何現有配置檔案，然後再繼續。 需要移除的檔案包括：

   • For MongoMK: org.apache.jackrabbit.oak.plugins.document.DocumentNodeStoreService.config
   • For TarMK: org.apache.jackrabbit.oak.segment.SegmentNodeStoreService.config

4. 返回已提取Feature Pack的臨時位置，並複製以下資料夾的內容：

   • jcr_root/libs/system/config

   至

   • <aem-install>/crx-quickstart/install

   請確保僅複製當前配置所需的配置檔案。 對於專用資料儲存和共用資料儲存設定，都會複製org.apache.jackrabbit.oak.plugins.blob.datastore.S3DataStore.config檔案。

   注意

   在群集設定中，逐個在群集的所有節點上執行上述步驟。 此外，請務必對所有節點使用相同的S3設定。

5. 編輯檔案並新增設定所需的設定選項。

6. 啟動AEM。

升級至1.8.x S3連接器的新版本

如果您需要升級至1.8.x S3連接器的新版本（例如，從1.8.0升級至1.8.1），請依照下列步驟操作：

1. 停止AEM例項。

2. 導覽至AEM安裝資料夾中的<aem-install>/crx-quickstart/install/15，並備份其內容。

3. 備份後，請刪除<aem-install>/crx-quickstart/install/15資料夾中的所有jar檔案，以刪除舊版S3 Connector及其相依性，例如：

   • oak-blob-cloud-1.6.1.jar
   • aws-java-sdk-osgi-1.10.76.jar
   注意

   上述檔案名稱僅供說明之用，並非最終檔案。

4. 從Adobe存放庫下載最新版1.8.x Feature Pack。

5. 將內容解壓縮至個別資料夾，然後導覽至jcr_root/libs/system/install/15。

6. 將jar檔案複製到AEM安裝資料夾中的​<aem-install>/crx-quickstart/install/15。

7. 啟動AEM並檢查連接器功能。

您可搭配下列選項使用設定檔案：

• accessKey:AWS訪問密鑰。

• secretKey:AWS密鑰訪問密鑰。 注： 或者， IAM 角色可用於身份驗證。如果您使用IAM角色，則不再需要指定accessKey和secretKey。

• s3Bucket:貯體名稱。

• s3地區：桶區。

• 路徑：資料儲存的路徑。 預設值為​<AEM install folder>/repository/datastore

• minRecordLength:應儲存在資料儲存區中的對象的最小大小。 最小/預設值為​16KB。

• maxCachedBinarySize:大小小於或等於此大小的二進位檔會儲存在記憶體快取中。 大小為位元組。 預設為​17408 ​(17 KB)。

• cacheSize:快取的大小。 值以位元組為單位指定。 預設值為​64GB。

• 機密：僅在共用資料存放區設定使用無二進位檔復寫時使用。

• stagingSplitPercentage:配置為用於暫存非同步上載的快取大小的百分比。 預設值為​10。

• uploadThreads:用於非同步上載的上載線程數。 預設值為​10。

• stagingPurgeInterval:從暫存快取清除已完成上傳的間隔（秒）。 預設值為​300​秒（5分鐘）。

• stagingRetryInterval:失敗上傳的重試間隔（秒）。 預設值為​600​秒（10分鐘）。

貯體區域選項

DataStore快取

從舊版快取實作（Oak 1.6之前）升級時，本機檔案系統快取目錄的結構會有所差異。 在舊快取結構中，下載的檔案和上傳的檔案都直接放在快取路徑下。 新結構將下載和上載分離，並將它們儲存在快取路徑下名為upload和download的兩個目錄中。 升級程式應順暢無礙，且任何待上傳內容都應排程上傳，且任何先前下載的檔案都會在初始化時放入快取中。

您也可以使用oak-run的datastorecacheupgrade命令，以離線方式升級快取。 如需如何執行命令的詳細資訊，請查看oak-run模組的readme檔案。

快取有大小限制，可使用cacheSize參數進行配置。

下載內容

在從DataStore訪問請求的檔案/blob之前，將檢查本地快取中的記錄。 當快取在快取中添加檔案時超過配置的限制（請參見cacheSize參數）時，將逐出某些檔案以回收空間。

非同步上傳

快取支援非同步上傳至DataStore。 檔案會存放在本機、快取中（在檔案系統上），且非同步作業會開始上傳檔案。 非同步上傳的數量受中繼快取的大小限制。 預備快取的大小是使用stagingSplitPercentage參數來配置的。 此參數定義用於暫存快取的快取大小百分比。 此外，可下載的快取百分比計算為​(100 - stagingSplitPercentage)*cacheSize。

非同步上傳為多線程，且使用uploadThreads參數配置線程數。

上傳完成後，檔案會移至主下載快取。 當中繼快取大小超過其限制時，檔案會同步上傳至DataStore，直到先前的非同步上傳完成，且中繼快取中的空間可再次使用為止。 上傳的檔案會由間隔由stagingPurgeInterval參數設定的定期作業從測試區域中移除。

失敗的上載（例如，由於網路中斷）將放在重試隊列上並定期重試。 重試間隔是使用stagingRetryInterval parameter配置的。

使用Amazon S3設定無二進位檔復寫

若要使用S3設定無二進位檔復寫，需執行下列步驟：

1. 安裝製作和發佈例項，並確定它們已正確啟動。

2. 開啟頁面至​http://localhost:4502/etc/replication/agents.author/publish.html，前往復寫代理設定。

3. 按​Settings​部分中的​Edit​按鈕。

4. 將​序列化​類型選項變更為​二進位減。

5. 在傳輸URI中添加參數" binaryless= true"。 變更後，uri看起來應類似下列：

   http://localhost:4503/bin/receive?sling:authRequestLogin=1&binaryless=true

6. 重新啟動所有製作和發佈執行個體，讓變更生效。

使用S3和MongoDB建立群集

1. 使用下列命令解壓縮CQ快速入門：

   java -jar cq-quickstart.jar -unpack

2. 解壓縮AEM後，在安裝目錄​crx-quickstart/install​內建立資料夾。

3. 在crx-quickstart資料夾中建立以下兩個檔案：

   • org.apache.jackrabbit.oak.plugins.document.DocumentNodeStoreService。設定
   • org.apache.jackrabbit.oak.plugins.blob.datastore.S3DataStore。設定

   建立檔案後，視需要新增設定選項。

4. 依照上述說明安裝S3資料存放區所需的兩個套件組合。

5. 確保已安裝MongoDB且mongod的實例正在運行。

6. 使用下列命令啟動AEM :

   java -Xmx1024m -XX:MaxPermSize=256M -jar cq-quickstart.jar -r crx3,crx3mongo

7. 對第二個AEM例項重複步驟1到4。

8. 啟動第二個AEM例項。

配置共用資料儲存

1. 首先，在共用資料儲存所需的每個執行個體上建立資料儲存設定檔案：

   • 如果您使用FileDataStore，請建立名為org.apache.jackrabbit.oak.plugins.blob.datastore.FileDataStore.config的檔案，並將其放入<aem-install>/crx-quickstart/install資料夾中。
   • 如果使用S3作為資料儲存，請如上方在<aem-install>/crx-quickstart/install資料夾中建立名為rg.apache.jackrabbit.oak.plugins.blob.datastore.S3DataStore.config的檔案。

2. 修改每個執行個體上的資料存放區組態檔，以指向相同的資料存放區。 如需詳細資訊，請參閱本文。

3. 如果執行個體已從現有伺服器複製，當存放庫離線時，您需要使用最新的oak-run工具來移除新執行個體的clusterId。 您需要執行的命令為：

   java -jar oak-run.jar resetclusterid < repository path | Mongo URI >
   

   注意

   如果已設定區段節點存放區，則需指定存放庫路徑。 預設情況下，路徑為<aem-install-folder>/crx-quickstart/repository/segmentstore.如果配置了文檔節點儲存，則可以使用Mongo連接字串URI。

   注意

   Oak-run工具可從以下位置下載：

   https://mvnrepository.com/artifact/org.apache.jackrabbit/oak-run/

   請注意，您需根據AEM安裝使用的Oak版本，使用不同版本的工具。 使用此工具之前，請先檢查下方的版本需求清單：

   • 若為Oak版本​1.2.x，請使用Oak-run 1.2.12或更新版本
   • 若Oak版本​較上方​較新，請使用符合AEM安裝之Oak核心的Oak-run版本。

4. 最後，驗證設定。 若要這麼做，您需要尋找共用資料儲存庫的每個存放庫所新增的唯一檔案。 檔案的格式為repository-[UUID]，其中UUID是每個個別存放庫的唯一識別碼。

   因此，正確的配置應具有與共用資料儲存的儲存庫相同的唯一檔案。

   檔案的儲存方式會有所不同，具體取決於資料儲存：

   • 對於FileDataStore，檔案建立在資料儲存資料夾的根路徑下。
   • 對於S3DataStore，檔案會建立在META資料夾下已設定的S3儲存貯體中。

Azure 資料存放區

AEM可設定為將資料儲存在Microsoft的Azure儲存服務中。 它使用org.apache.jackrabbit.oak.plugins.blob.datastore.AzureDataStore.config PID進行配置。

若要啟用Azure資料儲存功能，必須下載並安裝包含Azure連接器的功能套件。 前往Adobe存放庫，並從1.6.x版的Feature Pack（例如com.adobe.granite.oak.azurebconnector-1.6.3.zip）下載最新版本。

java -jar aem6.4.jar -r crx3tar-nofds

下載後，您可以依照下列方式安裝及設定Azure連接器：

1. 將Feature Pack zip檔案的內容解壓縮至臨時資料夾。

2. 轉到臨時資料夾，將jcr_root/libs/system/install的內容複製到<aem-install>crx-quickstart/install資料夾。

3. 如果AEM已配置為使用Tar或MongoDB儲存，請先從/crx-quickstart/install資料夾中刪除任何現有配置檔案，然後再繼續。 需要移除的檔案包括：

   MongoMK:

   org.apache.jackrabbit.oak.plugins.document.DocumentNodeStoreService.config

   若為TarMK:

   org.apache.jackrabbit.oak.segment.SegmentNodeStoreService.config

4. 返回已提取Feature Pack的臨時位置，並將jcr_root/libs/system/config的內容複製到<aem-install>/crx-quickstart/install資料夾。

5. 編輯設定檔案並新增設定所需的設定選項。

6. 啟動AEM。

您可搭配下列選項使用設定檔案：

• azureSas="":在連接器1.6.3版中，新增了Azure共用存取簽名(SAS)支援。 如果配置檔案中同時存在SAS和儲存憑據，則SAS具有優先順序。 有關SAS的更多資訊，請參 閱官方檔案。請確定「=」字元會以「=」的形式逸出。

• azureBlobEndpoint="":Azure Blob端點。 例如， https://<storage-account>.blob.core.windows.net。

• accessKey="":儲存帳戶名稱。 有關Microsoft Azure身份驗證憑據的更多詳細資訊，請參閱官方文檔。

• secretKey="":儲存存取金鑰。 請確定「=」字元會以「=」的形式逸出。

• container="":Microsoft Azure blob儲存容器名稱。 容器是一組blob的分組。 有關其他詳細資訊，請閱讀官方文檔。

• maxConnections="":每個操作同時發出的請求數。 預設值為 1。

• maxErrorRetry="":每個請求的重試次數。 預設值為 3。

• socketTimeout="":用於請求的逾時間隔（以毫秒為單位）。 預設值為5分鐘。

除了上述設定外，您也可以設定下列設定：

• 路徑：資料儲存的路徑。 預設值為<aem-install>/repository/datastore.
• RecordLength:應儲存在資料儲存區中的對象的最小大小。 預設為16KB。
• maxCachedBinarySize:大小小於或等於此大小的二進位檔會儲存在記憶體快取中。 大小為位元組。 預設為17408(17 KB)。
• cacheSize:快取的大小。 值以位元組為單位指定。 預設為64GB。
• 機密：僅在共用資料存放區設定使用無二進位檔復寫時使用。
• stagingSplitPercentage:配置為用於暫存非同步上載的快取大小的百分比。 預設值為 10。
• uploadThreads:用於非同步上載的上載線程數。 預設值為 10。
• stagingPurgeInterval:從暫存快取清除已完成上傳的間隔（秒）。 預設值為300秒（5分鐘）。
• stagingRetryInterval:失敗上傳的重試間隔（秒）。 預設值為600秒（10分鐘）。

accessKey="ASDASDERFAERAER"
secretKey="28932hfjlkwdo8fufsdfas\=\="

資料儲存垃圾收集

資料儲存垃圾收集過程用於移除資料儲存中任何未使用的檔案，從而釋放該過程中的寶貴磁碟空間。

您可以通過以下方式運行資料儲存垃圾收集：

1. 轉到位於​https://<serveraddress:port>/system/console/jmx​的JMX控制台

2. 正在搜索​RepositoryManagement。 找到儲存庫管理器MBean後，按一下該MBean以開啟可用選項。

3. 捲動至頁面結尾，然後按一下​startDataStoreGC(boolean markOnly)​連結。

4. 在以下對話方塊中，為markOnly參數輸入false，然後按一下​叫用:

   

   注意

   markOnly參數表示垃圾收集的掃描階段是否將運行。

共用資料儲存的資料儲存垃圾收集

使用較新的AEM版本時，資料存放區垃圾收集也可在多個存放庫共用的資料存放區上執行。 為了能夠在共用資料儲存上運行資料儲存垃圾收集，請執行以下步驟：

1. 請確保在共用資料儲存的所有儲存庫實例上禁用為資料儲存垃圾收集配置的任何維護任務。

2. 在共用資料儲存的​所有​儲存庫實例上，分別運行二進位垃圾收集中提及的步驟。 不過，在按一下「叫用」按鈕之前，請務必為markOnly參數輸入true:

   

3. 在所有執行個體上完成上述程式後，請從執行個體的​any​再次執行資料儲存垃圾收集：

   1. 轉到JMX控制台，並選擇儲存庫管理器Mbean。
   2. 按一下​按一下startDataStoreGC(boolean markOnly)​連結。
   3. 在以下對話框中，再次為markOnly參數輸入false。

   這會整理使用之前使用的標籤階段找到的所有檔案，並刪除資料存放區中未使用的其餘檔案。