Le Van Ninh, Author at Tomoshare

Chức năng replica set trong MongoDB (P2)

Le Van Ninh — Wed, 27 Dec 2023 04:36:13 +0000

Replica Set là Gì?

Replica Set là một tập hợp các máy chủ MongoDB được cấu hình để làm việc cùng nhau và duy trì một bản sao đồng bộ của dữ liệu. Nó giúp cung cấp tính năng sao lưu, khôi phục và chịu lỗi.

Giải Thích Các Thuật Ngữ Quan Trọng:

Replica Set (myReplicaSet): Tên của replica set. Đặt tên này theo ý muốn của bạn.
Members: Danh sách các thành viên (máy chủ) trong replica set. Mỗi thành viên có một ID và địa chỉ host.
Primary Node: Một trong các máy chủ chịu trách nhiệm chính cho việc đọc và ghi dữ liệu.
Secondary Node: Các máy chủ khác trong replica set, sao chép dữ liệu từ primary node và có thể đảm nhiệm chức năng đọc.
Arbiter: Một thành viên đặc biệt chỉ chịu trách nhiệm trong quá trình bầu chọn giữa các primary và secondary nodes.
rs.initiate(): Lệnh để khởi tạo replica set.
rs.status(): Lệnh để kiểm tra trạng thái của replica set.

Cấu hình

Start máy chủ

Zsh

mongod --port 27017 --dbpath /path/to/data/db1 --replSet myReplicaSet
mongod --port 27018 --dbpath /path/to/data/db2 --replSet myReplicaSet
mongod --port 27019 --dbpath /path/to/data/db3 --replSet myReplicaSet

Connect tới máy chủ

Zsh

mongo --host localhost:27017

Khởi tạo replica set

YAML

rs.initiate(
   {
      _id: "myReplicaSet",
      members: [
         { _id: 0, host: "localhost:27017" },
         { _id: 1, host: "localhost:27018" },
         { _id: 2, host: "localhost:27019" }
      ]
   }
)

# Or

rs.add("localhost:27018")
{
	"ok" : 1,
	"$clusterTime" : {
		"clusterTime" : Timestamp(1703576990, 1),
		"signature" : {
			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
			"keyId" : NumberLong(0)
		}
	},
	"operationTime" : Timestamp(1703576990, 1)
}

rs.add("localhost:27019")
{
	"ok" : 1,
	"$clusterTime" : {
		"clusterTime" : Timestamp(1703577014, 1),
		"signature" : {
			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
			"keyId" : NumberLong(0)
		}
	},
	"operationTime" : Timestamp(1703577014, 1)
}

Kiểm Tra Trạng Thái Replica Set

Zsh

rs.status()

{
	"set" : "myReplicaSet",
	"date" : ISODate("2023-12-26T07:51:22.433Z"),
	"myState" : 1,
	"term" : NumberLong(6),
	"syncSourceHost" : "",
	"syncSourceId" : -1,
	"heartbeatIntervalMillis" : NumberLong(2000),
	"majorityVoteCount" : 2,
	"writeMajorityCount" : 2,
	"votingMembersCount" : 3,
	"writableVotingMembersCount" : 3,
	"optimes" : {
		"lastCommittedOpTime" : {
			"ts" : Timestamp(1703577081, 1),
			"t" : NumberLong(6)
		},
		"lastCommittedWallTime" : ISODate("2023-12-26T07:51:21.974Z"),
		"readConcernMajorityOpTime" : {
			"ts" : Timestamp(1703577081, 1),
			"t" : NumberLong(6)
		},
		"appliedOpTime" : {
			"ts" : Timestamp(1703577081, 1),
			"t" : NumberLong(6)
		},
		"durableOpTime" : {
			"ts" : Timestamp(1703577081, 1),
			"t" : NumberLong(6)
		},
		"lastAppliedWallTime" : ISODate("2023-12-26T07:51:21.974Z"),
		"lastDurableWallTime" : ISODate("2023-12-26T07:51:21.974Z")
	},
	"lastStableRecoveryTimestamp" : Timestamp(1703577061, 1),
	"electionCandidateMetrics" : {
		"lastElectionReason" : "electionTimeout",
		"lastElectionDate" : ISODate("2023-12-26T07:42:21.741Z"),
		"electionTerm" : NumberLong(6),
		"lastCommittedOpTimeAtElection" : {
			"ts" : Timestamp(0, 0),
			"t" : NumberLong(-1)
		},
		"lastSeenOpTimeAtElection" : {
			"ts" : Timestamp(1703576189, 1),
			"t" : NumberLong(5)
		},
		"numVotesNeeded" : 2,
		"priorityAtElection" : 1,
		"electionTimeoutMillis" : NumberLong(10000),
		"numCatchUpOps" : NumberLong(0),
		"newTermStartDate" : ISODate("2023-12-26T07:42:21.788Z"),
		"wMajorityWriteAvailabilityDate" : ISODate("2023-12-26T07:42:22.347Z")
	},
	"members" : [
		{
			"_id" : 2,
			"name" : "localhost:27017",
			"health" : 1,
			"state" : 1,
			"stateStr" : "PRIMARY",
			"uptime" : 553,
			"optime" : {
				"ts" : Timestamp(1703577081, 1),
				"t" : NumberLong(6)
			},
			"optimeDate" : ISODate("2023-12-26T07:51:21Z"),
			"lastAppliedWallTime" : ISODate("2023-12-26T07:51:21.974Z"),
			"lastDurableWallTime" : ISODate("2023-12-26T07:51:21.974Z"),
			"syncSourceHost" : "",
			"syncSourceId" : -1,
			"infoMessage" : "",
			"electionTime" : Timestamp(1703576541, 1),
			"electionDate" : ISODate("2023-12-26T07:42:21Z"),
			"configVersion" : 17,
			"configTerm" : 6,
			"self" : true,
			"lastHeartbeatMessage" : ""
		},
		{
			"_id" : 3,
			"name" : "localhost:27018",
			"health" : 1,
			"state" : 2,
			"stateStr" : "SECONDARY",
			"uptime" : 88,
			"optime" : {
				"ts" : Timestamp(1703577071, 1),
				"t" : NumberLong(6)
			},
			"optimeDurable" : {
				"ts" : Timestamp(1703577071, 1),
				"t" : NumberLong(6)
			},
			"optimeDate" : ISODate("2023-12-26T07:51:11Z"),
			"optimeDurableDate" : ISODate("2023-12-26T07:51:11Z"),
			"lastAppliedWallTime" : ISODate("2023-12-26T07:51:21.974Z"),
			"lastDurableWallTime" : ISODate("2023-12-26T07:51:21.974Z"),
			"lastHeartbeat" : ISODate("2023-12-26T07:51:20.928Z"),
			"lastHeartbeatRecv" : ISODate("2023-12-26T07:51:20.928Z"),
			"pingMs" : NumberLong(0),
			"lastHeartbeatMessage" : "",
			"syncSourceHost" : "localhost:27017",
			"syncSourceId" : 2,
			"infoMessage" : "",
			"configVersion" : 17,
			"configTerm" : 6
		},
		{
			"_id" : 4,
			"name" : "localhost:27019",
			"health" : 1,
			"state" : 2,
			"stateStr" : "SECONDARY",
			"uptime" : 65,
			"optime" : {
				"ts" : Timestamp(1703577071, 1),
				"t" : NumberLong(6)
			},
			"optimeDurable" : {
				"ts" : Timestamp(1703577071, 1),
				"t" : NumberLong(6)
			},
			"optimeDate" : ISODate("2023-12-26T07:51:11Z"),
			"optimeDurableDate" : ISODate("2023-12-26T07:51:11Z"),
			"lastAppliedWallTime" : ISODate("2023-12-26T07:51:21.974Z"),
			"lastDurableWallTime" : ISODate("2023-12-26T07:51:21.974Z"),
			"lastHeartbeat" : ISODate("2023-12-26T07:51:20.929Z"),
			"lastHeartbeatRecv" : ISODate("2023-12-26T07:51:20.981Z"),
			"pingMs" : NumberLong(0),
			"lastHeartbeatMessage" : "",
			"syncSourceHost" : "localhost:27018",
			"syncSourceId" : 3,
			"infoMessage" : "",
			"configVersion" : 17,
			"configTerm" : 6
		}
	],
	"ok" : 1,
	"$clusterTime" : {
		"clusterTime" : Timestamp(1703577081, 1),
		"signature" : {
			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
			"keyId" : NumberLong(0)
		}
	},
	"operationTime" : Timestamp(1703577081, 1)
}

Kết luận

Replica Set trong MongoDB là một tính năng quan trọng giúp tăng cường khả năng chịu lỗi và khả năng mở rộng của hệ thống cơ sở dữ liệu. Bằng cách cấu hình và sử dụng đúng cách, chúng ta có thể đạt được sự ổn định và hiệu suất cao. Hãy tận dụng sức mạnh của Replica Set để xây dựng hệ thống MongoDB mạnh mẽ và linh hoạt.

Cảm ơn mọi người đã đọc.

The post Chức năng replica set trong MongoDB (P2) appeared first on Tomoshare.

Tối ưu hóa SEO với Sitemap

Le Van Ninh — Wed, 27 Dec 2023 04:31:22 +0000

SEO (Search Engine Optimization) đóng vai trò quan trọng trong việc đưa trang web của bạn đến gần người dùng và công cụ tìm kiếm. Một công cụ hữu ích trong chiến lược SEO của bạn là sitemap.

Mục đích của Sitemap

Hiệu suất Indexing và SEO
Giúp công cụ tìm kiếm hiểu rõ cấu trúc và nội dung của trang web. Điều này giúp tối ưu hóa hiệu suất indexing, đặc biệt là khi trang web có nhiều nội dung hoặc cấu trúc phức tạp.
Ưu tiên Indexing
Thông qua các thông tin như lastmod (thời điểm sửa đổi gần nhất), changefreq (tần suất thay đổi), và priority (độ ưu tiên), sitemap giúp bạn quyết định trang nào quan trọng hơn và nên được cập nhật thường xuyên hơn.
Hỗ trợ trải nghiệm người dùng
Sitemap không chỉ hỗ trợ công cụ tìm kiếm mà còn cải thiện trải nghiệm người dùng bằng cách cung cấp các liên kết dẫn đến các trang quan trọng.
Điều hướng Crawl bổ sung
Đối với các trang web có cấu trúc phức tạp, sitemap giúp điều hướng crawl bổ sung, đặc biệt là đối với các trang được tạo ra bằng JavaScript.

Sử dụng Sitemap trong ROR

YAML

# Gemfile

gem 'sitemap_generator'

Ruby

# config/sitemap.rb

require 'rubygems'
require 'sitemap_generator'

SitemapGenerator::Sitemap.default_host = 'https://yourdomain.com'
SitemapGenerator::Sitemap.create do
  add '/', changefreq: 'daily', priority: 1.0
  add '/page', changefreq: 'weekly', priority: 0.8
  # Thêm các trang khác và thông tin
end

# ping công cụ tìm kiếm google và bing để thông báo về sự thay đổi của sitemap
SitemapGenerator::Sitemap.ping_search_engines

Zsh

# Tạo file sitemap.xml

rake sitemap:create #=> public/sitemap.xml

YAML

# public/robots.txt

Sitemap: https://yourdomain/sitemap.xml

Lưu ý khi tạo Sitemap

Phân chia công việc tạo sitemap thành các nhiệm vụ nhỏ để giảm gánh nặng hệ thống.
Xác định các tiêu chí để chỉ tạo sitemap cho những trang quan trọng nhất, giảm độ lớn của sitemap.
Tối ưu cơ sở dữ liệu để đảm bảo tìm kiếm và truy xuất dữ liệu một cách hiệu quả.
Theo dõi quá trình tạo sitemap và lưu lại log để giám sát và điều chỉnh khi cần thiết.
Nên tạo sitemap vào những thời điểm ít người truy cập nhất để giảm tác động đến hiệu suất hệ thống và người dùng.

Kết luận

Sitemap là chìa khóa quan trọng cho chiến lược SEO và hiệu suất web. Bằng cách đặt độ ưu tiên và tuân thủ lưu ý quan trọng, sitemap không chỉ tối ưu hóa hiệu suất hệ thống mà còn định hình một chiến lược SEO thành công.

Cảm ơn bạn đã đọc.

The post Tối ưu hóa SEO với Sitemap appeared first on Tomoshare.

Giới thiệu MongoDB (P1)

Le Van Ninh — Wed, 29 Nov 2023 04:16:59 +0000

MongoDB là gì?

MongoDB là một hệ quản trị cơ sở dữ liệu phi quan hệ (NoSQL) mã nguồn mở, được thiết kế để lưu trữ và truy xuất dữ liệu trong các tài liệu JSON có độ linh hoạt cao.

Cấu trúc Dữ liệu:

BSON (Binary JSON): MongoDB sử dụng định dạng BSON để lưu trữ dữ liệu. BSON tương tự như JSON nhưng hỗ trợ các kiểu dữ liệu như số nguyên, số thực, chuỗi, mảng, đối tượng, ngày giờ, và các kiểu dữ liệu khác.

Cài đặt:

MacOS

Zsh

brew tap mongodb/brew
brew install mongodb-community
brew services start mongodb-community

Install MongoDB Shell

Zsh

/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"
brew tap mongodb/brew
brew install mongodb-community-shell

Các câu lệnh

Tạo phiên làm việc MongoDB Shell

Zsh

$ mongo

Hiển thị danh sách các database

Zsh

> show dbs
admin                      0.000GB
ai_analyze_idea            0.000GB
config                     0.000GB
local                      0.000GB

Chọn database

Zsh

use <db name>

# Ex:
> use ai_analyze_idea
switched to db ai_analyze_idea

Tạo một collection trong database

Zsh db.createCollection("tests") { "ok" : 1 }" style="color:#f6f6f4;display:none" aria-label="Copy" class="code-block-pro-copy-button">

db.createCollection("collection name")

# Ex:
> db.createCollection("tests")
{ "ok" : 1 }

Thêm dữ liệu vào collection

Zsh db.tests.insert([{name: "Ninh Lee 1", age: 24, city: "Da Nang 1"}, {name: "Ninh Lee 2", age: 24, city: "Da Nang 2"}]) BulkWriteResult({ "writeErrors" : [ ], "writeConcernErrors" : [ ], "nInserted" : 2, "nUpserted" : 0, "nMatched" : 0, "nModified" : 0, "nRemoved" : 0, "upserted" : [ ] })" style="color:#f6f6f4;display:none" aria-label="Copy" class="code-block-pro-copy-button">

db..insert({: value1, <field2>: value2, ...})
db..insert([{: value1, <field2>: value2, ...}])

# Ex:
> db.tests.insert({name: "Ninh Lee", age: 24, city: "Da Nang"})
WriteResult({ "nInserted" : 1 })

> db.tests.insert([{name: "Ninh Lee 1", age: 24, city: "Da Nang 1"}, {name: "Ninh Lee 2", age: 24, city: "Da Nang 2"}])
BulkWriteResult({
	"writeErrors" : [ ],
	"writeConcernErrors" : [ ],
	"nInserted" : 2,
	"nUpserted" : 0,
	"nMatched" : 0,
	"nModified" : 0,
	"nRemoved" : 0,
	"upserted" : [ ]
})

Select all documents

Zsh db.test.find().sort({name: -1}) { "_id" : ObjectId("65660ccff88bc6a455d60d72"), "name" : "Ninh Lee 5", "age" : 26, "city" : "Da Nang 1" } { "_id" : ObjectId("65660ccff88bc6a455d60d73"), "name" : "Ninh Lee 4", "age" : 30, "city" : "Da Nang 2" } { "_id" : ObjectId("65660c9ef88bc6a455d60d71"), "name" : "Ninh Lee 3", "age" : 25, "city" : "Da Nang 2" } { "_id" : ObjectId("65660c9ef88bc6a455d60d70"), "name" : "Ninh Lee 2", "age" : 26, "city" : "Da Nang 1" } { "_id" : ObjectId("65660864f88bc6a455d60d6e"), "name" : "Ninh Lee 1", "age" : 24, "city" : "Da Nang 1" } { "_id" : ObjectId("65660837f88bc6a455d60d6d"), "name" : "Ninh Lee", "age" : 25, "city" : "Da Nang" }" style="color:#f6f6f4;display:none" aria-label="Copy" class="code-block-pro-copy-button">

db..find()

# Ex:
> db.tests.find()
{ "_id" : ObjectId("65660837f88bc6a455d60d6d"), "name" : "Ninh Lee", "age" : 24, "city" : "Da Nang" }
{ "_id" : ObjectId("65660864f88bc6a455d60d6e"), "name" : "Ninh Lee 1", "age" : 24, "city" : "Da Nang 1" }
{ "_id" : ObjectId("65660864f88bc6a455d60d6f"), "name" : "Ninh Lee 2", "age" : 24, "city" : "Da Nang 2" }
> db.test.find().sort({name: -1})
{ "_id" : ObjectId("65660ccff88bc6a455d60d72"), "name" : "Ninh Lee 5", "age" : 26, "city" : "Da Nang 1" }
{ "_id" : ObjectId("65660ccff88bc6a455d60d73"), "name" : "Ninh Lee 4", "age" : 30, "city" : "Da Nang 2" }
{ "_id" : ObjectId("65660c9ef88bc6a455d60d71"), "name" : "Ninh Lee 3", "age" : 25, "city" : "Da Nang 2" }
{ "_id" : ObjectId("65660c9ef88bc6a455d60d70"), "name" : "Ninh Lee 2", "age" : 26, "city" : "Da Nang 1" }
{ "_id" : ObjectId("65660864f88bc6a455d60d6e"), "name" : "Ninh Lee 1", "age" : 24, "city" : "Da Nang 1" }
{ "_id" : ObjectId("65660837f88bc6a455d60d6d"), "name" : "Ninh Lee", "age" : 25, "city" : "Da Nang" }

Cập nhật document

Zsh db.tests.find() { "_id" : ObjectId("65660837f88bc6a455d60d6d"), "name" : "Ninh Lee", "age" : 25, "city" : "Da Nang" } { "_id" : ObjectId("65660864f88bc6a455d60d6e"), "name" : "Ninh Lee 1", "age" : 24, "city" : "Da Nang 1" } { "_id" : ObjectId("65660864f88bc6a455d60d6f"), "name" : "Ninh Lee 2", "age" : 24, "city" : "Da Nang 2" }" style="color:#f6f6f4;display:none" aria-label="Copy" class="code-block-pro-copy-button">

db..update({}, {<update>})

# Ex:
> db.tests.update({name: "Ninh Lee"}, {$set: {age: 25}})
WriteResult({ "nMatched" : 1, "nUpserted" : 0, "nModified" : 1 })
> db.tests.find()
{ "_id" : ObjectId("65660837f88bc6a455d60d6d"), "name" : "Ninh Lee", "age" : 25, "city" : "Da Nang" }
{ "_id" : ObjectId("65660864f88bc6a455d60d6e"), "name" : "Ninh Lee 1", "age" : 24, "city" : "Da Nang 1" }
{ "_id" : ObjectId("65660864f88bc6a455d60d6f"), "name" : "Ninh Lee 2", "age" : 24, "city" : "Da Nang 2" }

Delete document

Zsh db.tests.find() { "_id" : ObjectId("65660837f88bc6a455d60d6d"), "name" : "Ninh Lee", "age" : 25, "city" : "Da Nang" } { "_id" : ObjectId("65660864f88bc6a455d60d6e"), "name" : "Ninh Lee 1", "age" : 24, "city" : "Da Nang 1" }" style="color:#f6f6f4;display:none" aria-label="Copy" class="code-block-pro-copy-button">

db..remove({})

# Ex:
> db.tests.remove({name: 'Ninh Lee 2'})
WriteResult({ "nRemoved" : 1 })
> db.tests.find()
{ "_id" : ObjectId("65660837f88bc6a455d60d6d"), "name" : "Ninh Lee", "age" : 25, "city" : "Da Nang" }
{ "_id" : ObjectId("65660864f88bc6a455d60d6e"), "name" : "Ninh Lee 1", "age" : 24, "city" : "Da Nang 1" }

Index

Zsh

# 1 sắp xếp tăng dần
# -1 sắp xếp giảm dần
db..createIndex({ <field>: 1 })
db..createIndex({ <field1>: 1, <field2>: -1 })

# Ex:
> db.tests.createIndex({name: 1, age: -1})
{
	"numIndexesBefore" : 1,
	"numIndexesAfter" : 2,
	"createdCollectionAutomatically" : false,
	"ok" : 1
}

Zsh

db..getIndexes()

# Ex:
> db.tests.getIndexes()
[
	{
		"v" : 2,
		"key" : {
			"_id" : 1
		},
		"name" : "_id_"
	},
	{
		"v" : 2,
		"key" : {
			"name" : 1,
			"age" : -1
		},
		"name" : "name_1_age_-1"
	}
]

Zsh") # Ex: > db.tests.dropIndex("name_1_age_-1") { "nIndexesWas" : 2, "ok" : 1 } > db.tests.getIndexes() [ { "v" : 2, "key" : { "_id" : 1 }, "name" : "_id_" } ]" style="color:#f6f6f4;display:none" aria-label="Copy" class="code-block-pro-copy-button">

db..dropIndex("")

# Ex:
> db.tests.dropIndex("name_1_age_-1")
{ "nIndexesWas" : 2, "ok" : 1 }
> db.tests.getIndexes()
[ { "v" : 2, "key" : { "_id" : 1 }, "name" : "_id_" } ]

Explain query

Zsh

db..explain().find({})

# Ex:
> db.tests.explain().find({ age: 25 }).sort({ name: 1 })
{
	"explainVersion" : "1",
	"queryPlanner" : {
		"namespace" : "ai_analyze_idea.tests",
		"indexFilterSet" : false,
		"parsedQuery" : {
			"age" : {
				"$eq" : 25
			}
		},
		"queryHash" : "397F81F6",
		"planCacheKey" : "EF61D479",
		"maxIndexedOrSolutionsReached" : false,
		"maxIndexedAndSolutionsReached" : false,
		"maxScansToExplodeReached" : false,
		"winningPlan" : {
			"stage" : "FETCH",
			"filter" : {
				"age" : {
					"$eq" : 25
				}
			},
			"inputStage" : {
				"stage" : "IXSCAN",
				"keyPattern" : {
					"name" : 1,
					"age" : -1
				},
				"indexName" : "name_1_age_-1",
				"isMultiKey" : false,
				"multiKeyPaths" : {
					"name" : [ ],
					"age" : [ ]
				},
				"isUnique" : false,
				"isSparse" : false,
				"isPartial" : false,
				"indexVersion" : 2,
				"direction" : "forward",
				"indexBounds" : {
					"name" : [
						"[MinKey, MaxKey]"
					],
					"age" : [
						"[MaxKey, MinKey]"
					]
				}
			}
		},
		"rejectedPlans" : [ ]
	},
	"command" : {
		"find" : "tests",
		"filter" : {
			"age" : 25
		},
		"sort" : {
			"name" : 1
		},
		"$db" : "ai_analyze_idea"
	},
	"serverInfo" : {
		"host" : "192.168.0.108",
		"port" : 27017,
		"version" : "6.0.5",
		"gitVersion" : "c9a99c120371d4d4c52cbb15dac34a36ce8d3b1d"
	},
	"serverParameters" : {
		"internalQueryFacetBufferSizeBytes" : 104857600,
		"internalQueryFacetMaxOutputDocSizeBytes" : 104857600,
		"internalLookupStageIntermediateDocumentMaxSizeBytes" : 104857600,
		"internalDocumentSourceGroupMaxMemoryBytes" : 104857600,
		"internalQueryMaxBlockingSortMemoryUsageBytes" : 104857600,
		"internalQueryProhibitBlockingMergeOnMongoS" : 0,
		"internalQueryMaxAddToSetBytes" : 104857600,
		"internalDocumentSourceSetWindowFieldsMaxMemoryBytes" : 104857600
	},
	"ok" : 1
}

Kết luận

Trên đây là một cái nhìn tổng quan về MongoDB, một hệ quản trị cơ sở dữ liệu NoSQL mạnh mẽ và linh hoạt. Tích hợp BSON, khả năng mở rộng và index hiệu quả là những điểm mạnh giúp MongoDB trở thành lựa chọn hàng đầu cho nhiều ứng dụng hiện đại.

Trong phần tiếp theo, chúng ta sẽ đi sâu vào các khía cạnh quan trọng khác của MongoDB, bao gồm Aggregation Framework, quản lý bảo mật, và tối ưu hóa hiệu suất,…

The post Giới thiệu MongoDB (P1) appeared first on Tomoshare.

Localstack, giả lập môi trường AWS.

Le Van Ninh — Wed, 15 Nov 2023 09:42:02 +0000

Mục đích sử dụng:

Localstack mô phỏng lại môi trường AWS trên máy local.

Nó giúp phát triển và kiểm thử các giải pháp như microservices hoặc functions và sử dụng các dịch vụ có trong AWS.

Các dịch vụ AWS trên Localstack:

API Gateway,
Kinesis, 
DynamoDB, 
DynamoDB Streams, 
Elasticsearch, 
S3, 
Firehose, 
Lambda, 
SNS, 
SQS, 
Redshift, 
ES (Elasticsearch Service), 
SES, 
Route53, 
CloudFormation, 
CloudWatch, 
SSM, 
SecretsManager

Cài đặt và sử dụng:

Cài đặt localstack:

YAML

# docker-compose.yml

version: "3.2"
services:
  localstack:
    image: localstack/localstack:latest
    container_name: localstack_demo
    ports:
      # - "127.0.0.1:4566:4566" # LocalStack Gateway
      - "127.0.0.1:4510-4559:4510-4559" # external services port range
      - "0.0.0.0:4566:4566"
    environment:
      - SERVICES=s3
      - DEBUG=1
      - DATA_DIR=/tmp/localstack/data
    volumes:
      - "./.localstack:/var/lib/localstack"
      - "/var/run/docker.sock:/var/run/docker.sock"

Start localstack:

Zsh

docker-compose up -d

Tạo profile cho Localstack:

Zsh

aws configure --profile localstack
 
AWS Access Key ID [****************demo]: dummy
AWS Secret Access Key [****************demo]: dummy
Default region name [ap-northeast-1]: ap-northeast-1
Default output format [json]: json

Zsh

vi ~/.aws/config

VimL

[profile localstack]
output = json
region = ap-northeast-1

Zsh

vi ~/.aws/credentials

VimL

[localstack]
aws_access_key_id = dummy
aws_secret_access_key = dummy

Tạo S3 trong Localstack:

Zsh

aws --endpoint-url=http://localhost:4566 --profile localstack s3api create-bucket --bucket test-bucket --create-bucket-configuration LocationConstraint=ap-northeast-1

# Kết quả:
{
    "Location": "http://test-bucket.s3.localhost.localstack.cloud:4566/"
}

Zsh

aws s3 ls --endpoint-url=http://localhost:4566 --profile localstack

# Kết quả:
2023-11-15 10:24:40 test-bucket

YAML

# .env

# Cả 2 endpoint đều hoạt động với Localstack ở local.
#S3_ENDPOINT='http://localhost:4566'
S3_ENDPOINT='http://test-bucket.s3.localhost.localstack.cloud:4566/'
S3_AWS_ACCESS_KEY_ID='dummy'
S3_AWS_SECRET_KEY='dummy'
S3_AWS_BUCKET_NAME='test-bucket'

Tạo Dynamodb trong Localstack:

YAML

version: "3.2"
services:
  localstack:
    image: localstack/localstack:latest
    container_name: localstack_demo
    ports:
      # - "127.0.0.1:4566:4566" # LocalStack Gateway
      - "127.0.0.1:4510-4559:4510-4559" # external services port range
      - "0.0.0.0:4566:4566"
    environment:
      - SERVICES=dynamodb
      - DEBUG=1
      - DATA_DIR=/tmp/localstack/data
    volumes:
      - "./.localstack:/var/lib/localstack"
      - "/var/run/docker.sock:/var/run/docker.sock"

Zsh

aws dynamodb create-table \
    --table-name test \
    --key-schema AttributeName=id,KeyType=HASH \
    --attribute-definitions AttributeName=id,AttributeType=S \
    --billing-mode PAY_PER_REQUEST \
    --region ap-northeast-1 \
    --endpoint-url=http://localhost:4566 \
    --profile localstack

# Kết quả:
{
    "TableDescription": {
        "AttributeDefinitions": [
            {
                "AttributeName": "id",
                "AttributeType": "S"
            }
        ],
        "TableName": "test",
        "KeySchema": [
            {
                "AttributeName": "id",
                "KeyType": "HASH"
            }
        ],
        "TableStatus": "ACTIVE",
        "CreationDateTime": "2023-11-15T11:29:05.597000+07:00",
        "ProvisionedThroughput": {
            "LastIncreaseDateTime": "1970-01-01T07:00:00+07:00",
            "LastDecreaseDateTime": "1970-01-01T07:00:00+07:00",
            "NumberOfDecreasesToday": 0,
            "ReadCapacityUnits": 0,
            "WriteCapacityUnits": 0
        },
        "TableSizeBytes": 0,
        "ItemCount": 0,
        "TableArn": "arn:aws:dynamodb:ap-northeast-1:000000000000:table/test",
        "TableId": "fb25d41f-0563-4be9-8b21-75bc3b7006b9",
        "BillingModeSummary": {
            "BillingMode": "PAY_PER_REQUEST",
            "LastUpdateToPayPerRequestDateTime": "2023-11-15T11:29:05.597000+07:00"
        }
    }
}

Bạn muốn sử dụng dịch vụ nào của AWS thì thêm dịch vụ đấy vào SERVICES trong file docker-compose.yml.

Tài liệu tham khảo: https://docs.localstack.cloud/

The post Localstack, giả lập môi trường AWS. appeared first on Tomoshare.

Giải quyết N+1 trong rails

Le Van Ninh — Wed, 25 Oct 2023 04:32:30 +0000

N+1 là gì?

N+1 query là một vấn đề hiệu suất phổ biến trong các ứng dụng Ruby on Rails. Nó xảy ra khi bạn truy vấn một bảng để lấy dữ liệu, sau đó truy vấn bảng khác để lấy dữ liệu bổ sung cho mỗi đối tượng trong bảng đầu tiên.

Ví dụ: Bạn có bảng posts và bảng comments

class Post < ActiveRecord::Base 
  has_many :comments
end

class Comment < ActiveRecord::Base
  belongs_to :post
end

Bạn muốn lấy danh sách tất cả các bài đăng cùng với danh sách tất cả các bình luận của chúng, bạn có thể viết mã như sau:

@posts = Post.limit(5) 
@posts.each do |post| 
  @post.comments
end
# Total: 6 query 
# 1 query cho post 
# 5 query cho mỗi lần each

Đoạn code này sẽ tạo ra hai truy vấn SQL:
Một truy vấn để lấy tất cả các bài đăng, và một truy vấn cho mỗi bài đăng để lấy tất cả các bình luận của nó. Điều này có thể dẫn đến hiệu suất kém, đặc biệt nếu bạn có nhiều bài đăng hoặc bình luận.

Cách giải quyết N+1

1. Sử dụng includes hoặc eager_load

Phương thức includes hoặc eager_load cho phép bạn tải trước dữ liệu từ relation khi bạn truy cập từ một bảng.

Ví dụ:

@posts = Post.includes(:comments) # Total: 1 query
@posts = Post.eager_load(:comments) # Total: 1 query

2. Sử dụng preload

preload là một phương pháp giúp giảm thiểu vấn đề n+1 query trong Rails. Khi bạn sử dụng preload, Rails sẽ thực hiện hai truy vấn riêng biệt: một truy vấn để lấy tất cả các dữ liệu cần thiết và một truy vấn để lấy dữ liệu liên quan. Sau đó, Rails sẽ kết hợp dữ liệu từ hai truy vấn này mà không cần thực hiện thêm bất kỳ truy vấn nào nữa, giảm thiểu số lần truy vấn đến cơ sở dữ liệu.

Ví dụ:

@posts = Post.preload(:comments)
@posts = Post.preload(:comments).where(published: true)

@posts = Post.all
ActiveRecord::Associations::Preloader.new.preload(@posts, :comments)

3. Sử dụng joins

Sử dụng joins để kết hợp các bảng và truy vấn dữ liệu cùng một lúc. Điều này giúp tránh việc thực hiện nhiều truy vấn riêng lẻ.

Ví dụ:

@posts = Post.joins(:comments).select('posts.*, comments.body') # rails 6
@posts = Post.joins(:comments)
             .select(posts: {}, comments: [:body]) # rails 7

4. Sử dụng pluck hoặc select

Thay vì lấy toàn bộ đối tượng, sử dụng pluck hoặc select để chỉ lấy những cột dữ liệu cần thiết.

Ví dụ:

# Sử dụng pluck
@post_ids = Post.where(created_at: 1.week.ago..).pluck(:id)
@comments = Post.joins(:comments)
                .where(created_at: 1.week.ago..)
		.pluck('comments.id', 'comments.body')

# Sử dụng select
@comments = Comment.select(:id, :body).where(id: @post_ids)
@posts = Post.joins(:comments).select('posts.*, comments.body') # rails 6
@posts = Post.joins(:comments)
             .select(posts: {}, comments: [:body]) # rails 7

5. Sử dụng scope

Khi bạn muốn sử dụng preload với một phạm vi (scope) trong Rails, bạn có thể kết hợp preload với phạm vi đó để tối ưu hóa truy vấn dữ liệu của mình.

Ví dụ:

class Post < ActiveRecord::Base 
  has_many :comments

  scope :published, -> { where(published: true) }
end

@posts = Post.eager_load(:comments).published
@posts = Post.published.preload(:comments)

@posts_pushlished = Post.published
ActiveRecord::Associations::Preloader.new.preload(
  @posts_pushlished,
  :comments
)

@posts = Post.published.includes(:comments)
@posts = Post.published.joins(:comments)

Kết luận

Bằng cách sử dụng các phương pháp như includes, eager_load, preload, joins, pluck, và select, bạn có thể giải quyết vấn đề N+1 query trong Rails một cách hiệu quả. Điều này không chỉ cải thiện hiệu suất ứng dụng của bạn mà còn giúp tối ưu hóa truy vấn cơ sở dữ liệu và tăng tốc độ tải trang.

The post Giải quyết N+1 trong rails appeared first on Tomoshare.