python不用數(shù)據(jù)庫，達(dá)到快速存儲數(shù)據(jù)的方法

Yy3318q 2023-03-24 發(fā)布于廣西

展開全文

在Python中，數(shù)據(jù)庫并不是存儲大量結(jié)構(gòu)化數(shù)據(jù)的最簡單解決方案。dataset提供了一個簡單的抽象層，可以刪除大多數(shù)直接的 SQL 語句，而無需完整的 ORM 模型，數(shù)據(jù)庫可以像 JSON 文件或 NoSQL 存儲一樣使用。

dataset是用于快速存儲數(shù)據(jù)的最簡單方法。

特點(diǎn)

自動架構(gòu)：如果寫入數(shù)據(jù)庫中不存在的表或列，它將自動創(chuàng)建。
Upserts：創(chuàng)建或更新記錄，具體取決于是否可以找到現(xiàn)有版本。
用于簡單查詢的查詢助手，例如all表中的行或distinct一組列中的所有值。
兼容性：建立在SQLAlchemy之上，dataset適用于所有主要數(shù)據(jù)庫，例如 SQLite、PostgreSQL 和 MySQL。

連接數(shù)據(jù)庫

要連接到數(shù)據(jù)庫，您需要通過其URL來識別它，以下是不同數(shù)據(jù)庫后端的幾個示例：

# connecting to a SQLite databasedb = dataset.connect('sqlite:///mydatabase.db')

# connecting to a MySQL database with user and passworddb = dataset.connect('mysql://user:password@localhost/mydatabase')

# connecting to a PostgreSQL databasedb = dataset.connect('postgresql://scott:tiger@localhost:5432/mydatabase')

存儲數(shù)據(jù)

要存儲一些數(shù)據(jù)，您需要獲得對表的引用

# get a reference to the table 'user'table = db['user']

將數(shù)據(jù)存儲在只需傳遞一個dict即可插入。不需要創(chuàng)建列名稱和年齡——數(shù)據(jù)集會自動執(zhí)行此操作：

# Insert a new record.table.insert(dict(name='John Doe', age=46, country='China'))

# dataset will create 'missing' columns any time you insert a dict with an unknown keytable.insert(dict(name='Jane Doe', age=37, country='France', gender='female'))

更新現(xiàn)有條目也很容易：

table.update(dict(name='John Doe', age=47), ['name'])

使用第一列中的值作為第二個參數(shù)過濾器給出的過濾器列列表。如果您不想更新特定值，只需使用自動生成的id列。

使用

您可以將一組數(shù)據(jù)庫更新分組到一個事務(wù)中。在這種情況下，所有更新都會立即提交，或者在異常情況下，所有更新都會被還原。通過上下文管理器支持事務(wù)，因此可以通過with 語句使用它們：

with dataset.connect() as tx: tx['user'].insert(dict(name='John Doe', age=46, country='China'))

通過調(diào)用方法獲得相同的功能begin()， commit()并rollback() 明確：

db = dataset.connect()db.begin()try:    db['user'].insert(dict(name='John Doe', age=46, country='China'))    db.commit()except:    db.rollback()

也支持嵌套事務(wù)：

db = dataset.connect()with db as tx1:    tx1['user'].insert(dict(name='John Doe', age=46, country='China'))    with db as tx2:        tx2['user'].insert(dict(name='Jane Doe', age=37, country='France', gender='female'))

檢查數(shù)據(jù)庫和表

在處理未知數(shù)據(jù)庫時，我們先檢查它們的結(jié)構(gòu)。找出數(shù)據(jù)庫中存儲了哪些表：

>>> print(db.tables)[u'user']

列出表中所有可用的列user：

>>> print(db['user'].columns)[u'id', u'country', u'age', u'name', u'gender']

使用len()獲得表中的總行數(shù)：

>>> print(len(db['user']))2

從表中讀取數(shù)據(jù)

現(xiàn)在讓我們從表中獲取一些真實數(shù)據(jù)：

users = db['user'].all()

如果我們只是想遍歷表中的所有行，我們可以省略all()：

for user in db['user']:   print(user['age'])

我們可以使用find()搜索特定條目find_one()：

# All users from Chinachinese_users = table.find(country='China')

# Get a specific userjohn = table.find_one(name='John Doe')

# Find multiple at oncewinners = table.find(id=[1, 3, 7])

# Find by comparison operatorelderly_users = table.find(age={'>=': 70})possible_customers = table.find(age={'between': [21, 80]})

# Use the underlying SQLAlchemy directlyelderly_users = table.find(table.table.columns.age >= 70)

使用 distinct()我們可以在一個或多個列中獲取一組具有唯一值的行：

# Get one user per countrydb['user'].distinct('country')

最后，您可以使用row_type參數(shù)來選擇返回結(jié)果的數(shù)據(jù)類型：

import datasetfrom stuf import stuf

db = dataset.connect('sqlite:///mydatabase.db', row_type=stuf)

現(xiàn)在內(nèi)容將在對象中返回stuf（基本上，dict 其元素可以作為屬性 ( item.name) 以及索引 ( item['name']) 訪問的對象。

運(yùn)行自定義 SQL 查詢

當(dāng)然，您使用數(shù)據(jù)庫的主要原因是您希望使用 SQL 查詢的全部功能。下面是你如何運(yùn)行它們dataset：

result = db.query('SELECT country, COUNT(*) c FROM user GROUP BY country')for row in result:   print(row['country'], row['c'])

該query()方法還可用于訪問底層的SQLAlchemy 核心 API，它允許以編程方式構(gòu)建更復(fù)雜的查詢：

table = db['user'].tablestatement = table.select(table.c.name.like('%John%'))result = db.query(statement)

本站是提供個人知識管理的網(wǎng)絡(luò)存儲空間，所有內(nèi)容均由用戶發(fā)布，不代表本站觀點(diǎn)。請注意甄別內(nèi)容中的聯(lián)系方式、誘導(dǎo)購買等信息，謹(jǐn)防詐騙。如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容，請點(diǎn)擊一鍵舉報。

轉(zhuǎn)藏 分享

QQ空間 QQ好友新浪微博微信

獻(xiàn)花（0） +1

來自： Yy3318q > 《python》

舉報/認(rèn)領(lǐng)