Как создать представление SQL с помощью SQLAlchemy?

84

Есть ли "питонический" способ (я имею в виду, без "чистого SQL" запроса) для определения представления SQL с помощью SQLAlchemy?

Тибо Д.
источник

Ответы:

69

Обновление: см. Также рецепт использования SQLAlchemy здесь

Насколько мне известно, создание представления (нематериализованного только для чтения) не поддерживается из коробки. Но добавить эту функциональность в SQLAlchemy 0.7 просто (аналогично примеру, который я привел здесь ). Вам просто нужно написать расширение компилятора CreateView . С помощью этого расширения вы можете написать (при условии, что tэто объект таблицы со столбцом id)

createview = CreateView('viewname', t.select().where(t.c.id>5))
engine.execute(createview)

v = Table('viewname', metadata, autoload=True)
for r in engine.execute(v.select()):
    print r

Вот рабочий пример:

from sqlalchemy import Table
from sqlalchemy.ext.compiler import compiles
from sqlalchemy.sql.expression import Executable, ClauseElement

class CreateView(Executable, ClauseElement):
    def __init__(self, name, select):
        self.name = name
        self.select = select

@compiles(CreateView)
def visit_create_view(element, compiler, **kw):
    return "CREATE VIEW %s AS %s" % (
         element.name,
         compiler.process(element.select, literal_binds=True)
         )

# test data
from sqlalchemy import MetaData, Column, Integer
from sqlalchemy.engine import create_engine
engine = create_engine('sqlite://')
metadata = MetaData(engine)
t = Table('t',
          metadata,
          Column('id', Integer, primary_key=True),
          Column('number', Integer))
t.create()
engine.execute(t.insert().values(id=1, number=3))
engine.execute(t.insert().values(id=9, number=-3))

# create view
createview = CreateView('viewname', t.select().where(t.c.id>5))
engine.execute(createview)

# reflect view and print result
v = Table('viewname', metadata, autoload=True)
for r in engine.execute(v.select()):
    print r

Если вы хотите, вы также можете специализироваться на диалекте, например

@compiles(CreateView, 'sqlite')
def visit_create_view(element, compiler, **kw):
    return "CREATE VIEW IF NOT EXISTS %s AS %s" % (
         element.name,
         compiler.process(element.select, literal_binds=True)
         )
Стефан
источник
Могу ли я использовать карту v с orm.mapper? вроде v = Table('viewname', metadata, autoload=True) class ViewName(object): def __init__(self, name): self.name = name mapper(ViewName, v) выше возможно? Потому что я буду использовать View с сессией.
Syed Habib M
1
@SyedHabibM: да, это возможно. Однако вы должны вручную установить первичный ключ, например, orm.mapper(ViewName, v, primary_key=pk, properties=prop)где pkи propявляются ваш первичный ключ (или ключи) и свойства соответственно. См. Docs.sqlalchemy.org/en/latest/orm/… .
Стефан
2
@SyedHabibM: вы можете сделать то, что упомянул Стефан, также, когда вы используете автоматически загружаемые таблицы, переопределив спецификацию столбца и указав PK:v = Table('viewname', metadata, Column('my_id_column', Integer, primary_key=True), autoload=True)
van
@SyedHabibMI ответил на ваш соответствующий вопрос stackoverflow.com/q/20518521/92092 с рабочим примером. Я тоже добавлю туда комментарий ван.
Стефан
27

Ответ Стефана хороший и охватывает большинство баз, но меня не удовлетворило отсутствие интеграции с остальной частью SQLAlchemy (ORM, автоматическое удаление и т. д.). После нескольких часов экспериментов и сбора знаний со всех уголков Интернета я пришел к следующему:

import sqlalchemy_views
from sqlalchemy import Table
from sqlalchemy.ext.compiler import compiles
from sqlalchemy.sql.ddl import DropTable


class View(Table):
    is_view = True


class CreateView(sqlalchemy_views.CreateView):
    def __init__(self, view):
        super().__init__(view.__view__, view.__definition__)


@compiles(DropTable, "postgresql")
def _compile_drop_table(element, compiler, **kwargs):
    if hasattr(element.element, 'is_view') and element.element.is_view:
        return compiler.visit_drop_view(element)

    # cascade seems necessary in case SQLA tries to drop 
    # the table a view depends on, before dropping the view
    return compiler.visit_drop_table(element) + ' CASCADE'

Обратите внимание, что я использую sqlalchemy_viewsпакет только для упрощения.

Определение представления (например, глобально, как ваши модели таблиц):

from sqlalchemy import MetaData, text, Text, Column


class SampleView:
    __view__ = View(
        'sample_view', MetaData(),
        Column('bar', Text, primary_key=True),
    )

    __definition__ = text('''select 'foo' as bar''')

# keeping track of your defined views makes things easier
views = [SampleView]

Сопоставление представлений (включение функции ORM):

Сделайте это при загрузке вашего приложения, перед любыми запросами и после настройки БД.

for view in views:
    if not hasattr(view, '_sa_class_manager'):
        orm.mapper(view, view.__view__)

Создание представлений:

Сделайте это при инициализации базы данных, например, после вызова create_all ().

from sqlalchemy import orm


for view in views:
    db.engine.execute(CreateView(view))

Как запросить представление:

results = db.session.query(SomeModel, SampleView).join(
    SampleView,
    SomeModel.id == SampleView.some_model_id
).all()

Это вернет именно то, что вы ожидаете (список объектов, каждый из которых имеет объект SomeModel и объект SampleView).

Удаление представления:

SampleView.__view__.drop(db.engine)

Он также автоматически сбрасывается во время вызова drop_all ().

Это, очевидно, очень хакерское решение, но, на мой взгляд, оно является лучшим и самым чистым на данный момент. Я тестировал его последние несколько дней и не имел никаких проблем. Я не уверен, как добавлять отношения (там возникли проблемы), но на самом деле это не обязательно, как показано выше в запросе.

Если кто-то внесет свой вклад, обнаружит какие-либо неожиданные проблемы или знает лучший способ сделать что-то, пожалуйста, оставьте комментарий или дайте мне знать.

Это было протестировано на SQLAlchemy 1.2.6 и Python 3.6.

fgblomqvist
источник
Сумасшедший выбор времени, я сам с этим справлялся. Для py 2.7 и SQLa 1.1.2 (не спрашивайте ...) единственными необходимыми изменениями были super(CreateView, self).__init__и наличиеclass SampleView(object)
Стивен Дикинсон
1
@ Стивен Дикинсон, да, похоже, верно! Да, я подумал, что это действительно распространенная задача, поэтому я был удивлен, что документация по ней была такой плохой / устаревшей / поверхностной. Но послушайте, я полагаю, шаг за шагом.
fgblomqvist
2
Для тех, кто хочет сделать это декларативно, я определил свои представления в отдельном файле из моих таблиц с другим экземпляром метаданных: Base = declarative_base(metadata=db.MetaData()) class ViewSample(Base): __tablename__ = 'view_sample' я все же включил __definition__свойство и вызвал CreateView, чтобы создать его, как было предложено в исходном сообщении. Наконец, мне пришлось изменить декорированный метод перетаскивания: if element.element.name.startswith('view_'): return compiler.visit_drop_view(element) я не мог найти способ добавить свойство во встроенную таблицу.
Кейси
23

В наши дни для этого есть пакет PyPI: SQLAlchemy Views .

Со страницы PyPI:

>>> from sqlalchemy import Table, MetaData
>>> from sqlalchemy.sql import text
>>> from sqlalchemy_views import CreateView, DropView

>>> view = Table('my_view', metadata)
>>> definition = text("SELECT * FROM my_table")

>>> create_view = CreateView(view, definition, or_replace=True)
>>> print(str(create_view.compile()).strip())
CREATE OR REPLACE VIEW my_view AS SELECT * FROM my_table

Однако вы запросили «чистый SQL» запрос , поэтому вы, вероятно, хотите, definitionчтобы это было создано с помощью объекта запроса SQLAlchemy.

К счастью, text()в приведенном выше примере ясно, что definitionпараметр to CreateViewявляется таким объектом запроса. Так должно работать примерно так:

>>> from sqlalchemy import Table, Column, Integer, String, MetaData, ForeignKey
>>> from sqlalchemy.sql import select
>>> from sqlalchemy_views import CreateView, DropView

>>> metadata = MetaData()

>>> users = Table('users', metadata,
...     Column('id', Integer, primary_key=True),
...     Column('name', String),
...     Column('fullname', String),
... )

>>> addresses = Table('addresses', metadata,
...   Column('id', Integer, primary_key=True),
...   Column('user_id', None, ForeignKey('users.id')),
...   Column('email_address', String, nullable=False)
...  )

Вот что интересно:

>>> view = Table('my_view', metadata)
>>> definition = select([users, addresses]).where(
...     users.c.id == addresses.c.user_id
... )
>>> create_view = CreateView(view, definition, or_replace=True)
>>> print(str(create_view.compile()).strip())
CREATE OR REPLACE VIEW my_view AS SELECT users.id, users.name,
users.fullname, addresses.id, addresses.user_id, addresses.email_address 
FROM users, addresses 
WHERE users.id = addresses.user_id
LeoRochael
источник
17

SQLAlchemy-utils только что добавил эту функцию в 0.33.6 (доступно в pypi). Он имеет представления, материализованные представления и интегрируется с ORM. Это еще не задокументировано, но я успешно использую view + ORM.

Вы можете использовать их тест в качестве примера как для обычных, так и для материализованных представлений с использованием ORM.

Чтобы создать представление, после установки пакета используйте следующий код из теста выше в качестве основы для вашего представления:

class ArticleView(Base):
    __table__ = create_view(
        name='article_view',
        selectable=sa.select(
            [
                Article.id,
                Article.name,
                User.id.label('author_id'),
                User.name.label('author_name')
            ],
            from_obj=(
                Article.__table__
                    .join(User, Article.author_id == User.id)
            )
        ),
        metadata=Base.metadata
    )

Где Baseнаходится declarative_base, saэто SQLAlchemyпакет, а create_viewэто функция sqlalchemy_utils.view.

Bustawin
источник
Вы нашли способ использовать его вместе с перегонным кубом?
Хорхе Лейтао
1

Я не мог найти краткого и удобного ответа.

Мне не нужны дополнительные функции View (если они есть), поэтому я просто рассматриваю представление как обычную таблицу, как и другие определения таблиц.

Итак, в основном у меня есть a.pyгде определены все таблицы и представления, вещи, связанные с sql, и main.pyгде я импортирую этот класс a.pyи использую их.

Вот что я добавляю a.pyи работает:

class A_View_From_Your_DataBase(Base):
    __tablename__ = 'View_Name'
    keyword = Column(String(100), nullable=False, primary_key=True)

Примечательно, что вам нужно добавить primary_keyсвойство, даже если в представлении нет первичного ключа.

Рик
источник
-9

SQL View без чистого SQL? Вы можете создать класс или функцию для реализации определенного представления.

function get_view(con):
  return Table.query.filter(Table.name==con.name).first()
focusheart
источник
2
Извините, но я спросил не об этом. Мой английский не идеален, извините, если вы неправильно поняли :)
Thibaut D.