Поделиться через


Получение от поколения 1 к потоку данных поколения 2

Поток данных 2-го поколения — это новое поколение потоков данных. Новое поколение потоков данных находится вместе с потоком данных Power BI (1-го поколения) и предоставляет новые функции и улучшенные возможности. В следующем разделе представлено сравнение потока данных 1-го поколения и потока данных 2-го поколения.

Обзор возможностей

Функция Поток данных 2-го поколения Поток данных 1-го поколения
Создание потоков данных с помощью Power Query
Короткий поток разработки
Автоматическая сохранение и фоновая публикация
Целевое расположение данных
Улучшен журнал мониторинга и обновления
Интеграция с конвейерами данных
Высокомасштабные вычислительные ресурсы
Получение данных с помощью соединителя потоков данных
Прямой запрос через соединитель потоков данных
Добавочное обновление
поддержка Аналитика ИИ

Более короткий процесс разработки

Работа с Dataflow 2-го поколения чувствует себя как возвращение домой. Мы сохранили полный интерфейс Power Query, который вы используете в потоках данных Power BI. При вводе интерфейса пошаговые инструкции по получению данных в поток данных. Мы также сокращаем возможности разработки, чтобы сократить количество шагов, необходимых для создания потоков данных, и добавили несколько новых функций, чтобы сделать работу еще лучше.

Screenshot of the overall authoring experience in dataflows.

Новый интерфейс сохранения потока данных

С помощью потока данных 2-го поколения мы изменили способ сохранения потока данных. Все изменения, внесенные в поток данных, автоматически сохраняются в облаке. Таким образом, вы можете выйти из процесса разработки в любой момент и продолжить работу с тем, откуда вы оставили в дальнейшем. После завершения разработки потока данных вы опубликуете изменения и эти изменения используются при обновлении потока данных. Кроме того, публикация потока данных сохраняет изменения и выполняет проверки, которые должны выполняться в фоновом режиме. Эта функция позволяет сохранять поток данных, не ожидая завершения проверки.

Чтобы узнать больше о новом интерфейсе сохранения, перейдите к разделу "Сохранить черновик потока данных".

Целевое расположение данных

Аналогично Dataflow 1-го поколения, dataflow 2-го поколения позволяет преобразовать данные в внутреннее или промежуточное хранилище потока данных, где его можно получить с помощью соединителя потока данных. Поток данных 2-го поколения также позволяет указать назначение данных для данных. С помощью этой функции теперь можно разделить логику ETL и целевое хранилище. Эта функция дает вам множество преимуществ. Например, теперь можно использовать поток данных для загрузки данных в lakehouse, а затем использовать записную книжку для анализа данных. Кроме того, можно использовать поток данных для загрузки данных в базу данных SQL Azure, а затем использовать конвейер данных для загрузки данных в хранилище данных.

В Dataflow 2-го поколения мы добавили поддержку следующих назначений, и многие другие будут в ближайшее время:

  • Fabric Lakehouse
  • Azure Data Explorer (Kusto)
  • Azure Synapse Analytics (Хранилище данных SQL)
  • База данных SQL Azure

Примечание.

Чтобы загрузить данные в хранилище Fabric, можно использовать соединитель Azure Synapse Analytics (ХРАНИЛИЩЕ данных SQL), извлекая строка подключения SQL. Дополнительные сведения: Подключение чувствительность к хранилищу данных в Microsoft Fabric

Screenshot with the supported data destinations displayed.

Новый журнал обновлений и мониторинг

В Dataflow 2-го поколения мы представляем новый способ мониторинга обновлений потока данных. Мы интегрируем поддержку Центра мониторинга и предоставляем возможности обновления для основного обновления.

Screenshot showing the details of a refresh status.

Интеграция с конвейерами данных

Конвейеры данных позволяют группировать действия, которые вместе выполняют задачу. Действие — это единица работы, которую можно выполнить. Например, действие может копировать данные из одного расположения в другое, выполнять SQL-запрос, выполнять хранимую процедуру или запускать записную книжку Python.

Конвейер может содержать одно или несколько действий, подключенных зависимостями. Например, можно использовать конвейер для приема и очистки данных из большого двоичного объекта Azure, а затем запустить поток данных 2-го поколения для анализа данных журнала. Вы также можете использовать конвейер для копирования данных из большого двоичного объекта Azure в базу данных SQL Azure, а затем выполнить хранимую процедуру в базе данных.

Screenshot showing the integration with data pipelines.

Сохранить как черновик

При использовании dataflow 2-го поколения мы предлагаем бесплатный интерфейс, удаляя необходимость публикации для сохранения изменений. При сохранении в виде черновиков функции мы сохраняем черновую версию потока данных каждый раз, когда вы вносите изменения. Вы потеряли подключение к Интернету? Вы случайно закрыли браузер? Без волнений; мы вернулись. Когда вы вернеесь к потоку данных, последние изменения по-прежнему там, и вы можете продолжить работу, где вы оставили. Это простой интерфейс и не требует никаких входных данных от вас. Это позволяет работать с потоком данных, не беспокоясь о потере изменений или необходимости исправлять все ошибки запроса, прежде чем сохранить изменения. Чтобы узнать больше об этой функции, перейдите к разделу "Сохранить черновик потока данных".

Высокомасштабируемые вычислительные ресурсы

Аналогично Dataflow 1-го поколения, dataflow 2-го поколения также предоставляет расширенный вычислительный модуль для повышения производительности обоих преобразований ссылочных запросов и получения сценариев данных. Для этого поток данных 2-го поколения создает элементы Lakehouse и Warehouse в рабочей области и использует их для хранения и доступа к данным для повышения производительности всех потоков данных.

Лицензирование потока данных 1-го поколения и 2-го поколения

Поток данных 2-го поколения — это новое поколение потоков данных, которые находятся вместе с потоком данных Power BI (1-го поколения) и предоставляют новые функции и улучшенные возможности. Для этого требуется емкость Fabric или пробная емкость Fabric. Чтобы лучше понять, как работает лицензирование для потоков данных, ознакомьтесь со следующей статьей: основные понятия и лицензии Microsoft Fabric

Попробуйте использовать поток данных 2-го поколения, повторно используя запросы из потока данных 1-го поколения

У вас, вероятно, есть много запросов потока данных 1-го поколения, и вы хотите узнать, как их можно попробовать в Dataflow 2-го поколения. У нас есть несколько вариантов повторного создания потоков данных 1-го поколения в качестве потока данных 2-го поколения.

  • Экспорт запросов потока данных 1-го поколения и их импорт в поток данных 2-го поколения

    Теперь вы можете экспортировать запросы как в интерфейсе разработки потока данных 1-го поколения, так и в PQT-файл, который можно импортировать в поток данных 2-го поколения. Дополнительные сведения см. в разделе "Использование функции шаблона экспорта".

  • Копирование и вставка в Power Query

    Если у вас есть поток данных в Power BI или Power Apps, вы можете скопировать запросы и вставить их в редактор потока данных 2-го поколения. Эта функция позволяет перенести поток данных в 2-е поколение, не перезаписывая запросы. Дополнительные сведения см. в раздел "Копирование и вставка существующих запросов потока данных 1-го поколения".