当前位置: 首页 > news >正文

无形资产 网站开发百度推广怎么注册账号

无形资产 网站开发,百度推广怎么注册账号,代理充值平台网站,自设计网站Paimon Catalog可以持久化元数据,当前支持两种类型的metastore: 文件系统(默认):将元数据和表文件存储在文件系统中。hive:在 hive metastore中存储元数据。用户可以直接从 Hive 访问表。 2.2.1 文件系统…

Paimon Catalog可以持久化元数据,当前支持两种类型的metastore:

  • 文件系统(默认):将元数据和表文件存储在文件系统中。hive:在 hive metastore中存储元数据。用户可以直接从 Hive 访问表。

2.2.1 文件系统

CREATE CATALOG fs_catalog WITH (

    'type' = 'paimon',

    'warehouse' = 'hdfs://hadoop102:8020/paimon/fs'

);

USE CATALOG fs_catalog;

2.2.2 Hive Catalog

通过使用Hive Catalog,对Catalog的更改将直接影响相应的hive metastore。在此类Catalog中创建的表也可以直接从 Hive 访问。

要使用 Hive Catalog,数据库名称、表名称和字段名称应小写

1)上传 hive-connector

将flink-sql-connector-hive-3.1.3_2.12-1.17.0.jar上川到Flink的lib目录下

2)重启yarn-session集群

3)启动hive的metastore服务

nohup hive --service metastore &

4)创建Hive Catalog

CREATE CATALOG hive_catalog WITH (

    'type' = 'paimon',

    'metastore' = 'hive',

'uri' = 'thrift://hadoop102:9083',

'hive-conf-dir' = '/opt/module/hive/conf',

    'warehouse' = 'hdfs://hadoop102:8020/paimon/hive'

);

USE CATALOG hive_catalog;

5)注意事项

使用hive Catalog通过alter table更改不兼容的列类型时,参见 HIVE-17832。需要配置

vim /opt/module/hive/conf/hive-site.xml;

    <property>

        <name>hive.metastore.disallow.incompatible.col.type.changes</name>

        <value>false</value>

    </property>

上述配置需要在hive-site.xml中配置,且hive metastore服务需要重启。

如果使用的是 Hive3,请禁用 Hive ACID:

hive.strict.managed.tables=false

hive.create.as.insert.only=false

metastore.create.as.acid=false

Paimon Catalog可以持久化元数据,当前支持两种类型的metastore:

  • 文件系统(默认):将元数据和表文件存储在文件系统中。
  • hive:在 hive metastore中存储元数据。用户可以直接从 Hive 访问表。

2.2.1 文件系统

CREATE CATALOG fs_catalog WITH (

    'type' = 'paimon',

    'warehouse' = 'hdfs://hadoop102:8020/paimon/fs'

);

USE CATALOG fs_catalog;

2.2.2 Hive Catalog

通过使用Hive Catalog,对Catalog的更改将直接影响相应的hive metastore。在此类Catalog中创建的表也可以直接从 Hive 访问。

要使用 Hive Catalog,数据库名称、表名称和字段名称应小写

1)上传 hive-connector

将flink-sql-connector-hive-3.1.3_2.12-1.17.0.jar上川到Flink的lib目录下

2)重启yarn-session集群

3)启动hive的metastore服务

nohup hive --service metastore &

4)创建Hive Catalog

CREATE CATALOG hive_catalog WITH (

    'type' = 'paimon',

    'metastore' = 'hive',

'uri' = 'thrift://hadoop102:9083',

'hive-conf-dir' = '/opt/module/hive/conf',

    'warehouse' = 'hdfs://hadoop102:8020/paimon/hive'

);

USE CATALOG hive_catalog;

5)注意事项

使用hive Catalog通过alter table更改不兼容的列类型时,参见 HIVE-17832。需要配置

vim /opt/module/hive/conf/hive-site.xml;

    <property>

        <name>hive.metastore.disallow.incompatible.col.type.changes</name>

        <value>false</value>

    </property>

上述配置需要在hive-site.xml中配置,且hive metastore服务需要重启。

如果使用的是 Hive3,请禁用 Hive ACID:

hive.strict.managed.tables=false

hive.create.as.insert.only=false

metastore.create.as.acid=false

2.2.3 sql 初始化文件

vi sql_init.sql

CREATE CATALOG fs_catalog WITH (
    'type' = 'paimon',
    'warehouse' = 'hdfs://doitedu:8020/paimon/fs'
);

CREATE CATALOG hive_catalog WITH (
    'type' = 'paimon',
    'metastore' = 'hive',
'uri' = 'thrift://hadoop102:9083',
'hive-conf-dir' = '/opt/module/hive/conf',
    'warehouse' = 'hdfs://doitedu:8020/paimon/hive'
);


USE CATALOG hive_catalog;

SET 'sql-client.execution.result-mode' = 'tableau';

2)启动sql-client时,指定该sql初始化文件

bin/sql-client.sh -s yarn-session -i conf/sql-client-init.sql

3)查看catalog

show catalogs;

show current catalog;

http://www.ritt.cn/news/361.html

相关文章:

  • 浙江省建设厅门户网站怎么查百度收录
  • 长沙建一个网站多少钱yandere搜索引擎入口
  • 中国建设银行龙网站首页自己创建网站
  • 饰品网站模版如何在网上推广产品
  • 自己做网站的视频百度竞价产品
  • 跟网站做流量优化大师win10
  • tp框架做的图片网站进入百度首页
  • 苹果cms搭建教程seo优化咨询
  • asp.net做网站有何意义上海网络营销推广外包
  • 大连建设网站公司seo1短视频网页入口营销
  • 南通网站建设排名公司可以免费投放广告的平台
  • 扁平化网站 psd网络营销专业主要学什么
  • 邯郸市网站建设多少钱搜索引擎优化规则
  • 西藏做网站找谁百度官方网站入口
  • 中央经济工作会议2021seo优化的搜索排名影响因素主要有
  • photoshop安卓版下载如何做一个网站的seo
  • 天津大学新校区建设网站锦绣大地seo官网
  • wordpress编辑器添加自定义线上seo关键词优化软件工具
  • 网站还在建设中英文做网站一般需要多少钱
  • 今天中国疫情最新情况长春seo关键词排名
  • b2b网站如何做社群运营谷歌广告代运营
  • 深圳彩票网站建设深圳seo优化推广公司
  • 深圳企业网站制作推广运营各大网站的网址
  • 创龙企业方案解决贵阳seo网站管理
  • 东莞企慕网站建设腾讯域名注册官网
  • 做网站地图广告最多的网站
  • 做企业网站流程简单的网页设计作品
  • 沧州网站建设专业定制b2b免费推广网站
  • 微信广告投放收费标准搜索优化整站优化
  • 网站设计外包协议揭阳百度快照优化排名