当前位置： 首页 > news >正文 一般网站后台地址网站备案重要性 news 2025/10/28 0:27:15 一般网站后台地址,网站备案重要性,沈阳seo排名优化软件,二级建造师证报考条件问题#xff1a; 通过 Redshift Spectrum 功能可以读取 S3 中的文件#xff0c;当读取 Parquet 文件时#xff0c;如果列格式设置为 timestamp#xff0c; 通过 psql 客户端读取会出现以下错误#xff1a; testdb# select * from myspectrum_schema_0219.test_ns; ERROR…问题 通过 Redshift Spectrum 功能可以读取 S3 中的文件当读取 Parquet 文件时如果列格式设置为 timestamp 通过 psql 客户端读取会出现以下错误 testdb# select * from myspectrum_schema_0219.test_ns; ERROR: Assert DETAIL:-----------------------------------------------error: Assertcode: 1000context: status 0 - timestamp: -3784992261051417264query: 15121995location: cg_util.cpp:705process: padbmaster [pid1073963104]----------------------------------------------- 通过 Query Editor V2 读取则显示错误的时间格式 以下是 CSV 文件以及通过 python 读取 Parquet 文件的内容 CSV $ more data3.csv saletime 2024-01-01 01:01:01.000000 2025-01-01 01:01:01.000000 2025-01-02 02:01:01.000000 2025-01-03 03:01:01.000000 2025-01-04 04:01:01.000000 2025-01-04 05:01:01.000000Parquet import pandas as pdimport pyarrow.parquet as pqparquet_file data3_ns.parquetdf_read pd.read_parquet(parquet_file)print(df_read)saletime 0 2024-01-01 01:01:01 1 2025-01-01 01:01:01 2 2025-01-02 02:01:01 3 2025-01-03 03:01:01 4 2025-01-04 04:01:01 5 2025-01-04 05:01:01 原因 Redshift 中的时间类型支持到 us也就是 微妙而 Parquet 文件 timestamp 格式支持的类型为 ns所以对于时间格式是无法读取或读取错误。 解决 在 Parquet 文件设置时间类型时对值做设置datetime64[us]以匹配 Redshift 的时间精度。 以下为CSV生成 Parquet 的代码 import pandas as pd import pyarrow.parquet as pq# 读取 CSV 文件 csv_file data3.csv df pd.read_csv(csv_file)# 假设 CSV 文件中有一个时间列 timestamp将其转换为微秒精度 df[saletime] pd.to_datetime(df[saletime]).astype(datetime64[us])# 将 DataFrame 保存为 Parquet 文件 parquet_file data3_us.parquet df.to_parquet(parquet_file, enginepyarrow)# 读取 Parquet 文件以验证 df_read pd.read_parquet(parquet_file) print(df_read)saletime 0 2024-01-01 01:01:01 1 2025-01-01 01:01:01 2 2025-01-02 02:01:01 3 2025-01-03 03:01:01 4 2025-01-04 04:01:01 5 2025-01-04 05:01:01之后创建外部表进行查询就可以成功匹配到正确的格式。 testdb# CREATE EXTERNAL TABLE myspectrum_schema_0219.test_us(saletime timestamp) testdb-# STORED AS parquet testdb-# LOCATION s3://XXX/redshiftspectrum/t_0220_p/t_0220_p_us/; CREATE EXTERNAL TABLEtestdb# select * from myspectrum_schema_0219.test_us;saletime ---------------------2024-01-01 01:01:012025-01-01 01:01:012025-01-02 02:01:012025-01-03 03:01:012025-01-04 04:01:012025-01-04 05:01:01 (6 rows) 文章转载自： http://www.morning.mrxgm.cn.gov.cn.mrxgm.cn http://www.morning.nqgff.cn.gov.cn.nqgff.cn http://www.morning.sgtq.cn.gov.cn.sgtq.cn http://www.morning.youngbase.cn.gov.cn.youngbase.cn http://www.morning.rnfn.cn.gov.cn.rnfn.cn http://www.morning.sdhmn.cn.gov.cn.sdhmn.cn http://www.morning.ljwyc.cn.gov.cn.ljwyc.cn http://www.morning.hsrpr.cn.gov.cn.hsrpr.cn http://www.morning.fhlfp.cn.gov.cn.fhlfp.cn http://www.morning.jqcrf.cn.gov.cn.jqcrf.cn http://www.morning.cykqb.cn.gov.cn.cykqb.cn http://www.morning.rmtmk.cn.gov.cn.rmtmk.cn http://www.morning.zrpys.cn.gov.cn.zrpys.cn http://www.morning.gycyt.cn.gov.cn.gycyt.cn http://www.morning.znlhc.cn.gov.cn.znlhc.cn http://www.morning.cmcjp.cn.gov.cn.cmcjp.cn http://www.morning.rfzbm.cn.gov.cn.rfzbm.cn http://www.morning.wktbz.cn.gov.cn.wktbz.cn http://www.morning.rydbs.cn.gov.cn.rydbs.cn http://www.morning.bsjxh.cn.gov.cn.bsjxh.cn http://www.morning.xnflx.cn.gov.cn.xnflx.cn http://www.morning.haibuli.com.gov.cn.haibuli.com http://www.morning.jgzmr.cn.gov.cn.jgzmr.cn http://www.morning.pswqx.cn.gov.cn.pswqx.cn http://www.morning.pjzcp.cn.gov.cn.pjzcp.cn http://www.morning.hkysq.cn.gov.cn.hkysq.cn http://www.morning.rwpjq.cn.gov.cn.rwpjq.cn http://www.morning.npbnc.cn.gov.cn.npbnc.cn http://www.morning.gbyng.cn.gov.cn.gbyng.cn http://www.morning.pjqxk.cn.gov.cn.pjqxk.cn http://www.morning.fwcnx.cn.gov.cn.fwcnx.cn http://www.morning.jwlmm.cn.gov.cn.jwlmm.cn http://www.morning.zbnts.cn.gov.cn.zbnts.cn http://www.morning.pqyms.cn.gov.cn.pqyms.cn http://www.morning.ctbr.cn.gov.cn.ctbr.cn http://www.morning.ntgjm.cn.gov.cn.ntgjm.cn http://www.morning.qbmpb.cn.gov.cn.qbmpb.cn http://www.morning.nkjnr.cn.gov.cn.nkjnr.cn http://www.morning.ndmbd.cn.gov.cn.ndmbd.cn http://www.morning.wqtzs.cn.gov.cn.wqtzs.cn http://www.morning.sdkaiyu.com.gov.cn.sdkaiyu.com http://www.morning.xmrmk.cn.gov.cn.xmrmk.cn http://www.morning.pnljy.cn.gov.cn.pnljy.cn http://www.morning.ggqcg.cn.gov.cn.ggqcg.cn http://www.morning.wffxr.cn.gov.cn.wffxr.cn http://www.morning.tsflw.cn.gov.cn.tsflw.cn http://www.morning.zcwtl.cn.gov.cn.zcwtl.cn http://www.morning.pgjyc.cn.gov.cn.pgjyc.cn http://www.morning.gqcd.cn.gov.cn.gqcd.cn http://www.morning.pamdeer.com.gov.cn.pamdeer.com http://www.morning.zdfrg.cn.gov.cn.zdfrg.cn http://www.morning.wgkz.cn.gov.cn.wgkz.cn http://www.morning.jpfpc.cn.gov.cn.jpfpc.cn http://www.morning.dblfl.cn.gov.cn.dblfl.cn http://www.morning.wrtxk.cn.gov.cn.wrtxk.cn http://www.morning.zqcsj.cn.gov.cn.zqcsj.cn http://www.morning.yrnyz.cn.gov.cn.yrnyz.cn http://www.morning.juju8.cn.gov.cn.juju8.cn http://www.morning.kbynw.cn.gov.cn.kbynw.cn http://www.morning.trbxt.cn.gov.cn.trbxt.cn http://www.morning.jzmqk.cn.gov.cn.jzmqk.cn http://www.morning.twpq.cn.gov.cn.twpq.cn http://www.morning.mxnhq.cn.gov.cn.mxnhq.cn http://www.morning.ssqwr.cn.gov.cn.ssqwr.cn http://www.morning.cpwmj.cn.gov.cn.cpwmj.cn http://www.morning.nrzbq.cn.gov.cn.nrzbq.cn http://www.morning.mcbqq.cn.gov.cn.mcbqq.cn http://www.morning.qlck.cn.gov.cn.qlck.cn http://www.morning.nyzmm.cn.gov.cn.nyzmm.cn http://www.morning.bhrbr.cn.gov.cn.bhrbr.cn http://www.morning.httzf.cn.gov.cn.httzf.cn http://www.morning.lkmks.cn.gov.cn.lkmks.cn http://www.morning.ztjhz.cn.gov.cn.ztjhz.cn http://www.morning.xtrnx.cn.gov.cn.xtrnx.cn http://www.morning.mnwb.cn.gov.cn.mnwb.cn http://www.morning.rhkgz.cn.gov.cn.rhkgz.cn http://www.morning.wrbnh.cn.gov.cn.wrbnh.cn http://www.morning.htbsk.cn.gov.cn.htbsk.cn http://www.morning.cnfxr.cn.gov.cn.cnfxr.cn http://www.morning.fbfnk.cn.gov.cn.fbfnk.cn 查看全文 http://www.tj-hxxt.cn/news/255236.html 相关文章： dj那个网站做的好北京网站制作招聘 租门面做网站手机做广告设计用什么软件 义乌网站建设和制作app软件做得比较好的公司 网站详情怎么做的广州网站建设建航科技 云相册网站怎么做的建筑工程行业网站建设方案 江西 网站 建设 开发外贸网站建站公司 玉树营销网站建设多少钱网站备案查询不到说明啥 php网站外包软件外包开发保密协议 网站 架构 设计好的建设网站公司哪家好 如何查找高权重网站定位wordpress元素源码 cpa单页网站怎么做专门做家具的网站 商城网站做推广oj网站开发 中山网站百度优化导视设计案例 能上传文件的网站网站后台如何修改标题 南京企业网站做优化建设一个网站需要的空间有哪些方法 wix做网站的建议wordpress博客占用cpu 医院网站页面设计做企业网站和邮箱 网站怎么设计外网访问群晖wordpress 在菲做平台网站定安免费建站公司 网站托管 域名网站功能怎么写 宝山做网站价格自己开网站工作室 免费手机网站制作佛山企业网站建设流程 做uml图网站建筑设计方案 做网站用小图标在什么网下载上海景观设计公司 网站二级目录是什么中国摄影网官网首页 自助业务网站系统全国住房城乡建设厅网站 烟台网站建设企业怎么建立一个表格 个人网站名称国外logo设计网站推荐 曲阜企业网站建设百度人气榜 四会市住房和城乡建设局网站网络热词2022流行语及解释
