[jira] [Updated] (HIVE-13203) STRUCT type not allowing more than 266 fields. Table get created with more fields but throws error while querying against the table. SHOW CREATE TABLE skips having some f
[ https://issues.apache.org/jira/browse/HIVE-13203?page=com.atlassian.jira.plugin.system.issuetabpanels:all-tabpanel ] Satyajit varma updated HIVE-13203: -- Affects Version/s: 1.2.0 Description: I am trying to create a table with multiple STRUCT column types, one of which having more than 300 fields. I get the table created with no problem, but when i load i face few errors in loading up the data.when i check SHOW CREATE TABLE TABLENAME, i get fields only till 266th column and rest of them do not appear in the table DDL. Would like to know, if there is any restriction on the number of fields to be using in STRUCT datatype. EXAMPLE: BELOW IS THE DDL i run in hive and the below in red is the TABLE DDL i get from SHOW CREATE TABLE. CREATE TABLE property_feature.property_feature_new( `_id` STRUCT<`mls_sysid`:String,`type`:String>, all_attrs STRUCT<`1`: String ,`10`: String ,`100`: String ,`105`: String ,`113`: String ,`118`: String ,`126`: String ,`1299`: String ,`1301`: String ,`1305`: String ,`1307`: String ,`1319`: String ,`1325`: String ,`1327`: String ,`1329`: String ,`1339`: String ,`1341`: String ,`1345`: String ,`1351`: String ,`1353`: String ,`1359`: String ,`1363`: String ,`1365`: String ,`1367`: String ,`1373`: String ,`1377`: String ,`1397`: String ,`1401`: String ,`1403`: String ,`1405`: String ,`1409`: String ,`1411`: String ,`1413`: String ,`1417`: String ,`1419`: String ,`1421`: String ,`1423`: String ,`1431`: String ,`1437`: String ,`1439`: String ,`144`: String ,`1441`: String ,`145`: String ,`1451`: String ,`1453`: String ,`146`: String ,`1467`: String ,`1469`: String ,`1483`: String ,`1485`: String ,`1491`: String ,`1493`: String ,`15`: String ,`1505`: String ,`1519`: String ,`1521`: String ,`1523`: String ,`155`: String ,`156`: String ,`158`: String ,`1586`: String ,`1678`: String ,`169`: String ,`17`: String ,`177`: String ,`1783`: String ,`1785`: String ,`1787`: String ,`1789`: String ,`1793`: String ,`1795`: String ,`1797`: String ,`1799`: String ,`1801`: String ,`1803`: String ,`1805`: String ,`1807`: String ,`1809`: String ,`1811`: String ,`1815`: String ,`1818`: String ,`1826`: String ,`1829`: String ,`1874`: String ,`1876`: String ,`1878`: String ,`1880`: String ,`1882`: String ,`207`: String ,`215`: String ,`226`: String ,`2293`: String ,`232`: String ,`239`: String ,`241`: String ,`245`: String ,`2456`: String ,`248`: String ,`2482`: String ,`2490`: String ,`2491`: String ,`2492`: String ,`2493`: String ,`2495`: String ,`25`: String ,`2502`: String ,`2503`: String ,`2517`: String ,`2522`: String ,`255`: String ,`256`: String ,`2573`: String ,`2574`: String ,`260`: String ,`263`: String ,`265`: String ,`276`: String ,`278`: String ,`286`: String ,`293`: String ,`296`: String ,`299`: String ,`3`: String ,`30`: String ,`307`: String ,`312`: String ,`320`: String ,`328`: String ,`340`: String ,`348`: String ,`354`: String ,`363`: String ,`364`: String ,`369`: String ,`375`: String ,`376`: String ,`383`: String ,`401`: String ,`405`: String ,`409`: String ,`412`: String ,`42`: String ,`423`: String ,`444`: String ,`445`: String ,`446`: String ,`447`: String ,`450`: String ,`451`: String ,`452`: String ,`453`: String ,`455`: String ,`458`: String ,`461`: String ,`463`: String ,`464`: String ,`51`: String ,`543472980`: String ,`57`: String ,`75`: String ,`90`: String ,`92`: String ,`AVMYN`: String ,`AccessibilityAmenities`: String ,`AddressPublic`: String ,`Amenities`: String ,`AmountofWaterFront`: String ,`AppliancesIncluded`: String ,`AppraiserInitials`: String ,`AppraiserName`: String ,`Basement`: String ,`BathsFull`: String ,`BathsHalf`: String ,`BathsTotal`: String ,`BedsTotal`: String ,`Block`: String ,`Book`: String ,`BuildingNumber`: String ,`City`: String ,`CloseDate`: String ,`ClosePrice`: String , `CoListAgentDirectWorkPhone`: String ,`CoListAgentEmail`: String ,`CoListAgentFullName`: String ,`CoListAgentMLSID`: String ,`CoListAgent_MUI`: String ,`CoListOfficeMLSID`: String ,`CoListOfficeName`: String ,`CoListOfficePhone`: String ,`CoListOffice_MUI`: String ,`Color`: String ,`CommentsYN`: String ,`Construction`: String ,`Cooling`: String ,`CountyOrParish`: String ,`DOM`: String ,`Deed`: String ,`Directions`: String ,`Driveway`: String ,`Electric`: String ,`Equipment`: String ,`Exterior`: String ,`Fireplace`: String ,`FloorNumber`: String ,`Floors`: String ,`FoundationMaterials`: String ,`FullTaxAmount`: String ,`Gas`: String ,`HeatFuel`: String ,`HeatSystem`: String ,`Internet`: String ,`ListAgentDirectWorkPhone`: String ,`ListAgentEmail`: String ,`ListAgentFullName`: String ,`ListAgentMLSID`: String ,`ListAgent_MUI`: String ,`ListOfficeMLSID`: String ,`ListOfficeName`: String ,`ListOfficePhone`: String ,`ListOffice_MUI`: String ,`ListPrice`: String ,`ListingContractDate`: String ,`Location`: String ,`Lot`: String ,`LotSizeArea`: String ,`MLSNumber`: String ,`
[jira] [Updated] (HIVE-13203) STRUCT type not allowing more than 266 fields. Table get created with more fields but throws error while querying against the table. SHOW CREATE TABLE skips having some f
[ https://issues.apache.org/jira/browse/HIVE-13203?page=com.atlassian.jira.plugin.system.issuetabpanels:all-tabpanel ] Satyajit varma updated HIVE-13203: -- Description: I am trying to create a table with multiple STRUCT column types, one of which having more than 300 fields. I get the table created with no problem, but when i load i face few errors in loading up the data.when i check SHOW CREATE TABLE TABLENAME, i get fields only till 266th column and rest of them do not appear in the table DDL.(check the issue at StateOrProvinc, search for StateOrProvinc in the second DDL). Would like to know, if there is any restriction on the number of fields to be using in STRUCT datatype. EXAMPLE: BELOW IS THE DDL i run in hive and the second below DLL is the TABLE DDL i get from SHOW CREATE TABLE. CREATE TABLE property_feature.property_feature_new( `_id` STRUCT<`mls_sysid`:String,`type`:String>, all_attrs STRUCT<`1`: String ,`10`: String ,`100`: String ,`105`: String ,`113`: String ,`118`: String ,`126`: String ,`1299`: String ,`1301`: String ,`1305`: String ,`1307`: String ,`1319`: String ,`1325`: String ,`1327`: String ,`1329`: String ,`1339`: String ,`1341`: String ,`1345`: String ,`1351`: String ,`1353`: String ,`1359`: String ,`1363`: String ,`1365`: String ,`1367`: String ,`1373`: String ,`1377`: String ,`1397`: String ,`1401`: String ,`1403`: String ,`1405`: String ,`1409`: String ,`1411`: String ,`1413`: String ,`1417`: String ,`1419`: String ,`1421`: String ,`1423`: String ,`1431`: String ,`1437`: String ,`1439`: String ,`144`: String ,`1441`: String ,`145`: String ,`1451`: String ,`1453`: String ,`146`: String ,`1467`: String ,`1469`: String ,`1483`: String ,`1485`: String ,`1491`: String ,`1493`: String ,`15`: String ,`1505`: String ,`1519`: String ,`1521`: String ,`1523`: String ,`155`: String ,`156`: String ,`158`: String ,`1586`: String ,`1678`: String ,`169`: String ,`17`: String ,`177`: String ,`1783`: String ,`1785`: String ,`1787`: String ,`1789`: String ,`1793`: String ,`1795`: String ,`1797`: String ,`1799`: String ,`1801`: String ,`1803`: String ,`1805`: String ,`1807`: String ,`1809`: String ,`1811`: String ,`1815`: String ,`1818`: String ,`1826`: String ,`1829`: String ,`1874`: String ,`1876`: String ,`1878`: String ,`1880`: String ,`1882`: String ,`207`: String ,`215`: String ,`226`: String ,`2293`: String ,`232`: String ,`239`: String ,`241`: String ,`245`: String ,`2456`: String ,`248`: String ,`2482`: String ,`2490`: String ,`2491`: String ,`2492`: String ,`2493`: String ,`2495`: String ,`25`: String ,`2502`: String ,`2503`: String ,`2517`: String ,`2522`: String ,`255`: String ,`256`: String ,`2573`: String ,`2574`: String ,`260`: String ,`263`: String ,`265`: String ,`276`: String ,`278`: String ,`286`: String ,`293`: String ,`296`: String ,`299`: String ,`3`: String ,`30`: String ,`307`: String ,`312`: String ,`320`: String ,`328`: String ,`340`: String ,`348`: String ,`354`: String ,`363`: String ,`364`: String ,`369`: String ,`375`: String ,`376`: String ,`383`: String ,`401`: String ,`405`: String ,`409`: String ,`412`: String ,`42`: String ,`423`: String ,`444`: String ,`445`: String ,`446`: String ,`447`: String ,`450`: String ,`451`: String ,`452`: String ,`453`: String ,`455`: String ,`458`: String ,`461`: String ,`463`: String ,`464`: String ,`51`: String ,`543472980`: String ,`57`: String ,`75`: String ,`90`: String ,`92`: String ,`AVMYN`: String ,`AccessibilityAmenities`: String ,`AddressPublic`: String ,`Amenities`: String ,`AmountofWaterFront`: String ,`AppliancesIncluded`: String ,`AppraiserInitials`: String ,`AppraiserName`: String ,`Basement`: String ,`BathsFull`: String ,`BathsHalf`: String ,`BathsTotal`: String ,`BedsTotal`: String ,`Block`: String ,`Book`: String ,`BuildingNumber`: String ,`City`: String ,`CloseDate`: String ,`ClosePrice`: String , `CoListAgentDirectWorkPhone`: String ,`CoListAgentEmail`: String ,`CoListAgentFullName`: String ,`CoListAgentMLSID`: String ,`CoListAgent_MUI`: String ,`CoListOfficeMLSID`: String ,`CoListOfficeName`: String ,`CoListOfficePhone`: String ,`CoListOffice_MUI`: String ,`Color`: String ,`CommentsYN`: String ,`Construction`: String ,`Cooling`: String ,`CountyOrParish`: String ,`DOM`: String ,`Deed`: String ,`Directions`: String ,`Driveway`: String ,`Electric`: String ,`Equipment`: String ,`Exterior`: String ,`Fireplace`: String ,`FloorNumber`: String ,`Floors`: String ,`FoundationMaterials`: String ,`FullTaxAmount`: String ,`Gas`: String ,`HeatFuel`: String ,`HeatSystem`: String ,`Internet`: String ,`ListAgentDirectWorkPhone`: String ,`ListAgentEmail`: String ,`ListAgentFullName`: String ,`ListAgentMLSID`: String ,`ListAgent_MUI`: String ,`ListOfficeMLSID`: String ,`ListOfficeName`: String ,`ListOfficePhone`: String ,`ListOffice_MUI`: String ,`ListPrice`: String ,`ListingContractDate`: String ,`Location`: String ,`Lot`: Str
[jira] [Commented] (HIVE-777) CREATE TABLE with STRUCT type
[ https://issues.apache.org/jira/browse/HIVE-777?page=com.atlassian.jira.plugin.system.issuetabpanels:comment-tabpanel&focusedCommentId=15179034#comment-15179034 ] Satyajit varma commented on HIVE-777: - Hi , Would like to know, if there is any kind of restriction with the number of fields to be used in the STRUCT type, as i am having issues with having more than 266 fields inside a STRUCT type. i was able to create the Table with no issues, but SHOW CREATE TABLE doesnt show fields are 266 field and queries fail with the same error. PFB Jira link,_https://issues.apache.org/jira/browse/HIVE-13203. Please reply in case there is any workaround to accept more fields. Thank you. > CREATE TABLE with STRUCT type > - > > Key: HIVE-777 > URL: https://issues.apache.org/jira/browse/HIVE-777 > Project: Hive > Issue Type: New Feature > Components: Query Processor >Reporter: Zheng Shao >Assignee: He Yongqiang > Fix For: 0.5.0 > > Attachments: hive-777-2009-8-21-2.patch, hive-777-2009-8-21.patch, > hive-777-2009-8-29.patch > > > Currently we only support map/array in type definition. > We should support STRUCT as well. > {code} > CREATE TABLE abc ( > pageid INT, > ads STRUCT, > userid INT > ); > {code} -- This message was sent by Atlassian JIRA (v6.3.4#6332)
[jira] [Assigned] (HIVE-13203) STRUCT type not allowing more than 266 fields. Table get created with more fields but throws error while querying against the table. SHOW CREATE TABLE skips having some
[ https://issues.apache.org/jira/browse/HIVE-13203?page=com.atlassian.jira.plugin.system.issuetabpanels:all-tabpanel ] Satyajit varma reassigned HIVE-13203: - Assignee: Satyajit varma (was: VISHNU S NAIR) > STRUCT type not allowing more than 266 fields. Table get created with more > fields but throws error while querying against the table. SHOW CREATE TABLE > skips having some fields in STRUCT. > -- > > Key: HIVE-13203 > URL: https://issues.apache.org/jira/browse/HIVE-13203 > Project: Hive > Issue Type: Bug > Components: Database/Schema >Affects Versions: 1.2.0 >Reporter: Satyajit varma >Assignee: Satyajit varma > > I am trying to create a table with multiple STRUCT column types, one of which > having more than 300 fields. > I get the table created with no problem, but when i load i face few errors in > loading up the data.when i check SHOW CREATE TABLE TABLENAME, i get fields > only till 266th column and rest of them do not appear in the table DDL.(check > the issue at StateOrProvinc, search for StateOrProvinc in the second DDL). > Would like to know, if there is any restriction on the number of fields to be > using in STRUCT datatype. > EXAMPLE: > BELOW IS THE DDL i run in hive and the second below DLL is the TABLE DDL i > get from SHOW CREATE TABLE. > CREATE TABLE property_feature.property_feature_new( > `_id` STRUCT<`mls_sysid`:String,`type`:String>, > all_attrs STRUCT<`1`: String ,`10`: String ,`100`: String ,`105`: String > ,`113`: String ,`118`: String ,`126`: String ,`1299`: String ,`1301`: String > ,`1305`: String ,`1307`: String ,`1319`: String ,`1325`: String ,`1327`: > String ,`1329`: String ,`1339`: String ,`1341`: String ,`1345`: String > ,`1351`: String ,`1353`: String ,`1359`: String ,`1363`: String ,`1365`: > String ,`1367`: String ,`1373`: String ,`1377`: String ,`1397`: String > ,`1401`: String ,`1403`: String ,`1405`: String ,`1409`: String ,`1411`: > String ,`1413`: String ,`1417`: String ,`1419`: String ,`1421`: String > ,`1423`: String ,`1431`: String ,`1437`: String ,`1439`: String ,`144`: > String ,`1441`: String ,`145`: String ,`1451`: String ,`1453`: String ,`146`: > String ,`1467`: String ,`1469`: String ,`1483`: String ,`1485`: String > ,`1491`: String ,`1493`: String ,`15`: String ,`1505`: String ,`1519`: String > ,`1521`: String ,`1523`: String ,`155`: String ,`156`: String ,`158`: String > ,`1586`: String ,`1678`: String ,`169`: String ,`17`: String ,`177`: String > ,`1783`: String ,`1785`: String ,`1787`: String ,`1789`: String ,`1793`: > String ,`1795`: String ,`1797`: String ,`1799`: String ,`1801`: String > ,`1803`: String ,`1805`: String ,`1807`: String ,`1809`: String ,`1811`: > String ,`1815`: String ,`1818`: String ,`1826`: String ,`1829`: String > ,`1874`: String ,`1876`: String ,`1878`: String ,`1880`: String ,`1882`: > String ,`207`: String ,`215`: String ,`226`: String ,`2293`: String ,`232`: > String ,`239`: String ,`241`: String ,`245`: String ,`2456`: String ,`248`: > String ,`2482`: String ,`2490`: String ,`2491`: String ,`2492`: String > ,`2493`: String ,`2495`: String ,`25`: String ,`2502`: String ,`2503`: String > ,`2517`: String ,`2522`: String ,`255`: String ,`256`: String ,`2573`: String > ,`2574`: String ,`260`: String ,`263`: String ,`265`: String ,`276`: String > ,`278`: String ,`286`: String ,`293`: String ,`296`: String ,`299`: String > ,`3`: String ,`30`: String ,`307`: String ,`312`: String ,`320`: String > ,`328`: String ,`340`: String ,`348`: String ,`354`: String ,`363`: String > ,`364`: String ,`369`: String ,`375`: String ,`376`: String ,`383`: String > ,`401`: String ,`405`: String ,`409`: String ,`412`: String ,`42`: String > ,`423`: String ,`444`: String ,`445`: String ,`446`: String ,`447`: String > ,`450`: String ,`451`: String ,`452`: String ,`453`: String ,`455`: String > ,`458`: String ,`461`: String ,`463`: String ,`464`: String ,`51`: String > ,`543472980`: String ,`57`: String ,`75`: String ,`90`: String ,`92`: String > ,`AVMYN`: String ,`AccessibilityAmenities`: String ,`AddressPublic`: String > ,`Amenities`: String ,`AmountofWaterFront`: String ,`AppliancesIncluded`: > String ,`AppraiserInitials`: String ,`AppraiserName`: String ,`Basement`: > String ,`BathsFull`: String ,`BathsHalf`: String ,`BathsTotal`: String > ,`BedsTotal`: String ,`Block`: String ,`Book`: String ,`BuildingNumber`: > String ,`City`: String ,`CloseDate`: String ,`ClosePrice`: String , > `CoListAgentDirectWorkPhone`: String ,`CoListAgentEmail`: String > ,`CoListAgentFullName`: String ,`CoListAgentMLSID`: String > ,`CoListAgent_MUI`: String ,`CoListOfficeMLSID`: String ,`CoListOfficeName`: >
[jira] [Updated] (HIVE-13203) STRUCT type not allowing more than 266 fields. Table get created with more fields but throws error while querying against the table. SHOW CREATE TABLE skips having some f
[ https://issues.apache.org/jira/browse/HIVE-13203?page=com.atlassian.jira.plugin.system.issuetabpanels:all-tabpanel ] Satyajit varma updated HIVE-13203: -- Priority: Trivial (was: Major) > STRUCT type not allowing more than 266 fields. Table get created with more > fields but throws error while querying against the table. SHOW CREATE TABLE > skips having some fields in STRUCT. > -- > > Key: HIVE-13203 > URL: https://issues.apache.org/jira/browse/HIVE-13203 > Project: Hive > Issue Type: Bug > Components: Database/Schema >Affects Versions: 1.2.0 >Reporter: Satyajit varma >Assignee: Satyajit varma >Priority: Trivial > > I am trying to create a table with multiple STRUCT column types, one of which > having more than 300 fields. > I get the table created with no problem, but when i load i face few errors in > loading up the data.when i check SHOW CREATE TABLE TABLENAME, i get fields > only till 266th column and rest of them do not appear in the table DDL.(check > the issue at StateOrProvinc, search for StateOrProvinc in the second DDL). > Would like to know, if there is any restriction on the number of fields to be > using in STRUCT datatype. > EXAMPLE: > BELOW IS THE DDL i run in hive and the second below DLL is the TABLE DDL i > get from SHOW CREATE TABLE. > CREATE TABLE property_feature.property_feature_new( > `_id` STRUCT<`mls_sysid`:String,`type`:String>, > all_attrs STRUCT<`1`: String ,`10`: String ,`100`: String ,`105`: String > ,`113`: String ,`118`: String ,`126`: String ,`1299`: String ,`1301`: String > ,`1305`: String ,`1307`: String ,`1319`: String ,`1325`: String ,`1327`: > String ,`1329`: String ,`1339`: String ,`1341`: String ,`1345`: String > ,`1351`: String ,`1353`: String ,`1359`: String ,`1363`: String ,`1365`: > String ,`1367`: String ,`1373`: String ,`1377`: String ,`1397`: String > ,`1401`: String ,`1403`: String ,`1405`: String ,`1409`: String ,`1411`: > String ,`1413`: String ,`1417`: String ,`1419`: String ,`1421`: String > ,`1423`: String ,`1431`: String ,`1437`: String ,`1439`: String ,`144`: > String ,`1441`: String ,`145`: String ,`1451`: String ,`1453`: String ,`146`: > String ,`1467`: String ,`1469`: String ,`1483`: String ,`1485`: String > ,`1491`: String ,`1493`: String ,`15`: String ,`1505`: String ,`1519`: String > ,`1521`: String ,`1523`: String ,`155`: String ,`156`: String ,`158`: String > ,`1586`: String ,`1678`: String ,`169`: String ,`17`: String ,`177`: String > ,`1783`: String ,`1785`: String ,`1787`: String ,`1789`: String ,`1793`: > String ,`1795`: String ,`1797`: String ,`1799`: String ,`1801`: String > ,`1803`: String ,`1805`: String ,`1807`: String ,`1809`: String ,`1811`: > String ,`1815`: String ,`1818`: String ,`1826`: String ,`1829`: String > ,`1874`: String ,`1876`: String ,`1878`: String ,`1880`: String ,`1882`: > String ,`207`: String ,`215`: String ,`226`: String ,`2293`: String ,`232`: > String ,`239`: String ,`241`: String ,`245`: String ,`2456`: String ,`248`: > String ,`2482`: String ,`2490`: String ,`2491`: String ,`2492`: String > ,`2493`: String ,`2495`: String ,`25`: String ,`2502`: String ,`2503`: String > ,`2517`: String ,`2522`: String ,`255`: String ,`256`: String ,`2573`: String > ,`2574`: String ,`260`: String ,`263`: String ,`265`: String ,`276`: String > ,`278`: String ,`286`: String ,`293`: String ,`296`: String ,`299`: String > ,`3`: String ,`30`: String ,`307`: String ,`312`: String ,`320`: String > ,`328`: String ,`340`: String ,`348`: String ,`354`: String ,`363`: String > ,`364`: String ,`369`: String ,`375`: String ,`376`: String ,`383`: String > ,`401`: String ,`405`: String ,`409`: String ,`412`: String ,`42`: String > ,`423`: String ,`444`: String ,`445`: String ,`446`: String ,`447`: String > ,`450`: String ,`451`: String ,`452`: String ,`453`: String ,`455`: String > ,`458`: String ,`461`: String ,`463`: String ,`464`: String ,`51`: String > ,`543472980`: String ,`57`: String ,`75`: String ,`90`: String ,`92`: String > ,`AVMYN`: String ,`AccessibilityAmenities`: String ,`AddressPublic`: String > ,`Amenities`: String ,`AmountofWaterFront`: String ,`AppliancesIncluded`: > String ,`AppraiserInitials`: String ,`AppraiserName`: String ,`Basement`: > String ,`BathsFull`: String ,`BathsHalf`: String ,`BathsTotal`: String > ,`BedsTotal`: String ,`Block`: String ,`Book`: String ,`BuildingNumber`: > String ,`City`: String ,`CloseDate`: String ,`ClosePrice`: String , > `CoListAgentDirectWorkPhone`: String ,`CoListAgentEmail`: String > ,`CoListAgentFullName`: String ,`CoListAgentMLSID`: String > ,`CoListAgent_MUI`: String ,`CoListOfficeMLSID`: String ,`CoListOffice