摘要：?貌似大部分人在遇到報(bào)錯(cuò)的時(shí)候，都懶得用翻譯軟件翻譯報(bào)錯(cuò)信息，一般直接拋出來(lái)問(wèn)，甚至連報(bào)錯(cuò)信息都懶得復(fù)制，直接截圖出來(lái)。所以這里特地總結(jié)了一下，最近一段時(shí)間有人經(jīng)常在群里問(wèn)到的報(bào)錯(cuò)信息。 ODPS-0130252:Cartesian product is not allowed “不允許笛卡爾積”主要是為了防止用戶誤操作，不小心漏了關(guān)聯(lián)條件，造成大量的資源的耗費(fèi)。

貌似大部分人在遇到報(bào)錯(cuò)的時(shí)候，都懶得用翻譯軟件翻譯報(bào)錯(cuò)信息，一般直接拋出來(lái)問(wèn)，甚至連報(bào)錯(cuò)信息都懶得復(fù)制，直接截圖出來(lái)。所以這里特地總結(jié)了一下，最近一段時(shí)間有人經(jīng)常在群里問(wèn)到的報(bào)錯(cuò)信息。

ODPS-0130252:Cartesian product is not allowed

“不允許笛卡爾積”
主要是為了防止用戶誤操作，不小心漏了關(guān)聯(lián)條件，造成大量的資源的耗費(fèi)。特別，如果是后付費(fèi)用戶，做大表的笛卡爾積會(huì)占用大量的計(jì)算資源，會(huì)影響整個(gè)資源池的其他用戶的正常使用。
大部分場(chǎng)景下，笛卡爾積都不是用戶的本意。對(duì)于真的想做笛卡爾積的用戶，也有解決辦法：
（1）有小表的時(shí)候，使用mapjoin；
（2）沒(méi)有小表的時(shí)候，左右兩張都單獨(dú)新增一個(gè)字段，例如?1 as join_column?，關(guān)聯(lián)時(shí)候用t1.join_column = t2.join_column；

ODPS-0130241:Illegal union operation - type mismatch for column 12 of UNION, left is BIGINT while right is STRING

“union左右兩邊字段類型不一致”
union左右兩邊的字段個(gè)數(shù)、字段名、字段類型需要完全一致。特別注意有種情況union中的某個(gè)表的某個(gè)字段值為顯示的NULL，比如NULL as col1，但其他表的該字段為bigint，那么需要cast(NULL AS bigint) as col1

ODPS-0130111:Subquery partition pruning exception - records returned from subquery exceeded limit of 1000.

“子查詢結(jié)果數(shù)大于1000行”
這是maxcompute的限制。子查詢一般是習(xí)慣于使用傳統(tǒng)數(shù)據(jù)庫(kù)的開(kāi)發(fā)，經(jīng)常用的查詢方式。而實(shí)際上，無(wú)論是MYSQL還是maxcompute，都不建議使用子查詢。在maxcompute中一般會(huì)用多表關(guān)聯(lián)來(lái)解決問(wèn)題。

ODPS-0130071:Semantic analysis exception - physical plan generation failed: java.lang.RuntimeException: Table(xxxx) is full scan with all partitions, please specify partition predicates.

“分區(qū)表不允許全表掃描，必須指定分區(qū)值”
這條限制主要用來(lái)防止用戶誤操作，造成大量的金錢(qián)和時(shí)間上的浪費(fèi)。很可能用戶的本意只是隨便挑兩條數(shù)據(jù)看看，卻習(xí)慣性的隨手寫(xiě)了一個(gè)select * from table1;其實(shí)無(wú)論是mysql還是maxcompute，都不建議寫(xiě)select *?掃描全表。
對(duì)于隨便挑兩條數(shù)據(jù)看看的需求，推薦使用read關(guān)鍵字，read table1 partition (pt = xxx) 10;即在表table1的pt=xxx分區(qū)中隨便挑10條數(shù)據(jù)出來(lái)看看。read關(guān)鍵字不會(huì)講任務(wù)轉(zhuǎn)化成MR任務(wù)，可以直接返回。
而如果真的需要掃描全表，則可以添加分區(qū)字段的范圍查詢，例如pt >= '2000' and pt <= '2099'。養(yǎng)成添加分區(qū)字段篩選條件的好習(xí)慣。

ODPS-0130071:[1,10] Semantic analysis exception - encounter runtime exception while evaluating function /, detailed message: DIVIDE func result NaN, two params are 0.000000 and 0.000000

“除數(shù)為0”
這個(gè)錯(cuò)誤信息雖然寫(xiě)的比較繞彎，但是還是可以理解的。所有涉及到除法的地方，都必須增加分母不為0的判斷，if(bb IS NOT NULL AND bb <> 0, aa / bb ,NULL)

ODPS-0123111:Format string does not match datetime string

“字符串格式不符合datetime類型”
maxcompute中的datetime類型其實(shí)很好理解，和yyyy-MM-dd HH:mm:ss格式的字符串幾乎是完全等價(jià)的。比如unix_timestamp('2018-01-01 00:00:00')就是正常結(jié)果，如果寫(xiě)成unix_timestamp('2018-01-01')結(jié)果就是NULL。

ODPS-0123031:ODPS partition exception - maximum 60000 partitions allowed

“單表最多6萬(wàn)個(gè)分區(qū)”
一個(gè)表不允許超過(guò)6萬(wàn)的分區(qū)，如果分區(qū)過(guò)多，就要考慮重新設(shè)計(jì)分區(qū)了。

ODPS-0130071:Semantic analysis exception - Top level UNION is not supported

“不允許最外層使用union”
外邊再套一層select就行了。select * from (select a from table1 union all select a from table2) t;

ODPS-0130161:Parse exception - invalid token ')'

“不合法字符”
這種情況一般就是HQL寫(xiě)錯(cuò)了。原因可能多種多樣，一般可以肉眼檢查出來(lái)。
目前dataworks已經(jīng)支持了編譯時(shí)錯(cuò)誤的自動(dòng)檢測(cè)。

ODPS-0420061: Invalid parameter in HTTP request - Fetched data is larger than the rendering limitation. Please try to reduce your limit size or column number.

“獲取數(shù)據(jù)量過(guò)大”
一般這種情況比較容易發(fā)生在“大寬表”的情況下，也可能是某個(gè)字符串類型的字段值過(guò)長(zhǎng)。解決辦法就是指定select 出來(lái)的字段、或者限制條數(shù)。

ODPS-0130071:Semantic analysis exception - only a single expression in the SELECT clause is supported with UDTF's

“select后邊只能有一個(gè)單獨(dú)的UDTF”
如果想把UDTF放在select后邊，那么這個(gè)select里就只能有這一個(gè)UDTF，不能有其他任何字段。
如果不是只想要這一個(gè)UDTF，那就要結(jié)合著lateral view一起用了。

最后補(bǔ)充一句

拋出問(wèn)題給別人，是想讓別人幫忙解決的。我發(fā)現(xiàn)很多人提問(wèn)，習(xí)慣把問(wèn)題描述到一個(gè)“絕不可能出問(wèn)題”的情景下，但是還“偏偏出問(wèn)題”了。

“我XXX也檢查過(guò)了，XXX也檢查過(guò)了，XXX也找人看過(guò)了，也在別人電腦上試過(guò)了，XXX和官方文檔上也一模一樣，之前運(yùn)行過(guò)都沒(méi)問(wèn)題的，現(xiàn)在出問(wèn)題了，到底是怎么回事兒呢？ ”

這就不是一個(gè)想解決問(wèn)題的態(tài)度。有人會(huì)在去醫(yī)院看病的時(shí)候，坐在醫(yī)生對(duì)面說(shuō)，“我什么事兒都沒(méi)有，好得很”么？

閱讀原文

本文為云棲社區(qū)原創(chuàng)內(nèi)容，未經(jīng)允許不得轉(zhuǎn)載。