Monthly Archives: December 2015

The IN_PWR_HIGH Alarm Indicating Source Optical Module Faults

Summary: An OTU board reports the IN_PWR_HIGH alarm indicating that a resistor fails

in the Source optical module. Constantly reporting the alarm does not affect services, but is

perceivable.

Product Line: Transport                     Product Family: WDM

Product Model:  OptiX OSN 1800 OptiX OSN 6800 OptiX Metro 6100

[Problem Description]

Trigger conditions:

There is a low probability that an OTU board reports the IN_PWR_HIGH alarm after it has

been running with an 80-km CWDM Source optical module for over a year.

Symptom:

An OTU board reports the IN_PWR_HIGH alarm while services are running properly.

The maximum receive optical power is –7.x dBm, where x is a digit.

Identification method:

Verify that the following conditions are met:

The OTU board is installed on the OptiX OSN 1800, OptiX Metro 6100, or OptiX OSN 6800.

The model type of the optical module on the OTU board contains the “6128C-SL80″ or

“6128C-L80″ field.

The model type of the optical module can be determined by viewing the manufacturing

information.

Figure 1 shows the manufacturing information of an example optical module with the

Navigator Command (cfg-get-bdinfo:),.

Manufacturing information of an example optical module

OTU

OTU

The model type of the optical module with blue label is 6128C-SL8055G, which

contains the “6128C-SL80″ field.

[Root Cause]

A resistor fails in the 80-km CWDM Source optical module. This increases the

resistance from 3000 ohm to over 1000,000 ohm and the voltage to the saturation

voltage. As a result, the receive optical power exceeds the specified threshold.

 

[Impact and Risk]

This issue may occur on the equipment in and outside China.

Constantly reporting the alarm does not affect services, but is perceivable.

 

[Measures and Solutions]

Recovery measures:

N/A

Workarounds:

Replace the optical module.

Preventive measures:

Replace the optical module.

Optical modules provided by Source Photonics are CWDM optical modules, which

correspond to eight BOM numbers. The following table describes the mapping

between the BOM numbers and wavelengths.

OTU

OTU

Material handling after replacement:

The replaced optical module is scrapped.

 

[Rectification Scope and Time Requirements]

N/A

TwitterLinkedInGoogle+FacebookPinterestTumblrStumbleUponRedditShare

Packet Loss or Bit Errors on an IP RAN-20120401-A

Abstract: When packet loss or bit errors occur on an IP RAN, alarms are reported but no protection

switching is triggered.

Sub-product Line: Network Solutions Dept.   Product Type: ATN 910/950, CX600 series

 

[Problem Description]

On the wireless base stations: 3G base stations become unreachable to the NMS and some

E1 channels are unavailable on 2G base stations. At the same time, On the IP RAN: alarms

indicating abnormal

optical power and CRC bit error threshold-crossing are reported, and BFD status jitters occur.

Trigger conditions:

This problem occurs in either of the following conditions:

On the IP RAN, packet loss occurs on links or bit errors occur on optical ports.

Packet loss or bit errors occur on an ME network or WDM network that the IP RAN traverses.

Fault symptoms:

On the wireless base stations: The voice service quality decreases (the call drop rate increases),

some E1 channels are unavailable, and base stations become unreachable to the NMS (especially

when management channels are provided by TDM ports).

On the IP RAN: alarms indicating abnormal optical power(optical module errors) and CRC bit

error threshold-crossing(CRC error alarm notification) are reported, and BFD status jitters occur.

Judgment methods:

This problem occurs if alarms indicating abnormal optical power and CRC bit error threshold-crossing

are reported, and BFD status jitters occur.

[Root Cause]

On the ATN/CX600, alarms related to bit errors or packet loss are reported but do not trigger protection

switching.

[Impact and Risks]

On the wireless base stations: The voice service quality decreases (the call drop rate increases), some

E1 channels are unavailable, and base stations become unreachable to the NMS (especially when

management channels are provided by TDM ports).

[Measures and Solutions]

Recovery Measure:

When the protection link is functional, disable the faulty port on the working link to trigger protection

switching.

ANT

ANT

Solution:

Protection against packet loss (based on end-to-end detection) and protection against port bit errors

(based on port detection) will be provided in ATN/CX600 versions to be released in 2012Q2.

Flash Space Exhaustion Caused by a License Defect-20120207-A

Summary: When an OptiX PTN 950 NE is configured with two system control boards (active and standby),

the license modules on the system control boards accumulate the board debugging information. The

accumulated debugging information exhausts the space of the flash memory, leading to a failure to save

the configuration data and back up the NE database.

Product Family: PTN                                                  Product Model: OptiX PTN 950

[Problem Description]

Trigger conditions:

The OptiX PTN 950 NE uses two system control boards which run the V100R002C01SPC100 NE

software.

 

Symptom:

The standby system control board exhausts the flash memory space at a speed two times faster than

the active system control board. Therefore, the fault first occurs on the standby system control board.

During the periodical backup of the NE database, if the flash memory has insufficient free space, the

system control board reports a DBMS_ERROR alarm. And also lead to memory leaks, if the memory

leak reaches the threshold, then reported MEM_OVER alarm.

Incremental files are generated when configuration data is delivered or when dynamic services are

configured.

If the flash space becomes insufficient during the process of generating incremental files, the system

control board may fail to generate these incremental files. When this occurs, the NE is reset.

During an NE upgrade, when the NE detects that the free space on the flash memory is insufficient to

save the new software, the NE upgrade fails.

 

Identification method:

The NE type is OptiX PTN 950 and the NE version is V100R002C01SPC100.

The NE uses two system control boards.

 

[Root Cause]

The license module of the system control board software has a defect in data processing. Due to this

defect, the debugging information about the active and standby system control boards continuously

accumulates, exhausting the space of the flash memory. The debugging information occupies 1 MB

flash space every 20 days for the active system control board but every 10 days for the standby system

control board. (The debugging information has no impact on the device functions and applications.)

 

[Impact and Risk]

The active and standby system control boards run out of the flash space.

When the NE database is being backed up, if the free space on the flash memory becomes insufficient,

the database will fail to be backed up. Then the new configuration cannot persist and may be lost once

the NE is reset. And also lead to memory leaks, if the memory leak reaches the threshold, then reported

alarm.

After running out memory will cause the control board reset.

If the free space on the flash memory becomes insufficient during the process of generating incremental

files, then the files will fail to be generated, causing the NE to be reset.

During an NE upgrade, if the free space is insufficient, the NE will fail to load the new software and as

a result the NE upgrade will fail.

 

[Measures and Solutions]

Recovery measures:

1 When a DBMS_ERROR or MEM_OVER alarm is reported, do as follows:

1.1 Run the following commands to check whether there is an HBUMSG.TXT file on the active and

standby system control boards:

:sftm-show-dir:7,”ofs1/license”

:sftm-show-dir:8,”ofs1/license”

1.2 If there is an HBUMSG.TXT file on the two boards, delete the file by running the following

commands:

:sftm-delete-file:7,”ofs1/license/HBUMSG.TXT”

:sftm-delete-file:8,”ofs1/license/HBUMSG.TXT”

1.3 Manual backup database

:dbms-copy-all:drdb,fdb;

If it is MEM_OVER Soft reset the alarm control board

:cfg-reset-board:$the slot of the alarm control board,soft

 

2 When the system control board reset, do as follows:

For a failure to synchronize data between the active and standby system control boards, run the

following command on the active system control board:

:sm-set-nebusy:0,0,0,0,none

2.1 Run the following commands to check whether there is an HBUMSG.TXT file on the active

and standby system control boards:

:sftm-show-dir:7,”ofs1/license”

:sftm-show-dir:8,”ofs1/license”

2.2 If there is an HBUMSG.TXT file on the two boards, delete the file by running the following

commands:

:sftm-delete-file:7,”ofs1/license/HBUMSG.TXT”

:sftm-delete-file:8,”ofs1/license/HBUMSG.TXT”

 

2.3 If the new configuration data is lost, the relate services may affect, please reconfigure the relate

services.

 

Workarounds:

Use the SmartKit Inspector to periodically perform preventive maintenance inspections (PMIs) of

NEs of the specified version (V100R002C01SPC100).You are advised to perform the PMI every

three months.

On the live network the version of the SmartKit Inspector is V100R006C00. Before performing a

PMI, use the automatic upgrade function to upgrade the tool to the CN-PTN Box=P004 patch

version, the later version Inspector also has the similar item.

 

After installing the CN-PTN Box=P004 patch, load the

R6FP005BP004_PreUpgrading_checking_Template.xml file to the SmartKit Inspector to

perform the PMI.

 

Preventive measures:

Install the V100R002C01SPH102 patch or upgrade the NE to a later version.

Some Abnormal OLT GPON CLASS B+ Optical Modules at High Temperature

Abstract: Some OLT GPON CLASS B+ optical modules provided by SOURCE PHOTONICS may rarely

become faulty after long-term working at high temperature, resulting in unstable transmit optical power,

and ONUs being offline.

Product Line: Access network             Product Family: OLT

Product Model: MA5600T, MA5603T, MA5680T, and MA5683T

[Problem Description]

Trigger conditions:

Optical modules have been working at the temperature higher than 60 degrees for a long term.

Optical modules are OLT GPON CLASS B+ optical modules of the SPS4348HHPCDE model provided by

SOURCE PHOTONICS.

When the above conditions are met, 0.143% of the optical modules may have unstable transmit optical

power, resulting in offline ONUs.

Symptoms:

Optical modules have unstable transmit optical power, resulting in offline ONUs.

Identification methods:

Method 1

If the ONU that connects to the PON port on a GPBD board is offline, perform the following steps to

check whether the cause is the involved optical module in the warning.

Check whether the optical module is working at high temperature and belongs to the

SPS4348HHPCDE model.

Run the command to check whether the optical module has been working at high temperature for a

long term.

Temperature(C)         60    —-Enclosure temperature of the involved optical module in the warning

exceeds

60 degrees.

Run the command or query the label on the top side of the optical module to check whether the

optical module is the SPS4348HHPCDE model.

Query using the command

Related optical module information in the query result is as follows:

Vendor PN            SPS4348HHPCDE       —-involved vendor PN

Vendor name          SOURCEPHOTONICS     —-involved vendor name

Query the label on the top side of the optical module.

The involved information is in red blocks on the label on the top side of the optical module, as shown

in Figure 1.

Label on the top side of the optical module

 

olt_1

Check whether the optical module is the involved optical module in the warning based on the transmit

optical power.

If the transmit optical power not in the range from 1.5 dBm to 5 dBm after multiple queries

(using commands), the optical module is the involved optical module in the warning.

TX power(dBm)                -10.61    —-The transmit optical power of the involved optical module

is generally less than

1.5 dBm and a negative number.

Query command:

:display port state [ponid]

MA5600T(config)#interface gpon 0/2

MA5600T(config-if-gpon-0/2)#display port state 1

—————————————————————————

F/S/P                                                                                    0/2/1

Optical Module status                                                  Online

Port state                                                                       Offline

Last down cause                                                              -

Last up time                                                                          -

Last down time                                                                 -

Laser state                                                                    Normal

Available bandwidth(Kbps)                                     1239168

Temperature(C)                                                               60

—-current enclosure temperature

TX Bias current(mA)                                                         12

Supply Voltage(V)                                                            3.07

TX power(dBm)                                                               -10.61

—-current transmit optical power

Illegal rogue ONT                                                           Inexistent

Max rate(Kbps)                                                              2500000

Max Distance(Km)                                                             20

Wave Length(nm)                                                                 1490

Fiber type                                                                         Single Mode

Signal detect                                                                        Failed

TX fault                                                                                 Normal

Identifier                                                                               SFP

Ext.Identifier               GBIC/SFP function is defined by serial ID only

Connector                                                                              SC

Encoding                                                                             NRZ

Length(9um)(Km)                                                           20.0

Length(50um)                                                                    -

Length(62.5um)                                                                -

Length(Copper)                                                                   -

Cc_base                                                                        0xa2

CC_EXT                                                                        0xb2

BR,max                                                                    Unspecified

BR,min                                                                         Unspecified

SFF-8472 Compliance          Includes functionality described in Rev 9.4

Diagnostic Monitoring Type                       Digital diagnostic monitoring

Externally Calibrated

Power measurement type:       Average Power

Options                                                             TX_DISABLE,and disables the serial output

TX_FAULT

LOS(signal inverted from standard definition)

Enhanced Options                                        Alarm/warning flags

TX_DISABLE control and monitoring

TX_FAULT monitoring

Vendor Rev                                                    Unspecified

Vendor PN                                                     SPS4348HHPCDE

—-vendor PN

Vendor SN                                                      B4W2001959

Manufactured                                               10-04-29

Vendor name                                                SOURCEPHOTONICS

—-vendor name

Vendor OUI                                                    0006b5

Vendor specific                         53 50 53 2d 34 33 2d 34 38 48 2d 48 50 2d 43 44

45 20 20 20 20 20 20 20 20 20 00 00 00 00 00 00

Module type                  -

Module sub-type              -

Used type                    -

Encapsulation Type           -

—————————————————————————-

—-End

Method 2

Use the SMARTKIT inspector to query all optical modules. Manually collect information about

vendor PN, transmit optical power, and enclosure temperature in the query results, as shown in

Figure 2.

Characteristics of the involved optical module: The temperature is higher than 60 degrees, the

transmit optical power is not in the range from 1.5 dBm to 5 dBm, the vendor PN is

SPS4348HHPCDE, and the vendor is SOURCE PHOTONICS.

Information collection in the query results

 

olt_2

Select the two check items as shown in the Figure 3.

Inspection template configuration

 

olt_3

 

[Root Cause]

Some optical modules may rarely become faulty after long-term working at high temperature, resulting in unstable

transmit optical power.

[Impact and Risk]

When the problem occurs, corresponding ONUs are offline. According to the vendor, 0.143% of the optical modules

may become faulty at high temperature.

[Measures and Solutions]

Recovery measures:

Perform the following steps to cool the enclosure of the involved optical module.

Tune down the temperature in the equipment room.

If dust on fans or subracks results in weak heat dissipation capacity, urge customers to clear the dust. For details,

customers can refer to corresponding product documentation, such as the MA5600T&MA5603T V800R011C00

Product Documentation 03.

Manually accelerate the rotating speed of fans. (Long-term high-speed rotation shortens the useful life of a fan,

so this solution is just a temporary solution.) Setting examples are as follows:

For V800R005/V800R006/V800R007/V800R008:

MA5600T(config)#interface emu 0

MA5600T(config-if-fan-0)#fan speed mode manual

MA5600T(config-if-fan-0)#fan speed adjust 5

 

For V800R009/V800R010/V800R011/V800R012:

MA5600T(config)#diagnose

MA5600T(diagnose)%%fan speed mode manual 6

olt_4

 

The digit in red in the command indicates the rotating speed level of the fan (the highest levels for V800R008 and

V800R011 are 5and 6 respectively), the higher the digit, the faster the rotating speed. It is recommended to tune up

the rotating speed to the maximum, and then gradually tune it down. Long-term high-speed rotation shortens the

useful life of a fan. Therefore, exercise caution when

adopting this solution.

Preventive measures:

Use the preventive maintenance inspection tool to check the enclosure temperature of optical modules on the live

network. For the site where the enclosure temperature of optical modules is higher than 60 degrees, urge customers

to improve equipment room environment.

The recommended temperature is about 23 (±1) degrees.

Solution:

When the problem occurs, perform the recovery measures to cool involved optical modules, and then perform the

following steps based on actual situations:

If the problem is solved, the optical module can be used but not used at high temperature.

If the problem persists (the hardware of the optical module is faulty), use a spare part to replace it. A small number

of faulty optical modules can be directly sent to Huawei for repair based on the specified procedure. A large number

of faulty optical modules are handled by corresponding regional service contact personnel.

[Warning Conditions]

The warning does not take effect when the trigger conditions are not met.

[Attachment]

None